首页 >>  正文

无限制的ai绘图

来源:baiyundou.net   日期:2024-09-02

自生成式AI登场以来,工业革命的奇景每天都在上演。

仅在图像领域,众多企业与高校密集发布的重磅模型接连带来令人目眩神迷的震撼体验。如果说AI绘画在一开始曾给人类艺术家带来被替代的恐慌,那么,随着这一绘画工具的数量与类型愈加丰富,AI绘画也开始了内卷——纷至沓来的“新神”也不断将曾经的老大推下王座,可谓“遍地是大王,短暂又辉煌”。

实现五倍文生图效率提升

最近,Meta宣布开发出一款名为CM3Leon(发音类似于“变色龙”)的人工智能模型,该模型可以根据文本生成超高分辨率的图像,也可以为图像生成文本描述,甚至可以根据文本指令编辑图像。

CM3leon的训练采用了从仅文本语言模型中调整而来的方法,此方法简单,并可产生强大的模型,它表明基于tokenizer(分词器)的transformer模型可以和现有的基于Diffusion(扩散)的生成模型一样有效地进行训练。

即使只在一个只有30亿文本符号的数据集上进行训练,CM3leon的零样本性能与在更广泛的数据集上训练的较大模型相比也不逊色

Meta表示,CM3leon的计算量比Stable Diffusion、Midjourney等基于Diffusion的模型少了五倍,但它在文本到图像生成方面实现了最先进的性能在视觉问答和长篇说明各种视觉语言任务中表现出色。例如,CM3leon可以处理更复杂的prompt,在文本引导下编辑图片中天空的颜色,在图片中房间的特定位置添加水槽和镜子等物体。

在对最广泛使用的图像生成基准测试(零样本MS-COCO)的性能进行比较时,CM3leonFID(Fréchet Inception Distance,用来计算真实图像与生成图像的特征向量间距离的一种度量,FID值越小则相似程度越高值为4.88,在文本到图像生成方面确立了新的SOTA(state of the art,最先进的技术水准),优于Google的Parti(FID 7.23)、Stable Diffusion(FID 8.32)、OpenAI的DALL-E2(FID 10.39)等一系列知名图模型。这一成就突显了检索增强的潜力,并凸显了扩展策略对自回归模型性能的影响。

CM3leon具有自回归模型的多功能性和有效性,同时保持了低训练成本和推断效率。它是一个因果掩码混合模态(CM3)模型,因为它可以生成基于任意其他图像和文本内容序列的文本和图像序列。这大大扩展了以前仅支持文本到图像或仅支持图像到文本的模型的功能。

业界认为,CM3leon的能力已跃居多模态市场巅峰。Meta表示,CM3Leon是图像生成和理解领域的一大进步,但也承认该模型可能存在数据偏见的问题,并呼吁行业加强透明度和监管。

计算机视觉迎来GPT-4时刻

图像分割是图像理解的重要基石,也是计算机视觉(CV)领域中的一个重要研究方向,在自动驾驶、无人机、工业质检、病理影像分割等领域都有着举足轻重的地位。

随着深度学习技术的兴起,早期依靠亮度、颜色和纹理等低级特征的图像分割方法逐渐被淘汰,基于神经网络的图像分割方法取得了巨大的突破——通过训练深度神经网络,可以学习到更高层次、更抽象的特征表示,从而能够更准确地进行图像分割。

今年4月,Meta发布了首个基础图像分割模型SAM(即Segment Anything Model,分割一切模型),以及对应的数据库SA-1B,瞬间引爆了AI圈。SAM是面向通用场景的图像分割模型,可用于任何需要对图像进行识别和分割的场景,基于prompt工程,可以成为内容创作、AR/VR、科学领域或通用AI系统的组件,实现多模态处理。

SAM大大提升了普通CV模型的图像分割能力,对于未知和模棱两可的场景也能实现较好的图像分割效果,有望大幅降低计算机识别门槛。英伟达AI科学家JimFan曾表示“SAM是计算机视觉领域的GPT-3时刻”。

但仅仅3个月后,SAM的地位就受到了挑战。

最近,香港科技大学团队开发出一款比SAM更全能的图像分割模型,名为Semantic-SAM。Semantic-SAM可以完全复现SAM的分割效果并达到更好的粒度和语义功能, 支持通用分割(全景、语义、实例分割)、细粒度分割、具有多粒度语义的交互式分割、多粒度图像编辑广泛的分割任务及其相关应用。

此外,Semantic-SAM在粒度丰富性、语义感知性、多功能等方面优势明显,完胜Meta的SAM:只需单击一下即可输出多达6个粒度分割,与SAM相比,更可控地匹配用户意图,无需多次移动鼠标寻找想要分割的区块

仅对图像进行分割已无法满足AI研究人员们的野心。视频分割是自动驾驶、机器人技术、视频编辑等应用场景的基础技术,但SAM无法处理视频分割任务。

近日,来自苏黎世联邦理工学院、香港科技大学、瑞士洛桑联邦理工学院的研究人员突破了上述局限,其发布的SAM-PT模型将SAM的零样本能力扩展到动态视频的跟踪和分割任务上,在多个视频物体分割数据集基准中取得了稳定且强大的零样本性能。

AI绘图的另一面

继不断更新Zoom Out(平移)、Pan(扩展)等新功能后,Midjourney最新的V6版本也将会在本月内发布。日前,AI绘图独角兽Stable Diffusion也推出了一项素描转图像的服务Stable Doodle。

对于内容创作者等C端用户来说,AI作图工具的迭代与进化带来的高精度、高质量的内容赋予了更优质的体验和更多元的选择;借助AI内容生成和图像分割/识别模型,可穿戴设备的AR/VR人机交互效率和使用体验将得到显著提升,工业、自动驾驶、医疗等领域的工作效率、识别的精准度也将大幅提升。

但在此良夜之中,仍匍匐着一些被遮盖的隐患。

随着模型的不断更新和迭代,用户的绘画或图像数据可能会被上传到云上的服务器,或被用于训练更为先进的模型,导致一些隐私与版权问题;同时,无限制的AI制图也正被用于基于真实人物的色情图片的制作,试探着法律的底线。

AIGC不断变革内容生产模式的同时也影响着内容的消费方式,更新奇更惊艳的生成内容带来的刺激转瞬即逝。在无数次输入文字描述的选择中、在回声效应的不断固化下,AI的画笔究竟会创造出无比丰富的内容市场还是千篇一律的审美取向,答案令人担忧。

","gnid":"9f95c6d3ae491cd63","img_data":[{"flag":2,"img":[]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"hbase","pub_time":1689770640000,"pure":"","rawurl":"http://zm.news.so.com/1168381214442bc55a50dd6c8873839b","redirect":0,"rptid":"79253b1327fefa88","rss_ext":[],"s":"t","src":"动点科技","tag":[],"title":"AI 作图内卷加剧:Meta 刚打败 Midjourney,又被港科大超越?

车便育4886用AI画矢量的齿轮,怎么才能直接把星星的每个角都变成圆角啊 -
充水步19872126953 ______ 用直接选择工具点击星星的顶点,然后点将锚点转换成平滑.是这效果吗?

车便育4886我很不习惯用AI每次做图都用PS感觉方便很多,请问下在什么情况下该选择什么样的软. -
充水步19872126953 ______ 其实每种软件大体上都差不多,你用习惯了PS那就用它,它也完全能处理你想要处理的东西!!

车便育4886.ai格式的文件有什么特点? -
充水步19872126953 ______ Adobe Illustrator 打开, 也可以用ps打开. 低版本的ai,还可以用coreldRAW打开. AE可以调用, Adobe Bridge 、Adobe Flash等都可以调用. 属于设计领域一个广泛运用的文件格式. ———————————————————— 文件中可以包含矢量内容和点阵图内容, 一般的制图软件和三维软件都有该文件格式的接口.

车便育4886AI是做什么的? -
充水步19872126953 ______ 也是制图用的, 做矢量图形功能比PS更强大,illustator的意思是插图画家,它的图象计算是基与矢量的,和photoshop有本质的区别.photshop 处理的图象是位图.这两个概念,入门书上都会有介绍. photshop比较专业于图象效果的处理,比如照片修饰. 两个软件都可用来排版,做一些海报,书籍封面什么的. 当版面上要求的矢量元素比较多的时候就不得不用 illustrator了.像公司标志等有严格的形状和标准色,就要用illustrator画出来. illustrator的图象都是一根根线条和很容易区别的色块 PS 要一个一个图层 麻烦

车便育4886AI怎么取消上一步操作 -
充水步19872126953 ______ AI软件取消上一步操作按键盘中的CTRL+Z. AI软件中文件操作的基本快捷键如下: 新建文件:Ctrl+N 打开文件:Ctrl+O 文件存盘:Ctrl+S 另存为:Ctrl+shift+S 关闭文件:Ctrl+W 恢复到上一步:Ctrl+Z 打印文件:Ctrl+P 退出AI:Ctrl+Q 扩展资...

车便育4886ps和ai的区别大吗? -
充水步19872126953 ______ PS: 处理位图,不足就是放大缩小会失真.简单的说就是,这个软件比较适合图层处理,单个图像处理,比如设计海报,做些单页等.或者是修图,毕竟是亚洲四大邪术,所以修图磨皮必须的,或者是用来做电商板块的banner,详情图,主图等.最后就是ui设计~用户界面设计. AI 处理矢量图,矢量图处理后放大缩小都不会虚图.一般做logo设计,名片,做图形处理,做包装盒设计,做印刷多选择ai.

车便育4886PS和AI那个比较好用关于设计软件的
充水步19872126953 ______ 这个是看用途的 photoshop主要是用于修图抠图切图等,改下图片的尺寸什么的都可以用photoshop完成,切图是网页设计上的用途. AI主要是制作用于印刷的,它主要是矢量(无限放大)的,而photoshop可以辅助ai制作东西,但是photoshop中要考虑图片的分辨率能否印刷,如果就是修改下照片用于观摩的话还是用photoshop就可以了,比较他的修图效果比较多,如果用于印刷制作的话还是用ai比较好

车便育4886ai虚线快捷键 - ai里虚线怎么调
充水步19872126953 ______ 1. ai里虚线怎么调AI线段改成虚线的具体步骤:1、我们打开AI设计软件,鼠标点击切换到直接选择工具.2、在AI画板中框选我们所需要修改的图形或者线段.3、点击箭头...

车便育4886ps和ai作图有什么差别 -
充水步19872126953 ______ 一个是位图,一个是矢量图 位图就是你看到普通图片那种,颜色信息丰富,但放大会模糊并且有马赛克块 矢量图是可以无限放大都不会模糊和马赛克的.但好像颜色控制不好,经常会很鲜艳和单调 首先,PS是处理位图图像的,AI是处理矢量图...

车便育4886Adobe Iiiustrator CS2 是什么软件 有什么作用 -
充水步19872126953 ______ 就是大家说的AI 平面制作软件. 做平面排版什么的都要用到它的.

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024