DALL·E 3限量测试，已由微软Bing抢先开启，看看你是欧皇之一吗？

△来自WindowsLatest

没收到资格也没关系，再加上第三方研究预览、OpenAI员工的内部试玩，各种测试案例纷纷涌现，包看过瘾。

最夸张的一个，要数“指定画面中出现50个不同物体”，结果足足画出了几百个。

除了简单平铺排列，更可以把这些物体组合得更有创意一些。

马骑宇航员这种反事实概念，过去OpenAI和谷歌的各种模型都只能画出宇航员骑马。

在论文一般当成失败案例，当时还被AI悲观主义者马库斯好一顿嘲讽。

现在，DALL·E 3在ChatGPT加持下轻松搞定。

DALL·E 3这次这么大进步，不仅仅是OpenAI自己的努力，而是与微软通力合作的结果。

虽然没有明确说明，但贡献名单中研究部分就有至少3位微软工程师与研究员参与，推理优化部分更是大部分成员来自微软DeepSpeed团队。

回看GPT-4时还是主要由OpenAI内部研发，再给微软和其他研究机构开放权限一同测试。

这次合作模式的变化，也代表两家公司关系进一步加深。

一张画指定50个物体

由微软Bing首席执行官Mikhail Parakhin确认，最幸运的百分之几用户已经获得测试资格了。

由于名额着实有限，等不及的网友纷纷在线提出脑洞，请有号的人帮忙测试。

提出画50个不同物体的网友，就是想测试DALL·E 3一张画中能容纳多少物体，类似大语言模型的“上下文窗口”。

收到研究预览版的第三方设计师Nathan Shipley接下了这个挑战。

首先他先让ChatGPT随机列出50个日常物体，然后直接要求把这些物体都画在一幅画里就可以了。完整的提示词是ChatGPT自己补全，再由DALL·E 3画出来。

接下来Nathan问：“你能创建一个冲浪者在努力冲浪时将这些物体堆成一堆的图像吗？”

ChatGPT在提示词中补充了一些细节：

结果一次尝试就得到了基本符合要求的图像，只是人物表情看起来更像是非常恐慌，而不是轻微恐慌。

后来Nathan又提出换一个更低的视角的要求，这回ChatGPT把提示词中的人物描述换成了“一名西班牙老年女性”。

围观网友都觉得非常惊人，但也指出为什么铅笔的大小与其他物体不成比例。

有人猜测模型只是知道某样物体长什么样子，但不知道其相对大小，尤其钢笔宣传图片通常会采用近景。

此外Nathan还从ChatGPT嘴里拷问出了用户都能控制画面的哪些参数。

ChatGPT回复如下：

• 描述：您可以提供所需图像的详细描述。您越具体和详细，生成的图像就越接近您的愿望。
• 风格和媒介：您可以指定图像的风格或媒介，例如“油画”、“照片”、“插画”、“卡通”、“水彩画”、“3D渲染”等。
• 分辨率：默认情况下，图像以1729x1024分辨率生成。但如果您的描述建议使用全身肖像或更适合高纵横比的内容，则将以1024x1792生成图像。如果需要，您还可以请求正方形分辨率 (1024x1024)。
• 图片数量：如果您没有指定，我通常会根据您的描述创建四个不同的图片。但是，您可以请求特定数量（最多四个）。
• 修改：如果您对初始结果不满意，可以提供反馈并请求修改。虽然我无法直接修改现有图像，但我可以使用您的反馈来生成更符合您的愿景的新图像。
• 随机种子：如果您想修改以前的图像，我可以使用该图像元数据中的种子来生成新版本。这确保了原始图像和修改后的图像之间的一定一致性。
• 请注意，存在某些限制。例如公众人物的形象，以及最近100年内的艺术家的风格，都无法直接创建。

重点在后面：

马骑宇航员难题破解

OpenAI内部员工中，Will DePue是最积极公开DALL·E 3试玩结果的了。

在马骑宇航员测试中，他表示其实也不是100%成功。

有网友尝试用MidJourney获得相同的结果，只能说也不是完全不行，就是要费老大劲了。

如果你是MidJourney资深用户，不妨试试能不能成。

网友提出的“8个长颈鹿喝水”挑战中，DALL·E 3再一次展现出很难把数字数准确的弱点。

△数数图中一共有几个长颈鹿

更多错误尝试中还出现了一个双头长颈鹿。

让AI正确计数这次没有解决，但至少解决了理解空间关系的问题。

网友提出的“四匹斑马在草原上奔跑，一头狮子在后面追赶，上面有一只鹰，图片中没有其他动物”挑战中，空间关系基本正确，但是多了一只斑马。

相比之下，DALL·E 2和Stable Diffusion对空间关系的理解都要更差。

OpenAI负责ChatGPT企业版的Adam Goldberg也晒出不少高质量结果，不过没有分享提示词。

负责AI写代码和调用工具的Jerry Tworek则搞出不少抽象概念画，如“机械细胞的分裂”。

以及“横跨银河系的计算机程序树”。

微软OpenAI通力合作

DALL·E 3这次巨大提升，除了整合ChatGPT，图像生成部分具体是怎么做到的呢？

很可惜，鉴于OpenAI越来越Close的趋势，很可能不会像前两代那样公布论文了，只能从贡献名单中略作猜测。

DALL·E 2论文共有5位作者。

而DALL·E 3暂且不看产品、安全、公共沟通和法律等团队，光研究部分就有18人参与。

其中提出一致性模型（Consistency Models）的清华校友宋飏（Yang Song）在列。

一致性模型比当前最流行的扩散模型速度更快，3.5秒就能生成64张256*256的图像。

但宋飏此次属于次要研究贡献，不确定是否DALL·E 3使用了一致性模型，更可能是在改良扩散模型中借鉴了他的方法。

此外，除了DALL·E 2作者和ChatGPT团队的欧阳龙等，至少有3位研究者来自微软。

Jianfeng Wang博士毕业于中科大，在微软任主任研究员。

Lijuan Wang博士毕业于清华大学，在微软任主任研究经理。

两人曾参与无限画布图片生成NUWA-Ininity的研究。

李琳婕（Lindsey Li）是北理工校友，分别从普渡大学和UC圣地亚哥获得两个硕士学位，在微软任资深研究员，在多模态领域有多篇顶会论文。

除了研究方面，DALL·E 3的推理优化有微软DeepSpeed团队深度参与。

Deepspeed是开源的深度学习优化库，减少计算功耗和内存使用，在现有硬件上通过更好的并行来训练和推理大规模分布式模型。

其中不少人都表示很高兴能参与这项工作，并对DALL·E 3的发布很激动。

最后，在特别贡献中，微软的Bing首席执行官Mikhail Parakhin、Azure云首席副总裁Misha Bilenko都在其中。

微软之前的发布活动中也确认了Bing会直接集成DALL·E 3。

按照现在规则，Bing上的DALL·E 2是免费的。会发放99个加速代币，没代币只是需要更长时间排队。

虽然10月份DALL·E 3在ChatGPT Plus要收费每月20美元。

但既然GPT-4在Bing上是免费提供的，将来DALL·E 3免费玩也可以期待一波了～

参考链接：

[1]https://x.com/willdepue/status/1705005718666158107

[2]https://x.com/CitizenPlain/status/1705248617131291032

[3]https://x.com/MParakhin/status/1704563792645079143

— 完 —

量子位 QbitAI · 头条号签约

","gnid":"9931fb0da966f58c7","img_data":[{"flag":2,"img":[{"desc":"","height":"1154","title":"","url":"https://p0.ssl.img.360kuai.com/t01171cd240182a66e1.jpg","width":"1080"},{"desc":"","height":"462","title":"","url":"https://p0.ssl.img.360kuai.com/t01ab74c02246412790.jpg","width":"1080"},{"desc":"","height":"889","title":"","url":"https://p0.ssl.img.360kuai.com/t018273ac6c2ce32ab7.jpg","width":"1080"},{"desc":"","height":"810","title":"","url":"https://p0.ssl.img.360kuai.com/t01c626a80d840e8658.jpg","width":"1064"},{"desc":"","height":"860","title":"","url":"https://p0.ssl.img.360kuai.com/t011630937b9c612050.jpg","width":"1080"},{"desc":"","height":"581","title":"","url":"https://p0.ssl.img.360kuai.com/t01329ba6ea240dceb0.jpg","width":"1080"},{"desc":"","height":"252","title":"","url":"https://p0.ssl.img.360kuai.com/t017c0788e8d048f8fc.jpg","width":"1080"},{"desc":"","height":"234","title":"","url":"https://p0.ssl.img.360kuai.com/t01fba46655508b05ba.jpg","width":"1080"},{"desc":"","height":"1000","title":"","url":"https://p0.ssl.img.360kuai.com/t0118cb882ebc8db609.jpg","width":"1060"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01b7840493a6663f2b.jpg","width":"1080"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01849de767566b4974.jpg","width":"1080"},{"desc":"","height":"235","title":"","url":"https://p0.ssl.img.360kuai.com/t0163b14b7dd6a57c30.jpg","width":"1080"},{"desc":"","height":"265","title":"","url":"https://p0.ssl.img.360kuai.com/t01763f194c4a6b9bc6.jpg","width":"1080"},{"desc":"","height":"1000","title":"","url":"https://p0.ssl.img.360kuai.com/t01d303c21dbea176b1.jpg","width":"1334"},{"desc":"","height":"439","title":"","url":"https://p0.ssl.img.360kuai.com/t015aaba949ef7c7d84.jpg","width":"768"},{"desc":"","height":"417","title":"","url":"https://p0.ssl.img.360kuai.com/t01f30f9c543243b6e5.jpg","width":"1080"},{"desc":"","height":"786","title":"","url":"https://p0.ssl.img.360kuai.com/t01b74bff6f996bb53a.jpg","width":"1080"},{"desc":"","height":"439","title":"","url":"https://p0.ssl.img.360kuai.com/t01461ad2f202b9666e.jpg","width":"768"},{"desc":"","height":"730","title":"","url":"https://p0.ssl.img.360kuai.com/t01b9e0348b4b649230.jpg","width":"1080"},{"desc":"","height":"427","title":"","url":"https://p0.ssl.img.360kuai.com/t016647ba26be052505.jpg","width":"1080"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01fdacc1e23aebbcdd.jpg","width":"1080"},{"desc":"","height":"750","title":"","url":"https://p0.ssl.img.360kuai.com/t015566b6a4e1d36306.jpg","width":"1080"},{"desc":"","height":"867","title":"","url":"https://p0.ssl.img.360kuai.com/t010e23a1a7ca1e9c14.jpg","width":"1080"},{"desc":"","height":"788","title":"","url":"https://p0.ssl.img.360kuai.com/t013429d4ea286ae3c1.jpg","width":"1080"},{"desc":"","height":"725","title":"","url":"https://p0.ssl.img.360kuai.com/t01275e6f796734c65a.jpg","width":"1080"},{"desc":"","height":"886","title":"","url":"https://p0.ssl.img.360kuai.com/t015ccfda39245d948c.jpg","width":"1080"},{"desc":"","height":"538","title":"","url":"https://p0.ssl.img.360kuai.com/t0170ac6fc5e82e7d99.jpg","width":"1080"},{"desc":"","height":"370","title":"","url":"https://p0.ssl.img.360kuai.com/t0126ec9dae5fccfa6b.jpg","width":"1080"},{"desc":"","height":"626","title":"","url":"https://p0.ssl.img.360kuai.com/t010bf1bd69b9811564.jpg","width":"1018"},{"desc":"","height":"429","title":"","url":"https://p0.ssl.img.360kuai.com/t01cc990cab614c6ba9.jpg","width":"1080"},{"desc":"","height":"200","title":"","url":"https://p0.ssl.img.360kuai.com/t01e36bc461c7c95415.jpg","width":"1080"},{"desc":"","height":"310","title":"","url":"https://p0.ssl.img.360kuai.com/t01c1f6010ca777a6bf.jpg","width":"1080"},{"desc":"","height":"193","title":"","url":"https://p0.ssl.img.360kuai.com/t016234483dea5955d6.jpg","width":"1080"},{"desc":"","height":"1223","title":"","url":"https://p0.ssl.img.360kuai.com/t01d95a2a71b8cb94ad.jpg","width":"1080"},{"desc":"","height":"922","title":"","url":"https://p0.ssl.img.360kuai.com/t01be36db4cb90031cc.jpg","width":"1080"}]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"pika","pub_time":1695530880000,"pure":"","rawurl":"http://zm.news.so.com/dd9d422b3f0bc0b621e871c0aaff7eaa","redirect":0,"rptid":"ec803dd2d4379904","rss_ext":[],"s":"t","src":"量子位","tag":[{"clk":"ktechnology_1:宇航员","k":"宇航员","u":""}],"title":"DALL·E 3必应开测！马骑宇航员难题攻破，一张画指定50个物体

卢郭盆896用flash cs5.5钢笔工具画动漫小狗怎么画? -
芮农向13347924281 ______ 图层1,参考图;加图层勾出轮廓,如果要做动作,身体和四肢要分别图层绘制;分别填充上色.

卢郭盆896Photoshop中的钢笔工具怎么用啊?
芮农向13347924281 ______ 钢笔工具是个比较实用的东西,主要用于扣图~想练好它,你可以找些卡通图来练习~我就是这样练出来的~ 使用钢笔工具时,快画好时,按Ctrl键,会形成一个闭合路径,转成选区就不用我说了吧,其次,Alt键很有用,当你拉出一个曲线,会出现一个转动后柄,按ALT键看看,会有什么效果~经常练习就行~

卢郭盆896初学者应该怎么学习photoshop? -
芮农向13347924281 ______ 希望能对大家有所启迪. 1.不要看到别人的作品第一句话就说:给个教程吧!你应该想这个是怎么做出来的.当你自己想出来,再对照别人的教程的时候,你就知道自己和别人的思路的差异 2.初学者请不要看太多太多的书那会误人子弟的 ,先...

卢郭盆896这些画漫画的笔都叫什么名字? -
芮农向13347924281 ______ 1:自动笔2:黑色记号笔(笔头教细的如视频)3:应是针管水笔(考试或办公常用的那种)眼睛应该也是用这种笔只不过是青色的、4:各颜色的马克笔(皮肤、头发、领结、背景) 个人建议:其实不用纠结什么笔的.只要能画出效果就OK了.呵呵努力哈.

卢郭盆896如何把照片做成卡通 -
芮农向13347924281 ______ 方法多种多样,这里介绍一种作为参考,用的工具是PS: 先对其做色彩调整,然后用涂抹工具等做出仿手绘效果,再用画笔等工具做出烟雾和高光线条,最后加上文字即完成仿手绘插画效果的制作. 步骤 1、打开原图素材. 2、按Ctrl + M调...

卢郭盆896现在漫画还用蘸水笔吗?和普通钢笔有什么区别? -
芮农向13347924281 ______ 铅笔是不可以的,无论彩色的还是黑白的,铅笔还是画草稿的时候用吧. 蘸水笔之所以叫漫画专用工具,肯定有其独特之处,每种笔头画出的线条都是不一样的,就拿G笔来说吧,G笔很有弹性,使劲和轻抬笔线条的变化是非常大的,用它勾出...

卢郭盆896漫画制作流程 -
芮农向13347924281 ______ 1.想画什么 首先,你要知道自己想画什么?如果,你的想象力足够的话,想画什么就画什么,那你可以起稿画了.如:人物、影物或者其它等等.如果,你是一个初学漫画的朋友,想象力不足,我们可以找图片来帮助自己作画. 想阿想阿~但...

卢郭盆896学习画漫画 -
芮农向13347924281 ______ 学好漫画有3步: 第一,基础.到美术培训班扎实的学习几年,这是捷径,自学的话,不知何年学成,主要是素描 色彩 速写(画漫画主要还是速写,色彩和素描也很重要),认真去学一年多到两年就可以打好底子...

卢郭盆896漫画等级考试 -
芮农向13347924281 ______ 一级30 分钟A4白纸,铅笔学会用线条临摹基本的漫画形象(人物/动物)对指定形象的基本形状的把握.二级30 分钟A4白纸,铅笔利用线条描绘出带有简单特点的人物,例如年龄、性别、胖瘦、高矮、性格、身份对于特定形象特征的把握能力...