DALL·E 3限量测试，已由微软Bing抢先开启，看看你是欧皇之一吗？

△来自WindowsLatest

没收到资格也没关系，再加上第三方研究预览、OpenAI员工的内部试玩，各种测试案例纷纷涌现，包看过瘾。

最夸张的一个，要数“指定画面中出现50个不同物体”，结果足足画出了几百个。

除了简单平铺排列，更可以把这些物体组合得更有创意一些。

马骑宇航员这种反事实概念，过去OpenAI和谷歌的各种模型都只能画出宇航员骑马。

在论文一般当成失败案例，当时还被AI悲观主义者马库斯好一顿嘲讽。

现在，DALL·E 3在ChatGPT加持下轻松搞定。

DALL·E 3这次这么大进步，不仅仅是OpenAI自己的努力，而是与微软通力合作的结果。

虽然没有明确说明，但贡献名单中研究部分就有至少3位微软工程师与研究员参与，推理优化部分更是大部分成员来自微软DeepSpeed团队。

回看GPT-4时还是主要由OpenAI内部研发，再给微软和其他研究机构开放权限一同测试。

这次合作模式的变化，也代表两家公司关系进一步加深。

一张画指定50个物体

由微软Bing首席执行官Mikhail Parakhin确认，最幸运的百分之几用户已经获得测试资格了。

由于名额着实有限，等不及的网友纷纷在线提出脑洞，请有号的人帮忙测试。

提出画50个不同物体的网友，就是想测试DALL·E 3一张画中能容纳多少物体，类似大语言模型的“上下文窗口”。

收到研究预览版的第三方设计师Nathan Shipley接下了这个挑战。

首先他先让ChatGPT随机列出50个日常物体，然后直接要求把这些物体都画在一幅画里就可以了。完整的提示词是ChatGPT自己补全，再由DALL·E 3画出来。

接下来Nathan问：“你能创建一个冲浪者在努力冲浪时将这些物体堆成一堆的图像吗？”

ChatGPT在提示词中补充了一些细节：

结果一次尝试就得到了基本符合要求的图像，只是人物表情看起来更像是非常恐慌，而不是轻微恐慌。

后来Nathan又提出换一个更低的视角的要求，这回ChatGPT把提示词中的人物描述换成了“一名西班牙老年女性”。

围观网友都觉得非常惊人，但也指出为什么铅笔的大小与其他物体不成比例。

有人猜测模型只是知道某样物体长什么样子，但不知道其相对大小，尤其钢笔宣传图片通常会采用近景。

此外Nathan还从ChatGPT嘴里拷问出了用户都能控制画面的哪些参数。

ChatGPT回复如下：

• 描述：您可以提供所需图像的详细描述。您越具体和详细，生成的图像就越接近您的愿望。
• 风格和媒介：您可以指定图像的风格或媒介，例如“油画”、“照片”、“插画”、“卡通”、“水彩画”、“3D渲染”等。
• 分辨率：默认情况下，图像以1729x1024分辨率生成。但如果您的描述建议使用全身肖像或更适合高纵横比的内容，则将以1024x1792生成图像。如果需要，您还可以请求正方形分辨率 (1024x1024)。
• 图片数量：如果您没有指定，我通常会根据您的描述创建四个不同的图片。但是，您可以请求特定数量（最多四个）。
• 修改：如果您对初始结果不满意，可以提供反馈并请求修改。虽然我无法直接修改现有图像，但我可以使用您的反馈来生成更符合您的愿景的新图像。
• 随机种子：如果您想修改以前的图像，我可以使用该图像元数据中的种子来生成新版本。这确保了原始图像和修改后的图像之间的一定一致性。
• 请注意，存在某些限制。例如公众人物的形象，以及最近100年内的艺术家的风格，都无法直接创建。

重点在后面：

马骑宇航员难题破解

OpenAI内部员工中，Will DePue是最积极公开DALL·E 3试玩结果的了。

在马骑宇航员测试中，他表示其实也不是100%成功。

有网友尝试用MidJourney获得相同的结果，只能说也不是完全不行，就是要费老大劲了。

如果你是MidJourney资深用户，不妨试试能不能成。

网友提出的“8个长颈鹿喝水”挑战中，DALL·E 3再一次展现出很难把数字数准确的弱点。

△数数图中一共有几个长颈鹿

更多错误尝试中还出现了一个双头长颈鹿。

让AI正确计数这次没有解决，但至少解决了理解空间关系的问题。

网友提出的“四匹斑马在草原上奔跑，一头狮子在后面追赶，上面有一只鹰，图片中没有其他动物”挑战中，空间关系基本正确，但是多了一只斑马。

相比之下，DALL·E 2和Stable Diffusion对空间关系的理解都要更差。

OpenAI负责ChatGPT企业版的Adam Goldberg也晒出不少高质量结果，不过没有分享提示词。

负责AI写代码和调用工具的Jerry Tworek则搞出不少抽象概念画，如“机械细胞的分裂”。

以及“横跨银河系的计算机程序树”。

微软OpenAI通力合作

DALL·E 3这次巨大提升，除了整合ChatGPT，图像生成部分具体是怎么做到的呢？

很可惜，鉴于OpenAI越来越Close的趋势，很可能不会像前两代那样公布论文了，只能从贡献名单中略作猜测。

DALL·E 2论文共有5位作者。

而DALL·E 3暂且不看产品、安全、公共沟通和法律等团队，光研究部分就有18人参与。

其中提出一致性模型（Consistency Models）的清华校友宋飏（Yang Song）在列。

一致性模型比当前最流行的扩散模型速度更快，3.5秒就能生成64张256*256的图像。

但宋飏此次属于次要研究贡献，不确定是否DALL·E 3使用了一致性模型，更可能是在改良扩散模型中借鉴了他的方法。

此外，除了DALL·E 2作者和ChatGPT团队的欧阳龙等，至少有3位研究者来自微软。

Jianfeng Wang博士毕业于中科大，在微软任主任研究员。

Lijuan Wang博士毕业于清华大学，在微软任主任研究经理。

两人曾参与无限画布图片生成NUWA-Ininity的研究。

李琳婕（Lindsey Li）是北理工校友，分别从普渡大学和UC圣地亚哥获得两个硕士学位，在微软任资深研究员，在多模态领域有多篇顶会论文。

除了研究方面，DALL·E 3的推理优化有微软DeepSpeed团队深度参与。

Deepspeed是开源的深度学习优化库，减少计算功耗和内存使用，在现有硬件上通过更好的并行来训练和推理大规模分布式模型。

其中不少人都表示很高兴能参与这项工作，并对DALL·E 3的发布很激动。

最后，在特别贡献中，微软的Bing首席执行官Mikhail Parakhin、Azure云首席副总裁Misha Bilenko都在其中。

微软之前的发布活动中也确认了Bing会直接集成DALL·E 3。

按照现在规则，Bing上的DALL·E 2是免费的。会发放99个加速代币，没代币只是需要更长时间排队。

虽然10月份DALL·E 3在ChatGPT Plus要收费每月20美元。

但既然GPT-4在Bing上是免费提供的，将来DALL·E 3免费玩也可以期待一波了～

参考链接：

[1]https://x.com/willdepue/status/1705005718666158107

[2]https://x.com/CitizenPlain/status/1705248617131291032

[3]https://x.com/MParakhin/status/1704563792645079143

— 完 —

量子位 QbitAI · 头条号签约

","gnid":"9931fb0da966f58c7","img_data":[{"flag":2,"img":[{"desc":"","height":"1154","title":"","url":"https://p0.ssl.img.360kuai.com/t01171cd240182a66e1.jpg","width":"1080"},{"desc":"","height":"462","title":"","url":"https://p0.ssl.img.360kuai.com/t01ab74c02246412790.jpg","width":"1080"},{"desc":"","height":"889","title":"","url":"https://p0.ssl.img.360kuai.com/t018273ac6c2ce32ab7.jpg","width":"1080"},{"desc":"","height":"810","title":"","url":"https://p0.ssl.img.360kuai.com/t01c626a80d840e8658.jpg","width":"1064"},{"desc":"","height":"860","title":"","url":"https://p0.ssl.img.360kuai.com/t011630937b9c612050.jpg","width":"1080"},{"desc":"","height":"581","title":"","url":"https://p0.ssl.img.360kuai.com/t01329ba6ea240dceb0.jpg","width":"1080"},{"desc":"","height":"252","title":"","url":"https://p0.ssl.img.360kuai.com/t017c0788e8d048f8fc.jpg","width":"1080"},{"desc":"","height":"234","title":"","url":"https://p0.ssl.img.360kuai.com/t01fba46655508b05ba.jpg","width":"1080"},{"desc":"","height":"1000","title":"","url":"https://p0.ssl.img.360kuai.com/t0118cb882ebc8db609.jpg","width":"1060"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01b7840493a6663f2b.jpg","width":"1080"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01849de767566b4974.jpg","width":"1080"},{"desc":"","height":"235","title":"","url":"https://p0.ssl.img.360kuai.com/t0163b14b7dd6a57c30.jpg","width":"1080"},{"desc":"","height":"265","title":"","url":"https://p0.ssl.img.360kuai.com/t01763f194c4a6b9bc6.jpg","width":"1080"},{"desc":"","height":"1000","title":"","url":"https://p0.ssl.img.360kuai.com/t01d303c21dbea176b1.jpg","width":"1334"},{"desc":"","height":"439","title":"","url":"https://p0.ssl.img.360kuai.com/t015aaba949ef7c7d84.jpg","width":"768"},{"desc":"","height":"417","title":"","url":"https://p0.ssl.img.360kuai.com/t01f30f9c543243b6e5.jpg","width":"1080"},{"desc":"","height":"786","title":"","url":"https://p0.ssl.img.360kuai.com/t01b74bff6f996bb53a.jpg","width":"1080"},{"desc":"","height":"439","title":"","url":"https://p0.ssl.img.360kuai.com/t01461ad2f202b9666e.jpg","width":"768"},{"desc":"","height":"730","title":"","url":"https://p0.ssl.img.360kuai.com/t01b9e0348b4b649230.jpg","width":"1080"},{"desc":"","height":"427","title":"","url":"https://p0.ssl.img.360kuai.com/t016647ba26be052505.jpg","width":"1080"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01fdacc1e23aebbcdd.jpg","width":"1080"},{"desc":"","height":"750","title":"","url":"https://p0.ssl.img.360kuai.com/t015566b6a4e1d36306.jpg","width":"1080"},{"desc":"","height":"867","title":"","url":"https://p0.ssl.img.360kuai.com/t010e23a1a7ca1e9c14.jpg","width":"1080"},{"desc":"","height":"788","title":"","url":"https://p0.ssl.img.360kuai.com/t013429d4ea286ae3c1.jpg","width":"1080"},{"desc":"","height":"725","title":"","url":"https://p0.ssl.img.360kuai.com/t01275e6f796734c65a.jpg","width":"1080"},{"desc":"","height":"886","title":"","url":"https://p0.ssl.img.360kuai.com/t015ccfda39245d948c.jpg","width":"1080"},{"desc":"","height":"538","title":"","url":"https://p0.ssl.img.360kuai.com/t0170ac6fc5e82e7d99.jpg","width":"1080"},{"desc":"","height":"370","title":"","url":"https://p0.ssl.img.360kuai.com/t0126ec9dae5fccfa6b.jpg","width":"1080"},{"desc":"","height":"626","title":"","url":"https://p0.ssl.img.360kuai.com/t010bf1bd69b9811564.jpg","width":"1018"},{"desc":"","height":"429","title":"","url":"https://p0.ssl.img.360kuai.com/t01cc990cab614c6ba9.jpg","width":"1080"},{"desc":"","height":"200","title":"","url":"https://p0.ssl.img.360kuai.com/t01e36bc461c7c95415.jpg","width":"1080"},{"desc":"","height":"310","title":"","url":"https://p0.ssl.img.360kuai.com/t01c1f6010ca777a6bf.jpg","width":"1080"},{"desc":"","height":"193","title":"","url":"https://p0.ssl.img.360kuai.com/t016234483dea5955d6.jpg","width":"1080"},{"desc":"","height":"1223","title":"","url":"https://p0.ssl.img.360kuai.com/t01d95a2a71b8cb94ad.jpg","width":"1080"},{"desc":"","height":"922","title":"","url":"https://p0.ssl.img.360kuai.com/t01be36db4cb90031cc.jpg","width":"1080"}]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"pika","pub_time":1695530880000,"pure":"","rawurl":"http://zm.news.so.com/dd9d422b3f0bc0b621e871c0aaff7eaa","redirect":0,"rptid":"ec803dd2d4379904","rss_ext":[],"s":"t","src":"量子位","tag":[{"clk":"ktechnology_1:宇航员","k":"宇航员","u":""}],"title":"DALL·E 3必应开测！马骑宇航员难题攻破，一张画指定50个物体

乔泼侮3446航天员洗脸为什么用湿巾不用水 -
时净禄18262121404 ______ ....因为在外层太空,重力基本没有了,东西都是悬浮状态,必须紧固.就象宇航员不能吃饼干这一类有渣的东西,上厕所也经过特殊处理,喝水吃饭必须用胶管送服,同样的在失重状态,水是散落在空中的,而且你没办法用没用重力势能的水冲脸的.

乔泼侮3446莫比乌斯带是什么 -
时净禄18262121404 ______ 麦比乌斯圈是什么: 麦比乌斯圈(Möbius strip, Möbius band)是一种单侧、不可定向的曲面.因A.F.麦比乌斯(August Ferdinand Möbius, 1790-1868)发现而得名.将一个长方形纸条ABCD的一端AB固定,另一端DC扭转半周后,把AB和...

乔泼侮3446简单的描绘祖国航天事业发展的前景是怎么样的. -
时净禄18262121404 ______ 中国的航天事业起步于20世纪五六十年代.1970年4月24日,第一颗人造地球卫星“东方红”1号在酒泉发射成功,中国成为世界上第五个发射卫星的国家. 1975年11月26日,中国首颗返回式卫星发射成功,3天后顺利返回,中国成为世界上第...

乔泼侮3446Nazca是什么意思 -
时净禄18262121404 ______ 纳斯卡线条(Nazca Lines) 纳斯卡谷地的神秘巨画 纳斯卡位于秘鲁伊卡省的东南部(坐标:14 41' S, 75 07' W).它本是一个名不见经传的小镇,但是到20世纪中叶这儿却热闹起来.因为在这里发掘出大批古墓,而里面的许多彩陶和纺织等...

乔泼侮3446为什么彩铅画出来的比水彩笔画出来的好看 -
时净禄18262121404 ______ 因为彩铅色彩丰富且细腻,可以表现出较为轻盈、通透的质感.这是其他工具、材料所不能达到的.

乔泼侮3446怎样练好手绘 -
时净禄18262121404 ______ 没基础可以慢慢开始的,从拍线条开始.准备工具有铅笔(HB、2B、3B、4B、5B.....)、画纸(素描纸,素描纸有很多种,初学者用8开或者16开,再好一点的就用4开或更大)、橡皮泥(我说的橡皮泥不是一般小孩玩的那种,而是给专门画素描等学者的工具;你也可以选择一般的橡皮,不过得质地软一点儿的)、如果想认真学就去买个画架;对了,画素描时还有用到炭笔,6B的也经常要用到.再去买些关于这方面的书籍,临摹在前期是必须的!后面还要学习速写等.......有空找我聊聊我会告诉你更多,现在有事儿,下次吧!

乔泼侮3446宇航员写字不能用普通钢笔,会漏水,对吗 -
时净禄18262121404 ______ (在百度里面看到的)有人声称钢笔在失重的太空舱里无法使用,因为没有重力作用,钢笔水不能往下流.本人在此提出质疑.我们可以找一根普通能正常写出字的钢笔,笔头朝下时毫无疑问能写出字来,但如果我们实验者躺下,笔头朝上...

乔泼侮3446蛋仔图片100张皮肤怎么画 -
时净禄18262121404 ______ 蛋仔图片100张皮肤画法如下: 蛋仔图片100张皮肤的画法有很多种,需要考虑到颜色搭配段薯渗、图案设计等多个方面.蛋仔,国产页游《奥奇传说》中的一只精灵,通过健康ABCD汤活动获得.以下是关于怎样画蛋仔皮肤的一些技巧和建议...