首页 >>  正文

亡的一词多义附原句

来源:baiyundou.net   日期:2024-09-21

明敏 发自 凹非寺

量子位 | 公众号 QbitAI

以画画水平高超而风靡全球的DALL-E 2,语文水平被质疑了。

比如bat这个多义词,就把它给考住了。

a bat is flying over a baseball stadium(一只蝙蝠/球棍从棒球场上飞过)。

结果它画出来的图,蝙蝠和球拍都在天上飞。

而且这不是偶然的失误,如果输入“a person is hearing a bat”,画出来的还是蝙蝠和球棒都存在。

换成另一种情况,输入a fish and a gold ingot(一条鱼和一个金锭)。

好嘛,直接把两种东西都铸金了,变成真金·鱼。

可不能低估了这些失误,因为它们意味着DALL-E 2在根据文本生成图像的过程中,对语言中符号到实体的基本映射关系。

即一个词对应一个实体。

以bat举例,画出蝙蝠或者球棍,都算DALL-E 2理解正确,但是如果两个都给,那就有问题了。

这就好比本身是单选题,填A或B都对,可是把两个都写上就违反了规则。

更何况有时候它还把不同物体的修饰词弄错,“上一道题的解法用在下一道上”。

发现这一问题的,是来自巴伊兰大学、艾伦人工研究智能所的学者们,并且专门写了篇论文分析。

有趣的是,研究人员约阿夫·高柏(Yoav Goldberg)还提到,这种情况在mini DALL-E和Stable Diffusion中并不常见。

我猜这可能是因为所谓的逆规模现象(inverse scaling)。

简单理解就是“模型越大性能越差”。

论文具体说了啥?

几位学者在发现问题后,又反复进行了多次试验,并把问题主要划分为三种情况:

  • 第一、一个单词被解释为两个不同的事物
  • 第二、一个单词被解释为两个不同事物的修饰词
  • 第三、一个单词在被解释为一个事物的同时,又被理解成另一种事物的修饰词

前两种情况开头已经提过。

第三种情况举例来说,输入“一匹斑马和一条街道”,输出的结果中一直都有斑马线。

在这里,DALL-E 2把斑马同时解释了两次。

在针对这些情况都重复试验后,作者计算出DALL-E 2在三种情况下,出现失误的概率都超过80%

其中第二种情况的失误率最高,达到97.2%

第三种情况下,如果给另一个名词前加上新的修饰词,可以避免失误发生。

即输入一匹斑马和一条碎石路,路面上就没有斑马线出现了。

而在用DALL-E mini和Stable Diffusion时,这些重复解释的情况并不常见。

作者解释,未来可以考虑研究模型的文本编解码器来追溯这些问题,并且可以研究这些问题和模型大小、框架是否有关系。

作者之一Yoav Goldberg是巴伊兰大学的杰出教授,也是艾伦人工智能研究院以色列分院的研究主任。

之前,他在纽约的谷歌研究中心做博士后。研究兴趣方向为NLP和机器学习,尤其对语法解析感兴趣。

还曾发现DALL-E 2自创语言

不过就在几个月之前,一位计算机专业的博士小哥发现,给DALL-E 2喂一些奇怪的语言,它也能生成同一类的图像。

而这些词,正是来自DALL-E 2生成图像中的。

比如输入“两个农民谈论蔬菜,带字幕(Two farmers talking about vegetables, with subtitles)”后,DALL-E 2给出的图像中,出现了一些“乱码”的词汇。

而如果再把图像中的新词Vicootes”当作描述丢给模型,没想到,出来这样一堆图像:

有萝卜、有南瓜、有小柿子……难道“Vicootes”就代表蔬菜?

如果再把上图气泡中一串“Apoploe vesrreaitais”扔给DALL-E 2,一堆鸟图出现了:

“难道说,这个单词代表‘鸟’,所以农民们似乎在谈论影响他们蔬菜的鸟类?”

当时,这位博士小哥把自己的发现发布在网络上后,立刻引起热议。

有人试图分析DALL-E 2是如何加密语言的,还有人觉得这只是噪声。

不过总的来说,在语言理解方面,DALL-E 2总能搞出点让人意想不到的事。

你觉得这背后原因到底是什么呢?

论文地址:

https://arxiv.org/pdf/2210.10606.pdf

参考链接:

https://twitter.com/yoavgo/status/1583088957226881025

— 完 —

量子位 QbitAI · 头条号签约

","force_purephv":"0","gnid":"91619eedbc13fab74","img_data":[{"flag":2,"img":[{"desc":"","height":"910","title":"","url":"https://p0.ssl.img.360kuai.com/t01cb5ad8bb0025ca1f.jpg","width":"910"},{"desc":"","height":"1084","title":"","url":"https://p0.ssl.img.360kuai.com/t0143a951e7efc95028.jpg","width":"1080"},{"desc":"","height":"964","title":"","url":"https://p0.ssl.img.360kuai.com/t01a4cf1517f92d6fe3.jpg","width":"982"},{"desc":"","height":"188","title":"","url":"https://p0.ssl.img.360kuai.com/t01658348a226c17cbf.jpg","width":"1080"},{"desc":"","height":"972","title":"","url":"https://p0.ssl.img.360kuai.com/t0101b744fea12fd2b5.jpg","width":"970"},{"desc":"","height":"900","title":"","url":"https://p0.ssl.img.360kuai.com/t0157d6ba672bcd05b5.jpg","width":"900"},{"desc":"","height":"450","title":"","url":"https://p0.ssl.img.360kuai.com/t01be9fc434efd8c191.jpg","width":"450"},{"desc":"","height":"452","title":"","url":"https://p0.ssl.img.360kuai.com/t0177b996132983c232.jpg","width":"472"},{"desc":"","height":"542","title":"","url":"https://p0.ssl.img.360kuai.com/t01a734e80c78ac41d3.jpg","width":"1080"},{"desc":"","height":"432","title":"","url":"https://p0.ssl.img.360kuai.com/t0156126fe33637b346.jpg","width":"1080"}]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"cache","pub_time":1666500420000,"pure":"","rawurl":"http://zm.news.so.com/3f9161792996bca8231755948b4a576c","redirect":0,"rptid":"b58b30d97e38d546","s":"t","src":"量子位","tag":[{"clk":"kculture_1:斑马","k":"斑马","u":""}],"title":"DALL-E 2被吐槽:金子和鱼画成真金·鱼,遇到一词多义就拉胯

薛索厘2343苏洵六国论一词多义 -
黎奇怡13296118124 ______ 重要字词:率、厥、弥、判、速、洎、殆 词类活用:小/大则……、义不赂秦、却、礼、西向、日削月割 古今异义:其实、祖父、至于、智力、可以、故事 通假字:厌、当 特殊句式:而为秦人积威之所劫、为国者无使为积威之所劫哉、天下之大 一词多义:暴、与、犹、亡、始

薛索厘2343一词多义 (解释下面句子中的多义词)1、道其闻道也固先乎吾( )道相似也( )师道之不传也久矣( )人道是,三国周郎赤壁( )怀其璧,从径道亡( )... -
黎奇怡13296118124 ______[答案] 1、道其闻道也固先乎吾( 道理 )道相似也( 知识学问 )师道之不传也久矣( 风尚 )人道是,三国周郎赤壁(说 )怀其璧,从径道亡(路 )从骊山下,道芷阳间行(取道 )2、师古之学者必有师(老师 )巫医乐师百工之人...

薛索厘2343《陈涉世家》一词多义 :应、将、然、指、欲、号、与```这几个字、要原文一起啊、、 -
黎奇怡13296118124 ______[答案] 会 1会天大雨(会:副词,可译为“适逢”“恰巧”)2.皆来会计事(会:动词,可译为“聚集”“集合”) 道 1.道不通(道:名词,可译为“道路”“路”)2.伐无道(道:名词,可译为“道义”) 等 1.等死,死国可乎(等:副词,可译为“相...

薛索厘2343项王之死中的通假字,一词多义,古今异义词,特殊句式度 -
黎奇怡13296118124 ______ 一、通假字 1.骑皆伏曰: 通“服”,心服 2.檥船待 : 通“舣 ”,使船靠岸 二、古今异义 1.悲歌慷慨: 古义:情绪激昂 今义:大方 古义:左右将士 2.左右皆泣: 今义:表方位名词 3.期山东为三处:古义:山的东面 今义:省份名称 古今异义 ...

薛索厘2343苏武传 的古今异义 一词多义 词类活用 文言句式 -
黎奇怡13296118124 ______[答案] 苏武传 的古今异义 一词多义 词类活用 文言句式 (一)古今异义 1.汉亦留之以相当.相当:古义:抵押.今义:差不多. 2.皆为陛下所成就 .成就:古义:提拔.今义:业绩. 3.我丈人行也.丈人:古义:老人,长辈.今义:岳父. 4.幸蒙其赏赐.赏赐:古义:照...

薛索厘2343蔡勉旃坚还亡友财中有哪些通假字古今异义字一词多义词类活用特殊句式 -
黎奇怡13296118124 ______ 一 通假字 亡何(亡,通无,没有)

薛索厘2343智子疑邻一词多义 急!!!!!!快快快.......... 找到必有重谢!!!!~~~~~~(*^ - - ^*) 嘻嘻…… -
黎奇怡13296118124 ______ 1.暮:夜晚 年老 2.果:果然 瓜果 3.亡:丢失 4.其:他/她 大概 5.之:他/她 的 语气助词:不译 去、到

薛索厘2343愚公移山 的一词多义 词类活用 通假字 古今异义 -
黎奇怡13296118124 ______[答案] 《愚公移山》 古今异义: 1指 古义:直,一直 今义:手指 2曾 古义:乃,并 今义:曾经 3毛 古义:草木 今义:毛发 4阳 ... 4聚:使动用法,使......聚,相当于:“把......召集在一起”. 一词多义: 1方 方七百里【指面积】 方其远出海门【正当】 2曾 ...

薛索厘2343初一初二文言文常见字(人教版)我想要初一初二文言文常见字的归纳,
黎奇怡13296118124 ______ 之 一、代词 1、人称代词,译作“他”、“她”、“他们” ①公与人乘,战于长勺... 文言文(一词多义) (按音序排列) 1. 安:1、怎么(安求其能千里也) 2、养(衣...

薛索厘2343烛之武退秦师中所有的一词多义 -
黎奇怡13296118124 ______[答案] 一词多义 (一)重要实词: 1.贰 ①“二”的大写.(例:国不堪贰,君将若之何?《左传·隐公元年》) ②副职 (例:其内任卿贰以上.梁启超《少年中国说》) ③不专一 (例:贰则疑惑.《荀子·解蔽》) ④离心,背叛 (例:夫诸侯之贿,聚于公...

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024