如的一词多义
明敏 发自 凹非寺
量子位 | 公众号 QbitAI
以画画水平高超而风靡全球的DALL-E 2，语文水平被质疑了。
比如bat这个多义词，就把它给考住了。
a bat is flying over a baseball stadium（一只蝙蝠/球棍从棒球场上飞过）。
结果它画出来的图，蝙蝠和球拍都在天上飞。
而且这不是偶然的失误，如果输入“a person is hearing a bat”，画出来的还是蝙蝠和球棒都存在。
换成另一种情况，输入a fish and a gold ingot（一条鱼和一个金锭）。
好嘛，直接把两种东西都铸金了，变成真金·鱼。
可不能低估了这些失误，因为它们意味着DALL-E 2在根据文本生成图像的过程中，对语言中符号到实体的基本映射关系。
即一个词对应一个实体。
以bat举例，画出蝙蝠或者球棍，都算DALL-E 2理解正确，但是如果两个都给，那就有问题了。
这就好比本身是单选题，填A或B都对，可是把两个都写上就违反了规则。
更何况有时候它还把不同物体的修饰词弄错，“上一道题的解法用在下一道上”。
发现这一问题的，是来自巴伊兰大学、艾伦人工研究智能所的学者们，并且专门写了篇论文分析。
有趣的是，研究人员约阿夫·高柏（Yoav Goldberg）还提到，这种情况在mini DALL-E和Stable Diffusion中并不常见。
我猜这可能是因为所谓的逆规模现象（inverse scaling）。
简单理解就是“模型越大性能越差”。
论文具体说了啥？
几位学者在发现问题后，又反复进行了多次试验，并把问题主要划分为三种情况：
- 第一、一个单词被解释为两个不同的事物
- 第二、一个单词被解释为两个不同事物的修饰词
- 第三、一个单词在被解释为一个事物的同时，又被理解成另一种事物的修饰词
前两种情况开头已经提过。
第三种情况举例来说，输入“一匹斑马和一条街道”，输出的结果中一直都有斑马线。
在这里，DALL-E 2把斑马同时解释了两次。
在针对这些情况都重复试验后，作者计算出DALL-E 2在三种情况下，出现失误的概率都超过80%。
其中第二种情况的失误率最高，达到97.2%。
第三种情况下，如果给另一个名词前加上新的修饰词，可以避免失误发生。
即输入一匹斑马和一条碎石路，路面上就没有斑马线出现了。
而在用DALL-E mini和Stable Diffusion时，这些重复解释的情况并不常见。
作者解释，未来可以考虑研究模型的文本编解码器来追溯这些问题，并且可以研究这些问题和模型大小、框架是否有关系。
作者之一Yoav Goldberg是巴伊兰大学的杰出教授，也是艾伦人工智能研究院以色列分院的研究主任。
之前，他在纽约的谷歌研究中心做博士后。研究兴趣方向为NLP和机器学习，尤其对语法解析感兴趣。
还曾发现DALL-E 2自创语言
不过就在几个月之前，一位计算机专业的博士小哥发现，给DALL-E 2喂一些奇怪的语言，它也能生成同一类的图像。
而这些词，正是来自DALL-E 2生成图像中的。
比如输入“两个农民谈论蔬菜，带字幕（Two farmers talking about vegetables, with subtitles）”后，DALL-E 2给出的图像中，出现了一些“乱码”的词汇。
而如果再把图像中的新词Vicootes”当作描述丢给模型，没想到，出来这样一堆图像：
有萝卜、有南瓜、有小柿子……难道“Vicootes”就代表蔬菜？
如果再把上图气泡中一串“Apoploe vesrreaitais”扔给DALL-E 2，一堆鸟图出现了：
“难道说，这个单词代表‘鸟’，所以农民们似乎在谈论影响他们蔬菜的鸟类？”
当时，这位博士小哥把自己的发现发布在网络上后，立刻引起热议。
有人试图分析DALL-E 2是如何加密语言的，还有人觉得这只是噪声。
不过总的来说，在语言理解方面，DALL-E 2总能搞出点让人意想不到的事。
你觉得这背后原因到底是什么呢？
论文地址：
https://arxiv.org/pdf/2210.10606.pdf参考链接：
https://twitter.com/yoavgo/status/1583088957226881025— 完 —
量子位 QbitAI · 头条号签约
","force_purephv":"0","gnid":"91619eedbc13fab74","img_data":[{"flag":2,"img":[{"desc":"","height":"910","title":"","url":"https://p0.ssl.img.360kuai.com/t01cb5ad8bb0025ca1f.jpg","width":"910"},{"desc":"","height":"1084","title":"","url":"https://p0.ssl.img.360kuai.com/t0143a951e7efc95028.jpg","width":"1080"},{"desc":"","height":"964","title":"","url":"https://p0.ssl.img.360kuai.com/t01a4cf1517f92d6fe3.jpg","width":"982"},{"desc":"","height":"188","title":"","url":"https://p0.ssl.img.360kuai.com/t01658348a226c17cbf.jpg","width":"1080"},{"desc":"","height":"972","title":"","url":"https://p0.ssl.img.360kuai.com/t0101b744fea12fd2b5.jpg","width":"970"},{"desc":"","height":"900","title":"","url":"https://p0.ssl.img.360kuai.com/t0157d6ba672bcd05b5.jpg","width":"900"},{"desc":"","height":"450","title":"","url":"https://p0.ssl.img.360kuai.com/t01be9fc434efd8c191.jpg","width":"450"},{"desc":"","height":"452","title":"","url":"https://p0.ssl.img.360kuai.com/t0177b996132983c232.jpg","width":"472"},{"desc":"","height":"542","title":"","url":"https://p0.ssl.img.360kuai.com/t01a734e80c78ac41d3.jpg","width":"1080"},{"desc":"","height":"432","title":"","url":"https://p0.ssl.img.360kuai.com/t0156126fe33637b346.jpg","width":"1080"}]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"hbase","pub_time":1666500420000,"pure":"","rawurl":"http://zm.news.so.com/3f9161792996bca8231755948b4a576c","redirect":0,"rptid":"b58b30d97e38d546","s":"t","src":"量子位","tag":[{"clk":"kculture_1:斑马","k":"斑马","u":""}],"title":"DALL-E 2被吐槽：金子和鱼画成真金·鱼，遇到一词多义就拉胯
石邰品2675＂汉语言如魔方＂的特点,请从生活中举出两个例子并谈谈你对祖国语言?
井昭曹18272991393 ______ 汉语言如魔方 1一词多性,如“丰富”: ①课外活动丰富了我们的生活.(句中的“丰富”作动词用) ②今晚的饭菜很丰富.(句中的“丰富”作形容词用) 2一词多义,如“成熟”: ①田里的稻谷成熟了.(句中的“成熟”指果实或谷物成长到可收获的程度) ②小强变得越来越成熟了.(句中的“成熟”指事物达到一个完全成长的阶段,达到接近完善的程度) 3由词构句,词的排列次序不同,意义也不同. ①你妈好?(问候语) ②好你妈!(粗口) 多音字,多义字,多义词,各种奇妙的语言修饰现象,使汉语言如魔方,千变万化,多姿多彩.
石邰品2675苏武传 的古今异义 一词多义 词类活用 文言句式 -
井昭曹18272991393 ______[答案] 苏武传 的古今异义 一词多义 词类活用 文言句式 (一)古今异义 1.汉亦留之以相当.相当:古义:抵押.今义:差不多. 2.皆为陛下所成就 .成就:古义:提拔.今义:业绩. 3.我丈人行也.丈人:古义:老人,长辈.今义:岳父. 4.幸蒙其赏赐.赏赐:古义:照...
石邰品2675“其”字一词多义.河中石兽“其”字一词多义,其反激之力,如其言,其此之谓乎. -
井昭曹18272991393 ______[答案] 1、其反激之力 其:代词,它的 2、如其言 其:代词,它的 3、其此之谓乎 其:表推测,大概
石邰品2675文言文“请”“微”“鲜”“通”“书”“胜”“稍”“如”一词多义!急需!!! -
井昭曹18272991393 ______ 1. ①请:请赐教②请求 2. ①微:无、没有 ②突然 ③微微;有一些 3. ①少②鲜艳③新鲜 4. 通过 5. 书信 6. 经受、承受 7. ①稍微②稍:俸禄,官吏的薪水 8. ①②都是 像 的意思 望采纳~~~~~~~~~~~~~
石邰品2675满井游记一词多义而 -
井昭曹18272991393 ______ 一词多义 1、乍: 波色乍(zhà)明 (初,始) 晶晶然如镜之新开而冷光之乍出于匣(xiá)也 (突然,忽然) 2、作 冻风时作 (刮起) 属予作文以记之(写) 3、鳞 鳞浪层层 (名词作状语,像鱼鳞似地) 呷浪之鳞 (代鱼) 毛羽鳞...
石邰品2675求蒲松龄《山市》及《促织》的文言基础知识归纳求《山市》及《促织》两文的文言基础知识归纳,如通假字、一词多义、古今异义、词类活用、虚词用法、... -
井昭曹18272991393 ______[答案] :《促织》文言文知识归纳 一、掌握下列重点词语1、尚:宫中尚促织之戏(崇尚,爱好.)2、居:居为奇货(积,储存.)3、比:宰严限追比(追征)4、啻:虽连城拱璧不啻也(比)5、造:径造庐访成(到)6、固、强:少年...
石邰品2675急求刻舟求剑,幼时记趣中的通假字,古今异义,一词多义,同义词!如题.要完整, -
井昭曹18272991393 ______[答案] 1 通假字:置之其坐的坐 反归取之的反 项为之强的强 以土砾凸者为邱的邱 2 一词多义:自(无自信也 其剑自舟中坠于水) 素(又留蚊于素帐中 素昧平生) 3 古今异义:果 果然 是吾剑之所从坠 4 词类活用:鞭数十 鞭字...
石邰品2675文言词语常有一词多义现象.找一例带有国字的文言文.文言词语常有一词多义现象.如文中“国恒亡”中的“国”,在此意为“国家”,但也有解释“国都、都... -
井昭曹18272991393 ______[答案] ①解释为“国都、都城“的句子:登斯楼也,则有去国怀乡,忧谗畏讥,满目萧然,感极而悲者矣.国:国都. ②解释为”疆域“的句子:荆州北据汉沔,利尽南海,东连吴会,西通巴蜀,此用武之国.国:地方.
石邰品2675促织中的通假字、一词多义、单词活用、特殊句式 -
井昭曹18272991393 ______ 通假字 1、昂其直(通“值”,价值) 2、手裁举(通“才”,刚刚) 3、而翁归(通“尔”,你的) 4、翼日进宰(通“翌”,明天) 5、虫跃去尺有咫(通“又”) 6、此物故非西产 (通“固”) 7、 如被冰雪 (同“披”) 三、一词多义 1...
石邰品2675子路 曾皙 冉有 公西华侍坐的一词多义;如,方,与,急 -
井昭曹18272991393 ______[答案] 《子路、曾晳、冉有、公西华侍坐》一词多义 一、知 了解.例:不无知也 主持、管理.例:吾与之共知越国之政 知道,懂得 例:可使有勇,且知方也 通“智”.例:失其所与,不知 二、方 正道,是非准则.(名) 例:可使有勇,且知方也 方圆,纵横...