首页 >>  正文

ai取消隐藏

来源:baiyundou.net   日期:2024-09-01

金磊 发自 凹非寺

量子位 | 公众号 QbitAI

GPT-4,火爆,非常火爆。

不过家人们,在铺天盖地的叫好声中,有件事可能你是“万万没想到”——

在OpenAI公布的技术论文里,竟然藏着九大隐秘的线索

这些线索是由国外博主AI Explained发现并整理。

他宛如一位细节狂魔,从长达98页论文中,逐个揭秘这些“隐匿的角落”,包括:

  • GPT-5可能已经完成训练
  • GPT-4出现过自己“挂掉”的情况
  • OpenAI两年内或实现接近AGI
  • ……

发现一:GPT4出现过自己“挂掉”的情况

在GPT-4技术论文的第53页处,OpenAI提到了这样一个机构——Alignment Research Center(ARC)

这家机构主要做的事情,就是专门研究AI如何对齐(alignment)人类利益。

而OpenAI在开发GPT-4的早期阶段,便给ARC开了抢先体验的后门,希望他们能够评估GPT-4的两项能力:

  • 模型自主复制能力
  • 模型获取资源能力

虽然OpenAI在论文中强调了“ARC没法微调早期版本的GPT-4”、“他们无权访问GPT-4的最终版本”;也强调了测试结果显示GPT-4在上述两个能力的效率不高(降低AI伦理隐患)

但眼尖的博主揪出来的是接下来的一句话:

(found it ineffective at) avoiding being shut down “in the wild”.

在自然环境中,GPT-4会避免自己“挂掉”。

博主的意思是,既然OpenAI选择让ARC去测试评估GPT-4会不会主动避免自己被“挂掉”,说明此前必定出现过这种情况。

那么延伸出来的隐患就是,如果ARC在测试过程中其实是失败的怎么办;或者未来真出现了自己“挂掉”的情况,又将怎么处理。

基于此,博主便有了第二个发现:

发现二:主动要求自我监管,很罕见

在第2页的脚注中,OpenAI注释了这么一句话:

OpenAI will soon publish additional thoughts on the social and economic implications of AI systems, including the need for effective regulation.

OpenAI将很快发布关于AI系统的社会和经济影响的其它思考,包括有效监管的必要性。

博主认为,一个行业主动要求监管自己,这是个非常罕见的现象。

事实上,OpenAI老板Sam Altman此前发表的言论比这还要直白。

当时Altman发表了关于SVB倒闭的推文,他认为“我们需要对银行做更多的监管”;有人就评论回怼了:“他从来不会说‘我们需要对AI做更多的监管’”。

结果Altman直截了当的回复说:

绝对需要。

博主认为,这个AI行业正在呼吁进行监管,至于监管后的结果如何,是值得拭目以待的。

发现三:与微软高层想法背道而驰

接下来的发现,是根据论文第57页中的这句话:

One concern of particular importance to OpenAI is the risk of racing dynamics leading to a decline in safety standards, the diffusion of bad norms, and accelerated AI timelines, each of which heighten societal risks associated with AI.

对OpenAI来说,(科技的)竞赛会导致安全标准的下降、不良规范的扩散、AI发展进程的加速,它们都加剧了与人工智能相关的社会风险。

但很奇怪的一点是,OpenAI所提到的担忧,尤其是“AI发展进程的加速”,似乎是与微软高层的想法背道而驰。

因为在此前的爆料中称,微软CEO和CTO的压力很大,他们希望OpenAI的模型能尽快让用户用起来。

有些人在看到这则消息时是比较兴奋,但同样也有一波人发出了跟OpenAI一样的担忧。

博主认为,不论如何,可以肯定的一点是OpenAI和微软在这件事的想法是相悖的。

发现四:OpenAI会协助超越它的公司

第四个发现的线索,是来自与“发现三”同一页的脚注:

这段脚注展示了OpenAI一个非常大胆的承诺:

如果另一家公司在我们之前实现了接近AGI(通用人工智能),那我们承诺不会跟它做竞争,相反,会协助完成那个项目。

但这种情况发生的条件,可能是另一家公司需得在未来两年内,成功接近AGI的机会在一半或以上

而这里提到的AGI,OpenAI和Altam在官方博客中已经给出了定义——

普遍比人类更聪明,并且有益于全人类的人工智能系统。

因此,博主认为,这段脚注要么意味着OpenAI在未来两年内将实现AGI,要么意味着他们放弃了一切并与另一家公司展开了合作。

发现五:雇佣“超级预测员”

博主的下一个发现,是来自论文第57中的一段话。

这段话大致的意思就是,OpenAI雇佣了预测专家,来预测当他们部署了GPT-4之后会带来怎样的风险。

然后博主顺藤摸瓜,发现了这些所谓的“超级预测员”的庐山真面目。

这些“超级预测员”的能力已经得到了广泛地认可,有报道称,他们的预测准确率,甚至比那些有独家信息、情报的分析师还要高出30%。

正如我们刚才提到的,OpenAI邀请这些“超级预测员”,来预测部署GPT-4后可能存在的风险,并采取相应措施来规避。

其中,“超级预测员”建议将GPT-4部署时间推迟6个月,也就是今年秋季左右;但很显然,OpenAI并没有采纳他们的建议。

博主对此认为,OpenAI这么做的原因,可能是来自微软的压力。

发现六:征服常识

在这篇论文中,OpenAI展示了众多基准测试的图表,大家在昨天铺天盖地的传播过程中应该也见到了。

但博主在这个发现中要强调的是位于第7页的一项基准测试,尤其是聚焦到了“HellaSwag”这一项。

HellaSwag的内容主要是常识推理,这就和GPT-4发布时宣布的“已经达到了人类的常识水平”相匹配。

不过博主也承认,这一点并没有“通过律师考试”等能力那么吸引人,但这也算得上是人类科技发展的里程碑。

但常识是怎么测试的?我们又如何评判GPT-4已经达到了人类水平?

为此,博主深入研究了与之相关的论文研究:

博主在论文中找到了相关数据,在“人类”那一栏中,分数分布在了94-96.5之间。

而GPT-4的95.3,便正好在这个区间之间。

发现七:GPT-5可能已经完成训练

第七个发现,同样是在论文中的第57页:

我们在发布GPT-4之前花费8个月时间进行安全研究、风险评估和迭代。

也就是说,OpenAI在去年年底推出ChatGPT的时候,已经有了GPT-4。

于是乎,博主便预测GPT-5的训练时间不会很久,甚至他认为GPT-5已经可能训练完成。

但接下来的问题是漫长的安全研究和风险评估,可能是几个月,也可能是一年甚至更久。

发现八:试一把双刃剑

第8个发现,是来自论文的第56页。

这段话说的是:

GPT-4对经济和劳动力的影响,应成为政策制定者和其他利益相关者的关键考虑因素。

虽然现有的研究主要集中在人工智能和生成模型如何给人类加buff,但GPT-4或后续模型可能会导致某些工作的自动化。

OpenAI这段话背后想传达的点比较明显,就是我们经常提到的“科技是把双刃剑”。

博主找了相当多的证据表明,像ChatGPT、GitHub Copilot这些AI工具,确确实实地提高了相关工作者的效率。

但他更关注的是论文中这段话的后半句,也就是OpenAI给出的“警告”——导致某些工作的自动化。

博主对此比较认同,毕竟在GPT-4的能力可以在某些特定领域中以人类10倍甚至更高的效率来完成。

放眼未来,这很可能会导致相关工作人员工资降低,或者需得借助这些AI工具完成以前工作量的数倍等一系列问题。

发现九:学会拒绝

博主最后一个发现,来自论文的第60页:

OpenAI让GPT-4学会拒绝的方法,叫做基于规则的奖励模型(RBRMs)

博主概括了这种方法的工作流程:给GPT-4一组要遵守的原则,如果模型遵守了这些原则,那么就会提供相应的奖励。

他认为OpenAI正在用人工智能的力量,让AI模型朝着符合人类原则的方向发展。

但目前OpenAI并没有对此做更加细致和深入的介绍。

参考链接:

[1] https://www.youtube.com/watch?v=ufQmq6X22rM

[2] https://cdn.openai.com/papers/gpt-4.pdf

— 完 —

量子位 QbitAI · 头条号签约

","gnid":"9693892734a32c6a7","img_data":[{"flag":2,"img":[{"desc":"","height":"580","title":"","url":"https://p0.ssl.img.360kuai.com/t014e778a3fc9f2e187.jpg","width":"1080"},{"desc":"","height":"551","title":"","url":"https://p0.ssl.img.360kuai.com/t018545da46222c4238.jpg","width":"1080"},{"desc":"","height":"600","title":"","url":"https://p0.ssl.img.360kuai.com/t01215ea8ca449f22c0.jpg","width":"1080"},{"desc":"","height":"438","title":"","url":"https://p0.ssl.img.360kuai.com/t016468630323cb866a.jpg","width":"1080"},{"desc":"","height":"765","title":"","url":"https://p0.ssl.img.360kuai.com/t018107e1f16ce1ab7f.jpg","width":"1080"},{"desc":"","height":"359","title":"","url":"https://p0.ssl.img.360kuai.com/t01207119cc7ea44ea0.jpg","width":"1080"},{"desc":"","height":"618","title":"","url":"https://p0.ssl.img.360kuai.com/t01500302b7b5257f86.jpg","width":"1080"},{"desc":"","height":"390","title":"","url":"https://p0.ssl.img.360kuai.com/t01d38f89cc786363c7.jpg","width":"1080"},{"desc":"","height":"444","title":"","url":"https://p0.ssl.img.360kuai.com/t0169c9153eea680015.jpg","width":"1080"},{"desc":"","height":"482","title":"","url":"https://p0.ssl.img.360kuai.com/t01f83e069bfbc5b125.jpg","width":"1080"},{"desc":"","height":"617","title":"","url":"https://p0.ssl.img.360kuai.com/t01512166f77a80473b.jpg","width":"1080"},{"desc":"","height":"500","title":"","url":"https://p0.ssl.img.360kuai.com/t019f35a233c50a7a7f.jpg","width":"1080"},{"desc":"","height":"521","title":"","url":"https://p0.ssl.img.360kuai.com/t01ddc0ec590f0f55b8.jpg","width":"1080"},{"desc":"","height":"369","title":"","url":"https://p0.ssl.img.360kuai.com/t015d1d6b1908e6ef22.jpg","width":"1080"},{"desc":"","height":"340","title":"","url":"https://p0.ssl.img.360kuai.com/t0180f3ea6284382613.jpg","width":"1080"},{"desc":"","height":"327","title":"","url":"https://p0.ssl.img.360kuai.com/t015822f11a21c9ea5e.jpg","width":"1080"},{"desc":"","height":"320","title":"","url":"https://p0.ssl.img.360kuai.com/t01028e14d3f497c36b.jpg","width":"1080"}]}],"original":0,"pat":"qgc,art_src_3,fts0,sts0","powerby":"hbase","pub_time":1679017140000,"pure":"","rawurl":"http://zm.news.so.com/ea7ee12a2a461ed12a54f770de94ae33","redirect":0,"rptid":"9be08a695da51b4e","rss_ext":[],"s":"t","src":"量子位","tag":[{"clk":"kscience_1:微软","k":"微软","u":""}],"title":"GPT-4论文竟有隐藏线索:GPT-5或完成训练、OpenAI两年内接近AGI

应紫祝1475AI如何立刻显示所有图层(图层太多找不着)我知道图层那里可以查看?
相柴非13767599568 ______ 打开图层面板(快捷键:F7),按下Alt键后,点任意一个图层的显示按钮(眼),即可反向显示出其它图层,再点一次所有图层都会显示的.若有隐藏对象,请 取消所有隐藏对象(快捷键:)

应紫祝1475AI里参考线若有若无怎么办 -
相柴非13767599568 ______ 楼主你好!辅助线快捷键: Ctrl+R 之后可以从左边及上边拉出辅助线 还一个就是需要注意辅助线不使用时可以按Ctrl+3隐藏 ,Ctrl+Alt+3取消隐藏

应紫祝1475ai网格中隐藏的菱形节点怎么删除? -
相柴非13767599568 ______ 用钢笔工具

应紫祝1475AI是什么,它的全称是?我说的是平面设计方面的这个软件哦! -
相柴非13767599568 ______ “AI”全称为“Adobe illustrator”,是一种应用于出版、多媒体和在线图像的工业标准矢量插画的软件.开发商为美国Adobe公司,软件平台为Windows、Mac OS,软件授权:Adobe爱尔兰公司.想要学习平面设计更推荐使用pixso协同软件,...

应紫祝1475AI里怎么转曲线 -
相柴非13767599568 ______ AI中文字转曲用转为轮廓即可:<>中为快捷键 全选<Ctrl+A>,转为轮廓<Shift+Ctrl+O> 若为锁定或隐藏对象请解锁或取消隐藏<Ctrl+Alt+2,Ctrl+Alt+3>

应紫祝1475AI中,怎么实现两个黑色矢量文字,相交部分为白色.求大大们解疑!感激涕零!! -
相柴非13767599568 ______ 1.用路径查找器中的分割,然后取消编组,把相交的地方改白色就行了 2.把两个矢量字原位复制一个并隐藏,然后没隐藏的两个字用路径查找器中的形状模式的交集,这时的效果应该是只有相交的部分,改个白色,然后取消全部隐藏(ctrl+alt+3),就OK了,3.路径查找器中形状模式差集.个人推荐第三个方法

应紫祝1475ai常用快捷键大全 - ai基本操作快捷键大全
相柴非13767599568 ______ 1. ai基本操作快捷键大全1.将ai打开之后在操作界面的左侧就是工具箱,我们绘图所使用的工具基本都在这里2.在工具箱内我们找主要的来介绍和使用吧,首先最重要的额...

应紫祝1475AI打开工具栏和状态栏都不见了怎么办 -
相柴非13767599568 ______ 1、在电脑上打开AI软件,进入主界面后,在主界面的左侧本来会默认显示工具栏的. 2、要想找回工具栏,就要在AI主界面顶部的菜单栏中,找“窗口”的选项左键点击. 3、完成上步操作后,会出现一个对话框,如图所示,找到“工具”字样,点击成功后,“工具”一栏前面会出黑色对勾符号,如图“控制”一栏所示: 4、上步完成操作后,回到主界面,我们会看到左侧位置显示出工具箱了.

应紫祝1475AI怎样取消选择不透明蒙版
相柴非13767599568 ______ 打开窗口菜单下的不透明度面板,选中不透明度蒙版的物体,然后单击面板右上角的小三角,选择释放不透明度蒙版就可以了

应紫祝1475AI怎样不显示画板之外?急.. -
相柴非13767599568 ______ 1.用键盘快捷键 shift+ctrl+H 显示和隐藏AI的画板. 2.要做的图显示在画板内方法:将做的图拖到画板范围内.(或者用快捷键shift+o,将内容框选即可)3.要删除画板,按快捷键shift+o...

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024