首页 >>  正文

模型制作机器

来源:baiyundou.net   日期:2024-09-29

《科创板日报》7月11日讯(编辑 宋子乔) 通过嵌入大语言模型,机器人变得更加智能,将视觉模型也堆上去,机器人会有怎样的提升呢?

\n

AI科学家李飞飞带领的团队日前发布了具身智能最新成果:大模型接入机器人,把复杂指令转化成具体行动规划,人类可以很随意地用自然语言给机器人下达指令。更重要的是,通过将LLM(大语言模型)+VLM(视觉语言模型)结合在一起,机器人与环境进行交互的能力进一步提升,无需额外数据和训练便可完成任务。

\n

\n

李飞飞团队将该系统命名为VoxPoser,相比传统方法需要进行额外的预训练,这个方法让机器人在零样本的前提下完成了,解决了机器人训练数据稀缺的问题。

\n

李飞飞是华裔女科学家、世界顶尖的AI专家,现为美国斯坦福大学终身教授、斯坦福大学人工智能实验室主任,曾任谷歌副总裁和谷歌云首席科学家。前Open AI研究员、曾担任特斯拉人工智能和自动驾驶视觉总监的Andrej Karpathy便是其得意弟子。

\n

李飞飞研究领域涉及计算机视觉、机器学习、深度学习、认知神经科学等,而近年来其关注的重点聚焦在AI智能体,即具身智能。在她看来,计算机视觉未来的重点方向就是具身智能,她认为,具身AI可能会给我们带来一次重大的转变,从识别图像等机器学习的简单能力,转变到学习如何通过多个步骤执行复杂的类人任务,如制作煎蛋卷。

\n

▌不仅能听懂人话 还不需要额外数据和训练

\n

回到VoxPoser,为什么说它是具身智能领域的一大突破?当然不是因为李飞飞本人的学术地位。

\n

VoxPoser解决了机器人训练的一大难题——数据稀缺。

\n

VoxPoser的研究工作中,通过将LLM(大语言模型)+VLM(视觉语言模型)结合在一起,可实现“人类自然语言输入——代码生成反馈给机器人——机器人收到指令并规划路径——最终完成任务”。

\n

\n

\n

\n用自然语言(打开上面的抽屉,小心花瓶!)给机器人下达指令后机器人完成\n

这个流程的意义在于,机器人的交互能力大大提高,通过LLM+VLM拥有了眼睛和理解力,相当于拥有了人类一样学习能力,即从现实环境中收集数据实时学习,而不是依赖于提前录入的数据库“遇题找答案”。

\n

李飞飞团队也表示,这些操作均不需要进行任何训练或使用基本操作,只要掌握了以上基本流程,就可以完成任何给定任务,实现了在真实世界中的零样本机器人操纵。

\n

\n可操作的物体是开放的,不用事先划定范围,开瓶子、按开关、拔充电线都能完成\n

在数据对机器学习的重要性和数据获得的难度上,李飞飞有着十足的话语权。她在2006主导构建的ImageNet数据集是世界首个用于计算机视觉算法的大规模人工标注照片数据集,它包含了超千万张有标签的图像,可以用来训练复杂的机器学习模型,被誉为改变人工智能历史的数据集。但这些数据的收集、处理工作异常艰巨,来自全球167个国家近5万名工作者以众包的方式花费三年时间才完成。

\n

如何解决训练数据稀缺的难题,将成为具身智能乃至人工智能发展过程中的第一大拦路虎。

\n

在2022年的论文中,李飞飞旗帜鲜明地表示,随着人工智能的成熟,人工智能模型的建立正变得越来越容易,包括亚马逊、谷歌和微软在内的公司都提供自动机器学习(AutoML)产品,允许用户在自己的数据上建立最先进的人工智能模型,而无需编写任何代码。但由于规划和注释的成本,为人工智能创建数据集仍然是一个主要的痛点,创建适当的数据集和数据管道以开发和评估AI模型越来越成为最大的挑战。

\n

VoxPoser目前还存在着一定的局限性,它依赖于外部感知模块,仍需要为嵌入的大模型手动输入提示词,仍需要通用的动力学模型来完成更丰富的动作等。

\n

不过,学术界、业界对此议论纷纷。一位前微软研究员评价,这项研究走在了人工智能系统最重要和最复杂的前沿。另有DeepMind研究员、人形机器人初创公司Figure创始人等为这项研报“点赞”。

\n

VoxPoser项目已开辟官网,相关论文已上线,代码即将推出。当下李飞飞团队只是迈出了第一步。这一框架将有何改进、未来会怎样应用在机器人产品上,我们拭目以待。

","gnid":"9089cb5de6449a199","img_data":[{"flag":2,"img":[{"desc":"","height":"789","title":"","url":"https://p0.ssl.img.360kuai.com/t0143790a225479a293.jpg","width":"2742"},{"desc":"","height":"675","s_url":"https://p0.ssl.img.360kuai.com/t01fc2795066c8686e6_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01fc2795066c8686e6.gif","width":"900"},{"desc":"","height":"675","s_url":"https://p0.ssl.img.360kuai.com/t014435a40e0e41d663_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t014435a40e0e41d663.gif","width":"900"},{"desc":"","height":"675","s_url":"https://p0.ssl.img.360kuai.com/t019aea4d068f98aa7f_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t019aea4d068f98aa7f.gif","width":"900"},{"desc":"","height":"525","s_url":"https://p0.ssl.img.360kuai.com/t015a8d3ad527d71b1c_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t015a8d3ad527d71b1c.gif","width":"700"}]}],"original":0,"pat":"art_src_1,fts0,sts0","powerby":"hbase","pub_time":1689051149000,"pure":"","rawurl":"http://zm.news.so.com/c749e814a573318b99d96ae3bfde69dc","redirect":0,"rptid":"1cebabd5aaaa3034","rss_ext":[],"s":"t","src":"科创板日报","tag":[{"clk":"ktechnology_1:机器人","k":"机器人","u":""},{"clk":"ktechnology_1:人工智能","k":"人工智能","u":""},{"clk":"ktechnology_1:机器学习","k":"机器学习","u":""},{"clk":"ktechnology_1:科学家","k":"科学家","u":""}],"title":"数据稀缺阻碍具身智能进步?顶尖科学家抛出方案:“大模型+机器视觉”实现零样本操控机器人

窦廖德1164粘土模型制作需要哪些设备和工具 -
政师熊13315288692 ______ 上河图总结1.工作台.2.真空练泥机.3.拉坯机4. 转盘.5.雕塑刀.6.修坯刀.7.切割丝和铜丝弓.黏土模型需要使用的度量工具有卷尺、直尺等.8.气泵和喷釉壶.9.窑炉.

窦廖德1164有种机器根据扫描自己的面部三维制造自己的头部模型,那是什么机器 -
政师熊13315288692 ______ 三维扫描仪或者三维相机 市面上销售的产品基本上是正面180度 比如水晶人像、公仔.也有可以做360的,但需要一整套设备和专业的人员,比如inspeck的头像系统,投资较大

窦廖德1164请问,这个塑料玩具的模型是用什么机器制作出来的?希望专业认识给予回答!分不多了,给20了 -
政师熊13315288692 ______ 这是注塑机注出来的,有模具,把液体化的塑料注射进模具,冷却后就成型了

窦廖德1164高达模型制作工具
政师熊13315288692 ______ 最基本的就是模型剪+笔刀+砂纸,模型店里应该有卖的,国产的有模型剪和笔刀套装,很便宜几十块钱就能买到了,砂纸的话在五金店有水砂纸卖,可以替代模型专用砂纸~~~

窦廖德1164有种机器是制作样品的,制作过程是通过Pro/E导入模型,然后通过一层层纸叠加雕刻出来样品的,这机器叫什么
政师熊13315288692 ______ 就是生成三维的模型(人物和场景的模型) 接着调动画 然后打灯光 展UV 画这些人为因素使得估计制作经费成为一件不是简单的事.例如某有名的导演导的

窦廖德1164计算机里的三维模型怎样制作成实际模型? -
政师熊13315288692 ______ 我给你讲一下步骤吧 1,设计出三维模型 2,设计出autocad工程图纸 3,用图纸设计或着修改出相应的模具机器 4,制作模型 关于材料,这个没有特别的要求,模具的材料可以是石膏,可以是塑料,都可以. 银子如果你有现成的模具机器,只要修改相应的程序即可,如果没有,那你可以到附近的工厂,给点银子让别人帮你改就可以了.关键是制作模具的机器 关于模具资料,这个问题实在是太广泛我实在没有能力解答,因为我们都不是专业性的人事,不过我建议你去http://www.mould.net.cn/模具网看一下,里边资料很多的

窦廖德1164机器人模型设计内容?
政师熊13315288692 ______ 首先要了解设计这个机器人的需求,也就是制造出来这个机器人之后是让他干什么的.在一切都了解清楚之后,其次就是机器人工程师对这个机器人做电路、焊接等功能性的制作,剩下的外观就是要靠设计师在这些基础上做创新了,对于设计师来说每一次设计都是一次创新和挑战.设计师在做设计之前要充分了解机器人的目的和功能.

窦廖德1164模具制作需要经过哪些程序,需要懂哪些机器的操作? -
政师熊13315288692 ______ 1)画图,设计模具的图纸,画图可以用3D画图的软件,可以编辑程序2)材料,找需要用的铁,每种铁都不一样的,找模具的特性的铁3)制作,数控车床,铣床,磨床,电火花,线切割,金雕机,加工中心

窦廖德1164小学 怎样 样做飞机模型制作 -
政师熊13315288692 ______ 制作飞机模型 一材料准备: 1、 长250毫米、宽15毫米、厚3毫米以及长90毫米、截面3平方毫米的桐木条各一根(手工袋中有配). 2、 橡皮筋两根(手工袋中有配). 3、 长370毫米、宽80毫米挂历纸(或其他类似纸张)一条(自备). 4、...

窦廖德1164高达模型的等级分别是多少? -
政师熊13315288692 ______ High Grade -----高达HG ----(一般比例1:144 13厘米左右 也有1:100 和1:60的)高达模型的高级系列,是万代高达模型的普及产品,衍生系列为HGUC 和TV系列.优点: 价格便宜,总体制作难度属于中等偏下,为入门级,推荐新手啊.缺点: ...

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024