为机器人安上“最强大脑”!谷歌VLA新模型泛化能力提升3倍 能“听懂人话”

收到“捡起灭绝的动物”指令后,这个机器人“思考”了一会儿,然后甚至机械臂,打开爪子,抓起了恐龙。
这是谷歌最新一款机器人模型Robotic Transformer 2(机器人变形金刚2,RT-2)。
上文这个“抓起恐龙”的动作对于人类而言轻而易举,对于机器人而言却
【千问解读】
《科创板日报》7月31日讯(编辑 郑远方)一个单臂机器人“站”在桌前,桌上放着三个塑料动物玩具:狮子、鲸鱼与恐龙。
收到“捡起灭绝的动物”指令后,这个机器人“思考”了一会儿,然后甚至机械臂,打开爪子,抓起了恐龙。
这是谷歌最新一款机器人模型Robotic Transformer 2(机器人变形金刚2,RT-2)。
上文这个“抓起恐龙”的动作对于人类而言轻而易举,对于机器人而言却堪称一个重要飞跃——之前机器人经常无法操纵自己从未见过的东西,也难以实现从“灭绝的动物”到“塑料恐龙”的逻辑飞跃。
作为一款新型视觉-语言-动作(vision-language-action,VLA)模型,RT-2可以从网络、机器人数据中学习,并将这些知识转化为机器人控制的通用指令。

相较于其他机器人研究,RT-2的核心优势在于,其不仅能直接接收“人话”指令,听懂“人话”、理解“人话”,还能做出相应推理,并转为机器人能理解的分阶段指令,从而做出动作完成任务。
RT-2完成的每一项任务,都要求其理解视觉语义概念、并通过控制机器人实现操作这些概念。
例如接到“捡起桌子上快掉下去的袋子”、“将香蕉移动到2加1的总和处”这种指令时,机器人需要对相应物体/场景执行任务,而这些物体与场景它从未在机器人数据中见过,需要从网络数据中转化得到相应知识。


总体而言,RT-2具备三大能力:符号理解(Symbol understanding)、推理(Reasoning)和人类识别(Human recognition)。
(1)符号理解是指RT-2可以从视觉语言预训练中转移了语义知识,而这些语义知识在机器人数据中并不存在。
这类指令示例包括“将苹果移到3号位置”或“将可乐罐推到心形上”。

(2)推理则是将VLM的各种推理能力用于任务控制,包括视觉推理(“将苹果移到相同颜色的杯子里”)、数学推理(“将X移到2加1之和的附近”)、多语言理解(“mueve la manzana al vaso verde”,西班牙语)。

(3)人类识别是以人类为中心的理解和识别能力,RT-2可以完成“将可乐罐移到戴眼镜的人身边”这类任务。

此外,研究人员还将机器人控制与思维链推理相结合。
首先用自然语言描述机器人即将采取的动作的目的,然后是“动作”和动作标记。
例如在下图中,RT-2接收到的要求是“我想钉个钉子,场景里什么东西可能能用上?”,RT-2转化得出了“石头。
动作:1 129 138 122 132 132 106 127”的指令,并拿起了石头。

RT-2还能更好地适用于不同的、机器此前没见过的场景。
比起在大型数据集上预训练的RT-1、Visual Cortex(VC-1)等模型,RT-2泛化能力大幅提高,较前者提高了3倍有余。
加利福尼亚大学伯克利分校的机器人学教授Ken Goldberg表示,机器人的灵巧性仍达不到人类水平,在一些基本任务上也会失败,但谷歌利用人工智能语言模型,赋予机器人推理和随机应变的新技能,是一个很有希望的突破。
2024机器人工程专业录取分数线!附最好50所大学排名
2025届考生如果想要报考机器人工程专业,建议参考具体院校分数线及录取位次,以降低落榜风险。
机器人工程最好50所大学排名显示,东南大学、浙江大学、北京航空航天大学分别位居前三强的位置,更多院校分数线及排名信息可在下文中查阅。
一、2024机器人工程专业录取分数线机器人工程专业集机械工程、电子工程、计算机科学等多学科于一体,致力于培养能设计、研发、维护智能机器人的专业人才。
该专业注重理论与实践的结合,使学生掌握机器人结构设计、控制系统开发、人工智能应用等关键技术。
随着科技的飞速发展,机器人工程专业的需求日益增长,为智能制造、自动化领域输送了大量创新型人才。
这里以浙江、内蒙古2024年招录数据为例,为大家列举机器人工程专业院校的收分门槛。
1、浙江2024年机器人工程在浙江的招生院校共有94所,考生想要就读机器人工程院校,至少要考到461分及以上,省排名位次需在207003名以内。
浙江数据显示,2024年收分最低、最容易考的机器人工程院校是吉林建筑科技学院(461分)、长春工业大学人文信息学院(462分),而收分最高、最难考的机器人工程院校是浙江大学(700分)、湖南大学(661分)。
需要注意的是,机器人工程专业大学中有94所要求考生必选“物化”,如浙江大学、湖南大学等,因此大家在报考前要提前了解清楚专业选科要求。
2、内蒙古2024年机器人工程在内蒙古的招生院校有64所。
数据显示,内蒙古考生想要就读机器人工程院校,至少要考到361分及以上,自治区排名位次需在61564名以内。
2024年收分最低、最容易考的机器人工程院校为长春建筑学院,学校分数为361分;而收分最高、最难考的机器人工程院校为浙江大学,学校分数为688分。
二、2024机器人工程最好50所大学排名根据软科2024年机器人工程专业排名数据来看,上榜的机器人工程院校有164所,其中东南大学、浙江大学分别位居冠亚宝座,专业实力等级为A+级。
而十强院校中,东北大学排全国第6名、西北工业大学排全国第7名、南京理工大学排全国第10名。
下面是机器人工程最好大学排名一览表:学校名称等级排名东南大学A+1浙江大学A+2北京航空航天大学A+3哈尔滨工业大学A+4北京理工大学A+5东北大学A+6西北工业大学A7华南理工大学A8山东大学A9南京理工大学A10南京航空航天大学A11电子科技大学A12湖南大学A13华东理工大学A14广东工业大学A15哈尔滨工程大学A15北京科技大学A17重庆大学A17西安电子科技大学A19北京工业大学A20吉林大学A20华北电力大学A22江南大学A22上海大学A24北京化工大学A25浙江工业大学A26中国矿业大学A27燕山大学A28合肥工业大学A29武汉科技大学A30西安理工大学A31苏州大学A32江苏大学B+33河海大学B+34上海理工大学B+35深圳大学B+35山东科技大学B+37武汉理工大学B+38北京大学B+39安徽大学B+40重庆邮电大学B+41长安大学B+42中国矿业大学(北京)B+43中国石油大学(北京)B+44福州大学B+45南京工业大学B+46青岛大学B+46南方科技大学B+48南京信息工程大学B+48北京建筑大学B+50
骊山到底是福地是祸源?秦始皇嬴政又为什么钟情于骊山
西周末年的周幽王与爱妾褒姒曾在这里演出了一场兴起烽火戏诸侯的古代惨剧,从而葬送了西周王朝。
秦始皇嬴政建陵于此,也造就了二世而亡的悲剧。
骊山到底是福地是祸源?秦始皇嬴政又为什么钟情于骊山,建陵于此呢?从中国历史的传统风水之说看,骊山绝对是一块福荫之地。
古人把墓地的选择看做一件造福于子孙后代的大事,尤其是秦始皇嬴政这个企图传之于万世的封建皇帝自然对墓地的位置更加重视。
《水经注》载:“秦始皇嬴政大兴厚葬,营建冢圹于丽戎之山,一名蓝田。
其阴多金,其阳多玉,始皇贪其美名因而葬焉。
”骊山之南的蓝田玉着称于世,现代地质队曾在骊山北麓开凿金矿。
从视死如视生的传统观念分析,秦始皇嬴政死后还想把这里的金和玉占为己有。
此外,秦始皇嬴政陵园南依骊山,北临渭水,其东侧还有一道人工改造的鱼池水。
按《水经注》的记载:“水出骊山东北,本导源北流,后秦始皇嬴政葬于山北,水过而曲行,东注北转,始皇造陵取土,其地于深,水积成池,谓之鱼池也……池水西北流途经始皇冢北。
”而《两京道里记》载:“始皇陵南有尖峰,名曰望峰,言筑陵者望此为准。
”根据勘察,秦始皇嬴政陵封土中心顶端以及外城垣的南北两门与其南边的骊山最高峰望峰南北相对在一条直线上。
而每一道峰脊似一个花瓣,秦陵就在花蕊位置。
民间称始皇陵为“莲花穴”就是这个道理。
由此不难发现秦始皇嬴政陵的风水特点是,南面背山,东西两侧和北面形成三面环水之势。
如此一块风水宝地,也就不难解释为何秦始皇嬴政会选中骊山为自己营造身后帝国了。
可以说秦代依山环水的造陵观念对后代建陵也产生了深远的影响。
西汉帝陵如高祖长陵、文帝霸陵、景帝阳陵、武帝茂陵等就是仿效秦始皇嬴政陵依山环水的风水思想选择的。
以后历代陵墓基本上继承了依山环水的建陵思想。