鹅厂机器狗抢起真狗「饭碗」!会撒欢儿做游戏,遛人也贼6
让机器狗学完真狗子的运动数据,真有二哈那感觉了!
它轻松跨个栏,后面“主人”差点没跟上:
钻个“狗洞”倒是轻车熟路:
还能两只狗一起撒欢儿,它追、它逃……
这就是鹅厂机器狗的最新进展。
利用预训练模型喂给机器狗真狗子的运动数据、并通过强化学习,机器狗Max不仅在行为上更灵动,而且还能根据已经掌握的技能“举一反三”,去适应更加复杂的环境。
总结来说,就是里里外外都“更狗”了一些。
有策略地追逐撒欢儿
这次机器狗学习的新技能里,最强的一项还是玩游戏。
机器狗不仅能遵守规则,还能自己想出策略赢比赛,可能比真狗子还要聪明些。
具体来看,这是一个障碍追逐比赛,受到“World Chase Tag”启发,规则如下:
研究人员设置了不同游戏难度,最简单的就是空旷场地:
玩游戏过程里,机器狗很明显是有策略的。
比如,一般等到躲避者离棋旗子较远时,追击者才会发起猛攻,把它逼到死角,游戏结束。
如果追击者发现躲避者离旗子很近,自己根本没机会追上它时,它会先放弃追逐,等待下一个旗子出现:
有障碍物干扰也没关系,俩狗子一样玩得很6:
而能够有如此表现,并不是机器狗从一开始就拿这个游戏训练。
它其实是基于自己已经学到的一些动作、知识和技能,来应对这个游戏场景。
具体怎么实现?往下看。
学了真·狗的数据
研究一共分为三个阶段。
学习动物运动姿态
将运动姿态和外界感知联系起来
附加网络获取和复杂任务有关信息
第一阶段,是通过游戏中常用的动作捕捉系统,通过收集真狗的姿态数据,包括走、跑、跳、站立等动作,在仿真器中构建一个模仿学习任务。
然后将这些数据中的信息抽象并压缩到深度神经网络模型中,使其在涵盖运动姿态信息的同时,还具有一定可解释性。
腾讯RoboticsX机器人实验室和腾讯游戏合作,用游戏技术提高了仿真引擎的准确性和高效性,同时游戏制作和研发过程中积累了多元的动捕素材。
这些技术以及数据对基于物理仿真的智能体训练以及真实世界机器人策略部署也起到了一定的辅助作用。
在模仿学习的过程中,神经网络仅接受机器狗的本体感知信息作为输入,例如机器人身上电机的状态等。
再下一步,模型引入周边环境的感知数据,例如通过其他传感器“看到”的脚下的障碍物。
第二阶段,通过额外的网络参数,将第一阶段掌握的动物姿态和外界感知联系在一起。
这样机器狗就能通过已经学会的动作,来应对外界环境。
当机器人能够适应多种复杂的环境后,这些将动物姿态与外界感知联系在一起的知识也会被固化下来,存在神经网络结构中。
然后机器狗就能自如上楼梯了。
或者在不连续、不平整地面上奔跑:
然后就到了最后一阶段,让机器狗根据上面学会的技能,去解决实际问题
也就是上面提到的做游戏环节。
据介绍,游戏中机器狗的所有控制策略都是神经网络策略。
在仿真中进行学习并通过zero-shot transfer(零调整迁移),让神经网络模拟人类的推理方式,来识别从未见过的新事物,并把这些知识部署到真实机器人上。
比如在预训练模型中学会了躲避障碍物的知识,那么在游戏里设置障碍,机器狗也能轻松应对。
本次研究新进展由腾讯Robotics X机器人实验室带来。
该实验成立于2018年,目前推出的机器人项目包括机器狗Max一代/二代、机器狗Jamoca、轮式机器人Ollie、自平衡自动驾驶摩托车等。
One More Thing
值得一提的是,之前UC伯克利的学者也将一种“真狗子”的训练方法,用在了机器狗上。
吴恩达开山大弟子Pieter Abbeel等,让机器狗自己在地上打滚一个小时,学会了走路。
而去年腾讯发布机器狗Max二代时,一段小花絮里,这狗会“扑脚”、“撒欢跑”,确实有家里毛孩子那味儿。
(当然,如果想让它成为一只听主人话的狗, 通过指令即可对其发号施令。)
咱就是说,现在机器狗的发展方向,不朝着翻跟头卷,反倒是要和真狗子“抢饭碗”了吗?
Faraday Future宣布FF 91第一阶段交付将于5月31日开始
今日,FaradayFuture宣布,三阶段交付计划中的第一阶段交付将于美国时间5月31日开始,公司将于美国时间6月6日与首批行业专家和用户举行共创日主题活动。在第一阶段,首批行业专家FPO将全额支付FF91车辆的费用,以便预订车辆并接受车辆使用培训。这些行业专家FPO将在第二阶段开始时拥有其预订的FF91。站长网2023-05-26 13:45:550000京东双十一10月23日晚8开卖 超8亿款商品支持全程价保
今年京东双十一将于10月23日晚8点现货开卖,京东还为超8亿款商品提供全程价保,价保时间从10月23日20点持续到11月13日24点,买贵一键退差价。消费者可以通过京东App快速享受价格保护服务。此外,京东还为消费者提供买贵退差价服务。站长网2023-10-16 11:02:450000孙正义宣布1000亿美元AI芯片项目计划后,软银股价飙升
划重点:1.🤖软银创始人孙正义考虑创建一家1000亿美元芯片公司,供应支持人工智能的半导体。2.💰计划名为Izanagi,预计软银将提供300亿美元,其余700亿美元可能来自中东机构。3.🌐项目若成功,将超越微软对OpenAI的投资,占据全球半导体市场五分之一。站长网2024-02-19 10:36:410000Google Domains关闭 其资产以1.8亿出售给Squarespace
谷歌母公司Alphabet今日宣布将关闭其运营的域名注册商GoogleDomains业务。广受欢迎的网站建设平台Squarespace在另一份公告中证实了此事,并表示其将以1.8亿美元的价格收购GoogleDomains,而摩根大通将为此次交易提供一定融资。据悉交易预计将在第三季度完成,具体的成交条件仍有待确定。站长网2023-06-16 16:45:200000