Mobile ALOHA:一种低成本的整体远程操作系统用于数据收集
划重点:
1. 💡 研究人员提出了一种低成本的整体远程操作系统,名为 Mobile ALOHA,用于收集关于整体远程操作的数据。
2. 💡 Mobile ALOHA 通过将其放在轮式底座上,扩展了原始 ALOHA 的功能,使其具有移动能力。
3. 💡 研究人员使用静态 ALOHA 数据集进行模仿学习,通过预训练和联合训练,实现了在移动操作任务中的良好性能。
研究人员从斯坦福大学对使用模仿学习进行整体远程操作的任务进行了研究。然而,这种方法在许多日常情况下需要整体远程操作的协调,包括移动和灵巧操作,而不仅仅是单个的移动或操作行为。
这项研究解决了在实现双臂移动操作的模仿学习中的两个关键问题。首先,他们引入了一种名为 Mobile ALOHA 的整体远程操作系统,该系统成本低廉,并设计用于收集双臂移动操作的数据。通过将 Mobile ALOHA 放置在轮式底座上,用户可以在物理连接状态下通过推动车轮来使底座移动,从而实现底座的独立移动,同时用户可以双手控制 ALOHA。研究人员通过同时记录手臂操作和底座速度数据来创建整体远程操作系统。
研究团队指出,通过简单地连接底座和手臂的动作,然后进行直接模仿学习,可以获得模仿学习中的出色表现。他们通过将移动底座的线性和角速度与 ALOHA 的14个自由度关节位置结合起来,创建了一个16维动作向量。这种表达方式几乎不需要实现改变,使得 Mobile ALOHA 能够直接受益于之前的深度模仿学习方法。
研究人员指出,目前几乎没有可用的双臂移动操作数据集。然而,受到在各种机器人数据集上进行预训练和联合训练以进一步提高模仿学习性能的最近成功的启发,他们开始使用静态双臂数据集。具体而言,他们通过引入 RT-X 来使用静态 ALOHA 数据集,该数据集包含825个与 Mobile ALOHA 任务无关的活动,并且两只手臂分开安装。
尽管任务和形态上存在差异,但研究表明,在几乎所有移动操作任务中都可以实现积极的迁移,达到与仅使用 Mobile ALOHA 数据训练的策略相当或更高的性能和数据效率。此外,这一观察结果也适用于其他类别的最先进的模仿学习技术,如 Diffusion Policy 和 ACT。
这种模仿学习的结果对于许多复杂的活动也很有效,包括拉椅子、联系电梯、打开两门壁柜来存放沉重的烹饪锅,以及清理溢出的酒。每项任务只需50个人类示例,协同训练就可以让我们获得超过80% 的性能,与没有协同训练相比,平均绝对提高34%。
项目网址:https://mobile-aloha.github.io/
ChatGPT推出iPhone版APP 支持语音输入、跨设备同步记录
今日,美国人工智能公司OpenAI宣布,推出适用于iOS的ChatGPTAPP应用程序。ChatGPTAPP将首发在美国推出,并将在未来几周内扩展到其他国家/地区,安卓版也即将推出。据介绍,ChatGPTAPP可免费使用并跨设备同步历史记录。它还集成了开源语音识别系统Whisper,支持语音输入。此外,ChatGPTPlus订阅者可以独家访问GPT-4的功能。站长网2023-05-19 08:24:340000微信朋友圈全幅式广告轻互动组件能力升级 新增4种全屏动效
朋友圈全幅式广告轻互动组件能力升级,主要是为了提升广告展示效果和投放效率。具体升级包括动效的增加、组件的优化和转化效果的提升。动效方面,新增了4种全屏动效,包括文字转盘、中心交错、向上堆积和向下堆积,加上原有的上浮、下落、水平和旋转动效,总共有8种类型供广告主选择。文字动效支持自定义文案,可以更灵活地传递品牌信息。站长网2023-12-08 08:56:130000贾扬清新公司Lepton AI曝光 ONNX联创、etcd作者加盟
知名人工智能科学家贾扬清在今年3月宣布离职创业后,他的新公司终于浮出水面。据悉,贾扬清的新公司名为LeptonAI,联合创始成员包括ONNX的联创和etcd的作者等人。LeptonAI的目标是建立高效的AI应用平台,他们的产品正在内测中。站长网2023-07-18 18:29:370000高通发布第三代骁龙8移动平台 小米14系列将全球首发
在今天凌晨的骁龙峰会上,高通技术公司正式发布了全新的旗舰移动平台——第三代骁龙®8。第三代骁龙8是基于QualcommKryo64位架构的处理器,采用先进的4nm工艺。在规格方面,它包括1个基于ArmCortex-X4技术的主处理器核心,主频最高可达3.3GHz;5个最高3.2GHz的性能核心;以及2个最高2.3GHz的效率核心。站长网2023-10-25 09:21:340000在朋友圈刷“直播”,电商引流又增新玩法
对于广大网友来说,每天打开手机,刷刷短视频,浏览朋友圈,成为了一天中放松的小休闲。尤其是微信生态,承载了用户各种各样的需求。腾讯2023Q3财报显示,微信月活跃用户数突破13亿,小程序交易额增加40%,视频号总播放量增加50%,搜一搜月活跃用户量也突破8亿。数据基础,令人叹服。在微信生态各商业触点有机协同之下,朋友圈引流又增加了新玩法。站长网2024-01-16 14:33:440000