科幻片成真!Figure与OpenAI合作新进展 Figure 01接入ChatGPT后成“精”了!
站长网2024-03-14 11:11:052阅
Figure最新展示了他们与OpenAI合作的成果,这一合作让他们的机器人获得了惊人的能力。机器人可以进行语音对话、描述周围环境、做出决策推理、执行高层次请求,并口头解释推理过程。这些功能使得机器人能够执行类似人类的快速、灵巧动作,表明这一合作取得了显著进展。
Figure的机器人具有以下主要功能和能力:
描述周围环境、使用常识推理做出决策、将高层次请求转化为适当的行为,以及用简单英语描述执行特定动作的原因。这些能力都是机器人通过学习得来的,而不是遥控操作,并且以正常速度运行。
技术方面,机器人通过将摄像头获取的图像和麦克风捕获的转录文本输入到一个大型的多模态模型中,实现了视觉和语言理解。该模型由OpenAI训练,负责决定运行哪种学习到的闭环行为以满足给定的命令,并执行相应的策略。
这一成果展示了如何通过综合应用多模态理解能力和机器学习,实现与机器人的自然交互和智能行为规划。OpenAI提供了视觉推理和语言理解能力,而Figure的神经网络则实现了快速、低级别、灵巧的机器人动作。这一合作旨在推动机器人学习的边界,为人形机器人开发AI模型。
Figure的机器人使用搭载摄像头和OpenAI训练的大型视觉语言模型(VLM),实现了200Hz的24自由度动作。此外,Figure在工程方面进行了垂直整合,包括电机、固件、热管理和电子设备等。这些努力使得机器人的动作速度显著加快,接近人类速度,展示了合作的巨大潜力和成果。
0002
评论列表
共(0)条相关推荐
AMD第三季度业绩强势增长353% 第四季度营收展望未达预期
北京时间11月1日消息,美国芯片制造商高级微设备公司(AMD)今天公布了2023财年第三季度财报。报告显示,AMD第三季度净利润同比大增353%,达到2.99亿美元,但给出的第四季度营收展望低于华尔街分析师的预期。0000离开OpenAI待业的Karpathy推出大模型新项目minbpe
要点:1、Karpathy宣布离开OpenAI后不懈努力,推出新项目minbpe,一天内GitHub标星量达到1.2k。2、minbpe项目旨在为LLM中常用的BPE算法创建干净、教育性的代码。3、minbpe项目提供了两个Tokenizer,实现训练、编码和解码等主要功能。站长网2024-02-18 14:46:350000全球75%的组织计划在工作设备上禁止ChatGPT 和生成式AI应用
本文要点:1.75%的全球组织计划在工作设备上禁止ChatGPT和其他生成型AI应用。2.数据安全、隐私和企业声誉的风险是实施禁令的主要原因。3.多数受访者对生成型AI应用在提高效率和创新方面的潜力持肯定态度,但对未经安全验证的应用存在网络安全威胁。站长网2023-08-08 17:57:060000停更2年李子柒选择在抖音复出!
李子柒要复出了!作为曾经最有影响力的短视频博主,李子柒虽然已经停更2年之久,但是江湖不见其人,却仍还流传其传说。自从今年9月中,李子柒久违的在视频中露面,宣布“在未来,会继续坚持用自己的方式带来更多优质内容”后,她会在哪里复出就一直备受关注。就在大家还在议论纷纷时,李子柒似乎已经给出了她的答案。站长网2023-10-10 20:20:090000小米汽车官方微博正式上线 首款车型将在2024年推出
今日,小米汽车官方微博正式上线,认证为“小米汽车科技有限公司”,目前暂未发布任何内容。据悉,今年10月,小米汽车微信公众号也已正式上线。小米汽车预计将在2024年推出其首款车型。小米SU7有三个版本已通过工信部申报,分别是SU7、Pro和Max。站长网2023-12-14 10:40:330000