Figure 首发 OpenAI 机器人,可以与人类全面对话,哪些信息值得关注?

327 阅读15分钟

Figure首发的OpenAI机器人,即Figure 01,是一款能够与人类全面对话的人形机器人。值得关注的信息包括:

  1. 技术合作与创新:Figure与OpenAI的合作,使得Figure 01成为首款搭载OpenAI大模型的人形机器人[1]。这种合作加速了人形机器人产业的发展,展示了科技巨头在该领域的布局和创新能力。
  2. 对话能力:Figure 01不仅能够听懂人类的对话,还能进行视觉识别和理解,甚至能执行一些基本的家务任务,如递食物、捡垃圾、收拾盘子等8。这表明它具备高级的语言智能和一定的自主决策能力。
  3. 视觉与动作能力:除了对话能力外,Figure 01还具有视觉能力,并能表述所见画面。它能够伸手拿起桌上的苹果并解释原因,显示出其快速、低级、灵巧的机器人动作能力2[10]。
  4. 商业化前景:Figure 01的成功展示了通用型人形机器人的商业化落地潜力。结合OpenAI的语言模型和Figure神经网络的动作能力,这款机器人有望在多个领域发挥重要作用[10]。
  5. 资金支持:Figure从亚马逊创始人贝索斯、英伟达、OpenAI和微软等巨头那里融资了约6.75亿美元,这为其研发和市场推广提供了强大的资金支持[17]。
  6. 速度与效率:尽管Figure 01的速度只有人类的16.7%,但它已经在仓库中执行搬运任务,拥有自主导航、识别物体和为任务优先级排序的能力[14]。这表明它在特定应用场景下具有较高的效率和实用性。

综上所述,Figure 01作为一款集成了OpenAI大模型的人形机器人,其全面对话能力、视觉与动作能力、以及潜在的商业化前景,都是值得关注的重要信息。

iPhone* 自带的iMessage**变成ChatGPT**,直接用*iMessage对话的方法是什么?

您可以通过给

chat2gpt@icloud.com

发送消息的方式来使用iMessage作为ChatGPT客户端[4]。这种方法不需要下载App、注册密码,直接就能使用[4]。这表明用户可以通过特定的邮箱地址与ChatGPT进行交互,从而利用iMessage的功能来实现与ChatGPT的对话。

image.png

Figure 01* *OpenAI合作的具体细节是什么?

Figure 01与OpenAI合作的具体细节包括以下几个方面:

  1. 技术融合:Figure 01的最新合作使其获得了高水平的视觉和语言智能,这使得机器人能够进行“快速、低级别、灵巧的动作”[22]。这意味着Figure 01在动作执行上更加流畅自然,能够更好地理解和回应人类语言。
  2. 认知能力提升:通过OpenAI大模型的支持,Figure 01能够充分识别出桌面的物体、状态和位置,甚至能够指出苹果是红色的,以及包括了人类工程师的位置和手放在桌面上的细节[23]。这表明Figure 01具备了较高的认知能力,能够对周围环境进行细致的观察和理解。
  3. 交互能力增强:Figure 01可以描述其视觉体验、规划未来动作、反思其记忆、口头解释其思考过程,并具有描述周围环境、使用常识思维进行决策的能力[25]。这些能力的提升,使得Figure 01不仅能够与人进行全面对话,还能在一定程度上模拟人类的思考过程和决策方式。
  4. 全面对话能力:借助OpenAI的能力,Figure 01现在可以与人进行全面对话,OpenAI模型提供了这一能力的支持[26]。这表明Figure 01在语言交流方面有了显著的进步,能够更加自然和流畅地与人类进行互动。

Figure 01与OpenAI的合作主要集中在技术融合、认知能力提升、交互能力增强以及全面对话能力的获得上。这些合作成果使得Figure 01在动作执行、环境感知、语言交流等方面都有了显著的进步,使其成为一个更加先进和人性化的机器人。

Figure 01* 在视觉识别和理解方面采用了哪些技术或算法?*

Figure 01在视觉识别和理解方面采用了以下技术或算法:

  1. OpenAI赋能的视觉推理和语义理解,以及神经网络算法用于快速输出动作指令[27]。
  2. 在训练过的大型视觉语言模型(VLM)的帮助下,进行目标的识别、定位以及推理合适的拿放姿势[28]。
  3. 结合生成式人工智能与神经网络学习原理的最新推出的视觉语言模型技术[29]。

这些技术和算法共同使Figure 01能够灵活地与人类互动,完成自主学习、识别判断和多任务处理等复杂任务。

如何评价* Figure 01*在执行家务任务时的准确性和效率?

Figure 01在执行家务任务时的准确性和效率可以从几个方面进行评价。

首先,从准确性角度来看,Figure 01能够自主调整动作不准确的地方,这意味着它具有一定的自我修正能力,能够在没有人为远程遥控的情况下,通过自身的算法和学习机制来提高动作的准确性[33]。此外,Figure 01还拥有强大的物品识别能力,这表明它在执行家务等任务时,能够理解和处理各种物品,从而提高任务完成的准确性[32]。

其次,从效率角度来看,Figure 01展示了端到端神经网络框架下的对话能力,且机器人的速度有了显著的提升[31]。虽然这一证据主要强调了其对话能力的提升,但可以间接推断出,由于技术的进步和优化,Figure 01在执行任务时的效率也得到了相应的提高。特别是在家务等日常任务中,这种效率的提升意味着可以在更短的时间内完成更多的工作,或者以更高的频率重复执行任务。

Figure 01在执行家务任务时展现出了较高的准确性和效率。它不仅具备自我修正的能力和强大的物品识别能力,而且随着技术的进步,其执行任务的速度和效率都有了显著的提升。这些特点使得Figure 01成为一个在家庭环境中非常有潜力的应用工具31[33]。

Figure 01* 的资金支持中,除了亚马逊创始人贝索斯、英伟达、OpenAI和微软外,还有哪些知名投资者参与了融资?*

除了亚马逊创始人贝索斯、英伟达、OpenAI和微软外,参与Figure 01资金支持的知名投资者还包括英特尔旗下风投机构、LG旗下公司LG Innotek以及三星[39]。此外,Figure AI还在2023年从Parkway Venture Capital领头的投资者手中筹集了7000万美元38

Figure 01* 在商业化应用中的潜在领域有哪些?*

Figure 01在商业化应用中的潜在领域主要包括制造业、服务业、家庭和军事等。具体来说,人形机器人可以被部署在一些全球最大品牌的商业应用中,创造一个潜在价值数十亿美元的产业[46]。此外,Figure AI的目标是将人形机器人投入到劳动力中,特别是在仓库中执行结构化、重复性、经常危险的任务,这表明其在制造业中的应用潜力巨大[48]。同时,人形机器人的潜在应用领域还包括服务业、家庭和军事等,其中家庭场景虽然最具挑战性,但市场空间巨大,未来有望出现养老机器人、保姆机器人等走进千家万户的情况[49]。这些信息共同描绘了Figure 01在商业化应用中的广泛潜力和多样化应用场景。

相关事件

事件名称事件时间事件概述类型
Figure发布首款搭载OpenAI大模型的人形机器人Figure 012024年03月14日美国明星机器人创业公司Figure发布了其首款搭载OpenAI大模型的人形机器人Figure 01,展示了与人类对话的能力。科技创新
Figure人形机器人与人类全面对话2024年03月14日至2024年03月15日Figure的人形机器人通过OpenAI的大模型实现了与人类的全面对话,包括视觉能力、理解命令执行任务等。科技创新
Figure融资成功不详(报道日期为2024年03月13日)从亚马逊创始人贝索斯、英伟达、OpenAI和微软等巨头那里获得约6.75亿美元融资。融资成功
Figure人形机器人执行搬运任务不详(报道日期为2024年03月14日)Figure的人形机器人在仓库中执行搬运任务,拥有自主导航、识别物体和为任务优先级排序的能力。应用实践

相关组织

组织名称概述类型
Figure美国明星机器人创业公司,发布了首款搭载OpenAI大模型的人形机器人Figure 01。科技/人工智能
OpenAI一个专注于人工智能研究和开发的公司,与Figure合作提供大模型支持。科技/人工智能
苹果公司(Apple Inc.)在iMessage应用中集成了ChatGPT功能,允许用户通过iMessage直接与机器人对话。科技/消费电子
特斯拉(Tesla Inc.)被提及为Figure在投资者关注的人形机器人之一,尽管与主题直接相关性不高。科技/汽车制造
英伟达(NVIDIA Corporation)在Figure融资过程中被提及,是图灵奖得主、深度学习领域的先驱之一。科技/半导体与图形处理器
微软(Microsoft Corporation)在Figure融资过程中被提及,是一家全球领先的软件、服务和技术解决方案提供商。科技/软件及服务

相关人物

人物名称概述类型
Brett AdcockFigure的创始人之一,表示视频中展示了端到端神经网络的能力。企业家/科技创新者
马斯克(Elon Musk)被提及为特斯拉“擎天柱”的创始人,虽然与主题直接相关性不高,但他的名字经常与创新和投资联系在一起。企业家/科技创新者
贝索斯(Jeff Bezos)前亚马逊创始人,参与了Figure的融资过程。企业家/科技创新者

参考资料

1. 人形机器人产业进入快速发展期,科技巨头纷纷加速布局 - 证券之星 [2024-03-15]

2. 与OpenAI合作13天后,Figure人形机器人展示与人类对话能力

3. 重磅!这家公司首发OpenAI机器人可以与人类全面对话创始人

4. 与OpenAI合作13天后,Figure人形机器人展示与人类对话能力 [2024-03-14]

5. Figure首发OpenAI 机器人 - 知乎专栏 [2024-03-15]

6. 成立仅2年,做出能和人类对话的人形机器人,Figure AI什么来头? [2024-03-14]

7. Figure首发OpenAI大模型加持的机器人demo - 新浪财经 [2024-03-13]

8. OpenAI机器人来了,可与人类全面对话 - 澎湃新闻 [2024-03-15]

9. Figure AI首发OpenAI机器人,能与人类全面对话,接近人类速度! [2024-03-14]

10. 初创公司Figure首发OpenAI机器人通用型人形机器人商业化落地可期 [2024-03-14]

11. ChatGPT有身体了!与人类全面对话,还能干家务做决策 - 华龙网 [2024-03-15]

12. 重磅!这家公司首发OpenAI机器人,可以与人类全面对话,创始人 [2024-03-14]

13. 苹果手机直接使用ChatGPT?让你的iPhone即刻变身AI助手!(蘋果 ...

14. Figure 首发OpenAI 机器人,可以与人类全面对话,哪些信息值得关注? [2024-03-14]

15. Figure 首发OpenAI 大模型加持的机器人demo-ZAKER新闻 [2024-03-14]

16. Figure发布人形机器人演示视频:OpenAI模型加持 - 界面新闻 [2024-03-13]

17. Figure首发OpenAI大模型加持的机器人demo... 来自财联社APP - 微博 [2024-03-13]

18. Figure首发OpenAI大模型加持的机器人demo - 腾讯新闻 [2024-03-13]

19. OpenAI大模型上身机器人,原速演示炸场 - 36氪 [2024-03-13]

20. OpenAI大模型上身机器人,原速演示炸场! - 新浪 [2024-03-13]

21. OpenAI机器人活了,说话做事太像人,2分半视频震撼世界 - 36氪 [2024-03-14]

22. Figure 01机器人融合OpenAI技术实现互动突破| ATYUN.COM 官网 [2024-03-14]

23. 人形机器人植入OpenAI大脑:抢工作事小、灭绝人类事大? - OFweek [2024-03-15]

24. OpenAI与Figure的人形机器人“Figure 01”问世! - 网易 [2024-03-14]

25. 机器人时代真的来了!AI也爱打游戏,OpenAI公布Sora细节 - QQ.COM [2024-03-14]

26. 「机器人时代正式到来」灵魂汁子OpenAI浇给Figure 01 - 网易 [2024-03-14]

27. FIGURE 01人形机器人在OPEN AI大模型的加持下可灵活与人类互动 ... [2024-03-15]

28. OpenAI机器人,一出手就是王炸 - 机器之心 [2024-03-14]

29. OpenAI机器人来了,“人形机器人”进化能否提速? - 新浪 [2024-03-15]

30. 视觉手势识别算法 - 火山引擎

31. Figure 首发OpenAI 机器人,可以与人类全面对话,哪些信息值得关注? [2024-03-13]

32. ChatGPT终于有身体了,能说会看还能做家务 - 虎嗅 [2024-03-14]

33. 这下火了,半个硅谷科技圈都投了它 - 澎湃新闻 [2024-03-01]

34. 机器生命觉醒!首个OpenAI机器人问世,马斯克“坐不住了” [2024-03-14]

35. 英伟达等投资!Figure AI人形机器人公司要叫板马斯克的“擎天柱” [2024-03-01]

36. 人形机器人创企Figure AI获6.75亿美元融资,贝佐斯 - 网易 [2024-03-01]

37. Figure AI 在人形机器人领域取得了675 亿美元的突破 - Unite.AI [2024-02-29]

38. Figure AI获6.75亿美元融资!英伟达、OpenAI等都在押注 - 证券时报 [2024-02-27]

39. 英伟达和OpenAI入局,人形机器人爆发前夜了? - 搜狐 [2024-02-24]

40. 180亿,清华90后博士搞出了超级独角兽 - 36氪 [2024-03-03]

41. 估值20亿美元!美AI人形机器人初创企业接连获微软和英伟达投资 [2024-02-26]

42. 炸裂!OpenAI机器人,来了! - 证券时报 [2024-03-14]

43. 估值26亿美元!人形机器人公司获英伟达、微软、亚马逊投资与 ... [2024-02-29]

44. OpenAI、英伟达重金下注,这家机器人公司凭什么估值26 亿美元 - 36氪 [2024-03-01]

45. [PDF] 智能化进阶开启,商业化落地在即 [2023-12-20]

46. 被科技巨头押注,Figure AI创始人是“马斯克2.0”? - 华尔街见闻 [2024-03-02]

47. Figure 01人形机器人在Open AI大模型的加持下可灵活与人类互动对话 [2024-03-15]

48. 【智能前线】第1期:Figure特辑,特斯拉Optimus值得重视的对手 [2024-03-05]

49. 两大巨头联手!微软、OpenAI计划1亿美元投向人形机器人 - 医药魔方