特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

PHPz
PHPz 转载
2023-09-25 12:33:03 782浏览

沉寂了几个月的特斯拉人形机器人擎天柱(Optimus)终于有了新的动态。记得上一次看到它还是在特斯拉股东大会上,当时 Optimus 展示了自由行走、灵活抓取放下物体等技能。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

特斯拉 Optimus 在今天再次升级。现在,它具备了自主物体分类的能力。其中最引人注目的是完全端到端训练的神经网络:输入视频,输出控制。这类似于特斯拉自动驾驶 FSD V12 开发中的神经网络训练,能够处理所有输入信号并输出驾驶决策

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

不禁要问,如何做到的呢?

Optimus具备了自我校准手臂和腿部的能力,只需使用视觉和关节位置编码器,它就能够准确定位自己的肢体在空间中的位置

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

Optimus具备精确的校准能力,使其能够更高效地学习各种任务。它仅仅通过视觉输入,在其神经网络上完全实现了on-board运行

这样一来,Optimus 可以完全自主地将物体按颜色进行分类。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

即使有人干扰,Optimus仍然能够准确地按照颜色对物体进行分类

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

Optimus 还展示了自主纠正(将歪倒的物体摆正)的行为能力。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

经过训练后,它还能执行新任务,比如将分类好的物体打乱。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

经过了一整天的「工作」,是时候伸展一下、做个双手合十吧。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

团队资深软件工程师 Julian Ibarz 表示,「非常高兴分享团队在过去几个月中取得的进展。现在 Optimus 可以完成长期任务,比如完全以任务无关的方式自动对物体进行分类。只需要收集更多数据,则无需更改任何代码就可以训练新的复杂任务。」

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

马斯克也确认了这一「进展」

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

网友在震惊之余,也提出了一些问题,比如是否可以输入 prompt 让 Optimus 来执行任务?答案是肯定的,视频中使用相同的网络来执行分类或取消分类任务,只需要告诉 Optimus 你想做什么就行了。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

Optimus 的「前世今生」

Optimus 并非一开始就是一个实体机器人的,它从「Tesla Bot」这样一个机器人通用计划慢慢孵化。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

2021 年马斯克在「特斯拉 AI 日」上展示了 Tesla Bot 的大致形态。

甚至在 Tesla Bot 动作展示时,是由工作人员穿着特制的紧身服装,扮成机器人的模样表演了一段舞蹈。但就是这样一个想法,逐渐扎根,并走向现实,一次次突破给人们惊喜。

一年后的「特斯拉 AI 日」上,曾经由人扮演的 Tesla Bot 变为了机器人 Optimus。

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

2022 年的「特斯拉 AI 日」上,Optimus 与人们互相打招呼

Optimus 刚亮相的时候已经能够搬运箱子、给花浇水并在工厂里工作。然而,这并不是 Optimus 的最终目标。Optimus 的目标是成为一台拥有「大脑」的人形机器人

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

Optimus 在特斯拉超级工厂里工作

马斯克表示,当时这个机器人设计出来只用了半年时间,未来成型的样子有很多值得期待的地方。

在2023年的特斯拉股东大会上,Optimus的表现更加出色,步伐更加顺畅,动作也更加熟练

特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力

优化者可以灵活地抓取和放下物体

而现在,Optimus 已经向着它的目标不断前进,拥有「大脑」的路程也越走越清晰。下一次它将如何进化,我们拭目以待。

以上就是特斯拉人形机器人进一步进化:通过视觉自主分类实现瑜伽能力的详细内容,更多请关注php中文网其它相关文章!

声明:本文转载于:51CTO.COM,如有侵犯,请联系admin@php.cn删除