テスラのオプティマス人型ロボットは工場で働き、バッテリーの分解や自己修正に熟練しており、さらに先のことも可能です

テスラの人型ロボットが新しいスキルを解放しました!

昨日、テスラ オプティマスは、第 2 世代オプティマス ヒューマノイド ロボットの最新の進歩を示す新しいデモ ビデオを正式にリリースしました。

#今回、オプティマスは工場で働き始め、テスラ電池工場で電池の組み立て方を学び、以前よりも速く歩き、さらに遠くまで歩きました。より安定した。

まずは、オプティマスの最新スキルとトレーニングの詳細を見てみましょう。

Optimus のエンドツーエンドのニューラル ネットワークは、テスラの工場でバッテリー セルを正確にパッケージングできるようにトレーニングされています。

2D カメラ、手のタッチ、力だけに頼って、ロボットの FSD コンピューター上でリアルタイムに実行します。センサー。オプティマスは脚を使ってバランスを保ち、ネットワークが上半身全体を動かします。

挿入プロセスには非常に正確な動きが必要であり、ニューラル ネットワークは次の空きスロットを自動的に見つけます。 Optimus は障害から自律的に回復することもできます。

Optimus のトレーニング データは人間の遠隔操作によって収集され、さまざまなタスクに合わせて拡張されます。

Optimus は工場でテストされており、人間の介入率は減少し続けています。

もちろん、オプティマスは定期的にオフィス内を歩き回れるようになり、より速くなっただけでなく、より遠くまで歩くことができるようになりました。

これに関して、Tesla Optimus (Tesla Bot) エンジニアの Milan Kovac 氏が、Optimus のトレーニングについて詳しく説明しました。

過去数か月にわたって、テスラの素晴らしい製造チームは、研究を実施し、労働スマート データを収集するために、さらに多くのロボットを構築してきました。

チームはニューラル ネットワークをトレーニングして展開し、コンベア ベルトからバッテリー セルを拾い上げてパレットに正確に挿入するなど、Optimus が有用なタスクを実行できるようにしました。

このニューラル ネットワークは完全にエンドツーエンドで動作します。つまり、Optimus はロボットの 2D カメラからのビデオとオンボードの固有受容体からのデータのみを消費し、関節制御シーケンスを直接生成します。

Optimus は、ロボットに組み込まれた FSD コンピューター上で完全に実行され、オンボード バッテリーによって電力が供給されます。この設計により、より多様なデータをトレーニング プロセスに追加することで、単一のニューラル ネットワークで複数のタスクを実行できるようになります。

Optimus はまだ完璧ではなく、まだ少し遅いですが、成功率はますます高くなり、間違いはますます減少しています。テスラはまた、故障事例から回復するようにオプティマスを訓練し、自発的な修正が起こることを確認しました。

テスラは、工場に複数の Optimus 人型ロボットを導入し、実際のワークステーションで毎日テストされ、継続的に改善されています。

チームは、オプティマスの人間性を犠牲にすることなく、より速く移動し、より荒れた地形を処理できるようにするためのさらなる作業を行っています。チームは再現性にも重点を置き、動的キャリブレーションやロボット間の小さな違いを処理できるようにニューラルネットワークをトレーニングする予定だ。近々さらにアップデートが行われる予定です。

さらに、Nvidia の上級研究科学者で AI エージェントの責任者である Jim Fan は、Optimus の新しいビデオで実証されたスキルを高く評価しました。

# 彼は、このビデオによって人間のデータ収集の実際の状況を垣間見ることができ、それがオプティマスの最大の利点であると信じています。このようなパイプラインを構築するには何が必要でしょうか? Optimus は次のことを行います:

Optimus のハンドは、多くの競合製品と比較して、触覚認識と 11 の自由度 (DOF) を備えた世界トップレベルの 5 本指のロボット ハンドです。自由度はわずか 6 ～ 7 で、非常に堅牢であり、継続的なメンテナンスを必要とせずに多数のオブジェクトの相互作用に耐えることができます。

遠隔操作ソフトウェア: VR メガネと手袋を着用している人間のオペレーターが見えます。非常に低い遅延を維持しながら、一人称ビデオのリアルタイム ストリーミングと出力の正確な制御を可能にするソフトウェアのセットアップは、非常に注目に値します。人間は、自分自身の動きとロボットの動きの間のわずかな遅れに非常に敏感です。 Optimus には、人間のポーズをリアルタイムで実行できる流体全身コントローラーが搭載されています。

大規模なフリート: データを並行して収集するには複数のロボット、1 日に複数のシフト (できれば 24 時間) で働く訓練を受けた人間、およびオンコールのメンテナンスが必要です。ロボットが常にビジーであることを保証するチームです。これは、学術研究機関が考慮すらしないほどの運用の複雑さです。

タスクと環境: リモートで何を行うかを把握することも同様に重要です。現在、この作業のほとんどはデモ主導で行われており、ソーシャル メディア ビデオに含めたいタスクに関するデータを収集します。しかし、汎用ロボットの問題を解決するには、タスクの分散と環境を慎重に検討する必要があります。ビデオの 43 秒から 51 秒の部分では、バッテリーの移動、洗濯物の処理、日用品の棚への仕分けなど、工場や家庭の状況を見ることができます。

これは未解決の調査質問です。1,000 のタスクのトレーニング データを収集する予算しかない場合、スキルの伝達と一般化を最大限に高めるために何を選択しますか?

結論: 人型ロボットの問題を解決するには、遠隔操作は必要ですが、十分ではありません。基本的に拡張性がありません。

マスク氏はコメント欄で、今年後半に22の自由度(DoF)を持つオプティマス・ヒューマノイド・ロボット・ハンドの最新目標をプレビューした。これはさらにエキサイティングです。

以前、マスク氏の決算会見での暴露によれば、テスラの人型ロボット「オプティマス」は今年末までに「有用な工場」を完成させる可能性があるという。 「Task」の機能を開発し、今年末までに自社工場で先行して導入する予定だ。同時に、テスラは2025年末までにオプティマスを販売する可能性が高い。

テスラ ヒューマノイド ロボットの「進化の歴史」

テスラ ヒューマノイド ロボットは、2021 年 8 月の「テスラ」に遡ります。 「AIの日」イベントで、マスク氏は人型ロボット（テスラボット）を構築するという自身のアイデアを初めて明らかにした。

この人型ロボットは身長約 1.72 メートル、体重約 112 ポンドで、バランスのとれた体型と顔面スクリーンを備えており、時速約 8 キロメートルで移動できます。 。

#2022 年 10 月、今年の「Tesla AI Day」で、人型ロボット Optimus がデビューしました。当時はダンスなどの芸を披露することはできなかった。このロボットは作業時に 500W の電力を消費し、重量は 73 kg、手の動きの自由度は 27 です。

しかし、オプティマスはデモのデモンストレーションで、箱を動かしたり、花に水をあげたり、テスラ ギガファクトリーで働いたりする写真を見せました。

# 半年以上の休眠期間を経た 2023 年 5 月、テスラ オプティマスはついにスムーズに歩行し、物体をつかむ能力を獲得しました。

# 2023 年 9 月、Tesla Optimus が再び進化し、自律的にオブジェクトを分類できるようになりました。ハイライトは、ニューラルの完全なエンドツーエンド トレーニングです。ネットワーク : 入力ビデオ、出力制御。余暇には、趣味でヨガをすることもできます。

#2023 年 12 月に、第 2 世代のオプティマスが登場し、人々は映画「パブリック エネミー」を本格的に観るようになりました。 「中はこんな感じ。

# 新しいビデオのリリースにより、テスラの人型ロボットの進歩のスピードは再び驚くべきものになっています。