今年の初め、2024年3月、AI 開発者に特化したスタートアップ Hugging Face は、Tesla の元スタッフサイエンティスト Remi Cadene（レミ・カデン）氏を新しいオープンソース・ロボティクス・プロジェクトのリーダーとして引き抜き、波紋を呼んだ。Hugging Face は、オープンソース AI モデルとコードの最大のオンラインリポジトリ管理で知られる。

このニュースが注目されたのは、Tesla がテックとロボティクスの分野で確固たる地位を築いているからだけではなく（Tesla は最近、ヒト型ロボットモデル「Optimus」の開発を進めている）、一般的に、ロボティクスの分野全体が、ここ数ヶ月の間に、Transformer ベースの大規模言語モデル（LLM）と、より広い意味での生成 AI の追加によって超強化され、根本的に進歩したからでもある。

そして今日、Hugging Face のオープンソース・ロボット・ビジョンがどのようなものなのか、私たちは初めて知ることになる。Hugging Face は、AI ロボティクスを民主化し、新世代のロボティクス開発者を鼓舞するために設計されたオープンソースのツールキット「LeRobot」を発表した。現在 Github で入手可能だ。

Cadene 氏は X（旧Twitter）の個人アカウントからのメッセージの長いスレッドに次のように投稿した。

AI 開発の次のステップは、私たちの物理的世界への応用だ。このように、我々はロボティクスのための AI を中心としたコミュニティドリブンな取り組みを構築しており、それは誰にでも開かれている！

Meet LeRobot, my first library at @huggingface robotics 🤗
The next step of AI development is its application to our physical world. Thus, we are building a community-driven effort around AI for robotics, and it's open to everyone!
Take a look at the code: https://t.co/besHWCIbFH pic.twitter.com/AVdBUvgHXO

— Remi Cadene (@RemiCadene) May 6, 2024

Cadene 氏はまた、オープンソースコードの参加や活用、LeRobot イニシアチブについての議論に興味がある人のために、無料の Discord チャットサーバへのリンクを掲載した。

LeRobotとは？

LeRobotは、ロボティクスの Transformer のような堅牢なフレームワークとして機能する。

このツールキットは、単なるソフトウェアパッケージではなく、データの共有、視覚化、最先端のモデルのトレーニングのための多用途ライブラリを含む包括的なプラットフォームである。

また、ユーザは事前に学習された多数のモデルにアクセスし、プロジェクトをスタートさせることができる。

さらに、LeRobot は物理シミュレータとシームレスに連携されているため、物理的なロボティクスハードウェアを持たない愛好家や開発者でも、仮想環境で AI モデルのシミュレーションやテストを行うことができる。

機能と特徴

ツールキットの機能はソフトウェアだけにとどまらない。

教育や研究で利用されるシンプルなロボットアームから、高度な AI 研究施設で見られるより洗練されたヒューマノイドまで、さまざまなロボットハードウェアを扱えるように設計されている。

目標は、あらゆる形態のロボットに適応し制御できる AI システムを提供することで、ロボティクスアプリケーションの汎用性と拡張性の両方を可能にすることだ。

Cadene 氏は、現在 LeRobot ライブラリで利用可能なコードによって提供されるロボットの機能のいくつかの例を Github に投稿した。

Additionally, the same models can be trained on real-world datasets. Here is a cool data visualization with @rerundotio which is fully integrated with our video format optimized for training. The data originally comes from the Aloha project: https://t.co/x6EguPbhxJ pic.twitter.com/cLsN2L4C9v

— Remi Cadene (@RemiCadene) May 6, 2024

そして、2つのロボットグリッパーハンド／アーム間で物体を受け渡す方法についても。

LeRobot codebase has been validated by replicating state-of-the-art results in simulations. For example, here is the famous ACT policy which has been retrained and made available as a pretrained checkpoint:https://t.co/gkvqa4j0pT pic.twitter.com/5SvmkKvDea

— Remi Cadene (@RemiCadene) May 6, 2024

オープンソースの哲学

LeRobot をオープンソースにするという決定は、一握りの企業への権力と革新の集中を避けることを目的とした戦略的なものである。

自由に提供することで、 Hugging Face は、開発者、研究者、ホビイストのグローバル・コミュニティに、 AI ロボティクスの集団的進歩に貢献し、その恩恵を受けるよう呼びかける。

コミュニティとデータリポジトリの構築

LeRobot の開発を支えているのは、これまでに試みられた中で最大のクラウドソーシングによるロボティクスデータセットの作成である。

大学、スタートアップ、テクノロジー大手、そして個人の趣味家と協力し、 Hugging Face は膨大なデータリポジトリの組み立てを促進している。

これには何テラバイトものオンボード・ビデオ録画が含まれ、軽量な LeRobot データセットを使ってフォーマットされ、 Hugging Face のハブを通じて素早くアップロード、ダウンロードできるようになっている。

Cadene 氏は X で次のように述べ、これはこのプロジェクトの包括的なビジョンを反映している。

私たちは、実世界で次世代のスマートロボットを開発するために、ソフトウェアとハードウェアのさまざまなバックグラウンドを持つ多様なコミュニティを構築している。

Hugging Face は参入障壁を下げ、知識とリソースを共有する環境を育成することで、AI ロボティクスの展望を再定義しうるコミュニティを育成することを目指している。

【via VentureBeat】 @VentureBeat

【原文】