Genie Envisioner - Jiyuanのオープンソース汎用ロボットプラットフォーム、Beihangなどと共同開発

Genie Envisionerとは？

Genie Envisioner（GE）は、Genie Roboticsチームがシンガポール国立大学および北京航空航天大学と共同で開発したロボット操作のための統合プラットフォームです。GEは、GE-Base、GE-Act、GE-Simの3つのコンポーネントから構成され、GE-Baseはコマンド駆動型の映像拡散モデルであり、実世界におけるロボットの相互作用のダイナミクスを捉える。-GE-ActはGE-Baseに基づき、ポテンシャル表現を実行可能な行動軌跡に変換し、様々な形態を持つロボットをサポートする。GE-Simは行動条件付きニューラルシミュレータであり、訓練や評価のための忠実度の高いシミュレーションビデオを生成する。

Genie Envisionerの特徴

ユニファイド・オペレーティング・プラットフォームGenie Envisionerは、幅広いロボットの形態に適応し、センシングから実行までのエンドツーエンド処理を可能にする汎用的なロボット指向のオペレーティングプラットフォームです。
メンタル・リハーサルと行動計画ロボットがメンタル・リハーサルを通じて最適な行動コースを生成し、それを現実世界で実行する「最初に想像し、後で行動する」モデルは、タスク実行の精度と効率を向上させる。
マルチモーダルフュージョンGE-Baseモデルは、コマンド駆動型の映像拡散技術に基づいており、ロボットとのインタラクションの時空間的・意味的ダイナミクスを捉え、視覚、発話、行動のマルチモーダルな融合を可能にします。
忠実度の高いシミュレーションとトレーニングGE-Simは、行動状態のニューラル・シミュレータとして、忠実度の高いシミュレーション映像を生成し、大規模な訓練や評価をサポートし、ロボットが複雑な環境に適応できるよう支援します。
標準評価ベンチマークロボット性能の標準化された評価を容易にするために、視覚的忠実度、物理的一貫性、コマンドとモーションのアライメントを測定するためのEWMBenchベンチマーク・スイートを提供します。
オープンソースとスケーラビリティすべてのコード、モデル、ベンチマークは、研究者や開発者がロボット工学を発展させるためにさらに探求し、応用することを容易にするために、一般に公開されます。

Genie Envisionerの主な利点

高い汎用性幅広いロボットの形態に対応し、さまざまなタイプのロボット作業をサポートすることができます。
エンド・ツー・エンド機能環境センシングから指示理解、行動実行までを統合的に処理し、ロボットの自律性と知能を高める。
メンタル・リハーサル・メカニズムシミュレートされた環境でのプレビューを通じて、実際のオペレーションにおける行動方針の最適化、エラーやリスクの低減を図る。
高忠実度シミュレーションGE-Simは非常にリアルなシミュレーション映像を生成し、ロボットのトレーニングや戦略の最適化を効果的にサポートします。
標準化された評価ロボット性能の標準化評価を容易にし、技術の標準化を促進するEWMBenchベンチマーク・スイートを提供。

Genie Envisionerの公式ウェブサイトは？

プロジェクトのウェブサイト:: https://genie-envisioner.github.io/
GitHubリポジトリ:: https://github.com/AgibotTech/Genie-Envisioner
arXivテクニカルペーパー:: https://arxiv.org/pdf/2508.05635

Genie Envisionerの対象者

ロボット工学研究者Genie Envisionerは強力な研究ツールとオープンソースプラットフォームを提供し、研究者がロボット操作のフロンティアを探求し、ロボット知能のさらなる開発を推進するのに役立ちます。
ロボット開発エンジニア汎用性とエンド・ツー・エンドのソリューションにより、エンジニアは幅広いロボット・ハードウェアとタスク・シナリオに対応するロボット・アプリケーションをより効率的に開発し、最適化することができます。
大学・研究機関標準化された評価ベンチマークと教育・研究のための豊富なリソースを提供し、ロボット関連の教育・研究プロジェクトを促進し、専門家を育成する。
産業オートメーション企業ロボットの動作プロセスを最適化し、生産性と品質を向上させ、人間の介入を減らすために、産業用生産ラインで使用される能力。
サービスロボット開発者複雑な環境下でのロボットの適応性とタスク実行能力を高め、サービスロボットの応用シーンを拡大するために、サービスロボットの分野に適用できる。