SG-WAM、幾何を意識したロボット世界モデルを目指す
この論文は、ポリシー由来の表現空間内で自己誘導型のダイナミクス予測を行う手法を提案している。
なぜ重要か
この研究は、ロボット世界モデルの中核的な制約に取り組んでいる。すなわち、シーン変化に必要な幾何情報を保持しながら、将来状態の予測と行動生成をどう整合させるかという問題だ。検証が進めば、このアプローチは、重い観測空間のターゲットや別個の潜在空間に頼らずに、ロボットポリシーの行動条件付き予測を改善できる可能性がある。
要点
- 1.SG-WAMは、ポリシー由来の潜在空間で行動条件付きダイナミクスをモデル化する。
- 2.EMAポリシーバックボーンが、安定した自己誘導型の予測ターゲットを提供する。
- 3.幾何的な教師信号により、ポリシーの画像トークンに空間的な基盤が加わる。
研究者らは、World Action Models向けの自己誘導型フレームワーク「SG-WAM」を発表した。これは、行動条件付きのダイナミクスをポリシー由来の表現空間で直接学習する手法だ。学習可能なダイナミクストークンとSelf-Guided World Predictorを用い、ロボットの行動を条件として将来の潜在状態を予測する。予測ターゲットは、同じポリシーバックボーンの指数移動平均コピーによって生成される。さらに幾何的な教師信号を使い、ポリシーの画像トークン表現に、行動がシーンをどう変えるかを予測するための空間的文脈を持たせている。
⚡ 今日から使える
行動ポリシー表現と将来状態予測ターゲットを切り離すロボットWAMを設計する前に、この論文を読むべきだ。
出典・一次報道
本記事は以下の媒体の報道を要約し、リンクしています。
この記事が役に立ちましたか?次号をメールでお届けします。