ハードウェア重要度 ★9
VLK：再構築されたシーンでの合成相互作用からヒューマノイドの運動操作を学習
VLK: Learning Humanoid Loco-Manipulation from Synthetic Interactions in Reconstructed Scenes
https://export.arxiv.org/api/query·2026/6/29
AI要約
人間型ロボットの視覚、言語、運動学の学習を可能にする、合成データ生成パイプライン「VLK」を提案。3Dガウシアン スプラッティングを利用し、大規模なデータセットを生成する。
AI要点
- 人間型ロボットの視覚・言語・運動操作を学習するため、現実世界のシーンを3D Gaussian Splattingで再構築した。
- 再構築されたシーン内で、特権情報を用いてナビゲーションと物体操作の合成軌道を生成し、視覚と言語と運動の教師データを作成した。
- 合成データを用いて学習したVLKポリシーは、物理的な人間型ロボットでのナビゲーションと単一物体輸送タスクを実証した。
- 再構築されたシーンでの合成相互作用が、シムツーリアルでの人間型ロボットの知覚ベース loco-manipulation の学習に有効であることが示された。
なぜ重要か
現実世界でのデータ収集が困難な人間型ロボットの loco-manipulation 学習において、合成データ生成パイプラインを構築し、実世界でのロボット制御への応用可能性を示したため。