XR空間におけるエージェント対話のためのインタラクティブなハンドジェスチャー生成：AgentHands

XR空間における対話型ハンドジェスチャー生成に関する研究です。スパイダーマンのようなキャラクターが、ユーザーの意図を汲み取り、空間的に配置されたハンドジェスチャーを生成します。これにより、XR環境でのエージェントとのインタラクションがより自然で没入感のあるものになることが期待されます。

• XR空間における対話型AIエージェントの能力を拡張するプロトタイプ「AgentHands」を紹介。
• AgentHandsは、LLMを活用し、空間的ガイダンスに同期した表現力豊かなハンドジェスチャーを生成する。
• これにより、XR環境でのユーザーエンゲージメントを高め、精神的なマッピングギャップを橋渡しする。
• 人間のコミュニケーションにおける手の役割をXR空間で再現し、抽象的な指示を直感的な物理的デモンストレーションに変換する。