「Sensible Agent」は、積極的なARエージェントとの、邪魔にならないインタラクションを実現するために設計されたフレームワークです。マルチモーダルセンシングを用いてユーザーのニーズを予測し、状況に応じた適切な支援を提供することで、音声コマンドベースのシステムの限界に対応します。このシステムは2つのモジュールで構成されています。1つはどのような支援が必要かを判断し、もう1つは社会的状況を考慮してどのようにそれを届けるかを決定します。プロトタイプは、コンテキストパーサー、積極的なクエリジェネレーター、インタラクションモジュール、レスポンスジェネレーターを使用し、これらはすべてAndroid XRとWebXR上で動作します。ユーザー調査では、様々なシナリオにおいて、Sensible Agentと音声制御のベースラインを比較しました。その結果、Sensible Agentは認知負荷を大幅に軽減し、ユーザーの選好度を高めることが明らかになりました。インタラクション時間はわずかに長くなりましたが、Sensible Agentへの選好度が高いことから、このトレードオフは許容範囲内であると考えられます。積極的な行動は、ユーザーとエージェントの関係を再構築し、協調的な体験を育みます。今後の方向性としては、パーソナライゼーション、デバイス間のスケーリング、スマートホームやロボティクスへの応用などが挙げられます。研究チームは、人間とエージェントのインタラクションを改善するために、マルチモーダルセンシングとリアルタイム適応を統合しました。著者は、Googleの複数のチームからの協力、フィードバック、貢献に感謝の意を表しています。