抄録
本論文ではwebベースのマルチモーダル対話(Multi-Modal Interacton:MMI)システムにおいてユーザの視線や表情,嗜好やプロファイル,端末周辺の雑音状況といった静的・動的情報を取り扱うフレームワークを提案する.これらの情報を対話で利用することにより,ユーザに適用した対話や状況に応じたモダリティ変更が可能になるため,より自然な対話を実現できる.本研究ではこれらの情報を管理するために,MMIシステム内に静的・動的情報管理部を実装した.静的・動的情報管理部は静的・動的情報を一元管理するモジュールで,情報の収集と管理,および外部モジュールへの情報提供を行う.情報提供の方法としてPull型(情報参照型)とPush型(情報変化のイベント通知)の二種類を用意し,各モジュールにおける情報の利用方法に応じて選択できるようにした.本論文では静的・動的情報管理部の構成について述べ,アプリケーションの実装例を示すとともに,実験による評価と関連技術・研究との比較を行った.
This paper provides a mechanism to deal with static/dynamic information in a web-based Multi-Modal Interaction (MMI) system. The static/dynamic information in this paper includes user preference, user's facial expression, environmental information, and so on. By employing these properties, the MMI system can make interaction natural based on context or situation. To consolidate these properties we have designed and developed a static/dynamic information manager on our MMI system. The manager provides two types of interfaces to access the information: pull type interface and push type interface. Each module in the MMI system can receive the information through either of interfaces as the need arises. We prototyped a user navigation system that employs user's facial expression and GPS information as static/dynamic information. The evaluation test showed that the manager makes it easy to handle static/dynamic information when designing MMI systems. We clarified the characteristics of static/dynamic information manager by comparing with other researches and techniques.
