聴覚障害者向け情報保障のための講師発話内指示語および指示動作抽出手法の検討

• 伊藤 綾鹿

  名古屋大学大学院 情報科学研究科 メディア科学専攻

• 竹内 義則

  名古屋大学大学院 情報科学研究科 メディア科学専攻

• 大西 昇

  名古屋大学大学院 情報科学研究科 メディア科学専攻

• 飯塚 重善

  NTTネットワークサービスシステム研究所

• 中嶌 信弥

  国士舘大学 理工学部理工学科

書誌事項

タイトル別名

• A Study on Demonstrative Words Extraction in Instructor Utterance and Gestures Extraction on Communication Support for Hearing Impaired Persons

抄録

Remote transcription system is one of the communication support methods for hearing impaired students in a lecture. A transcriber watches the lecture as captured by camera and microphone and transcribes what an instructor says using a PC. The transcription is then showed on a display screen in the classroom. A transcriber sometimes misses a pointing object when the instructor utters a demonstrative word. Therefore, he/she is not able to assign the demonstrative word with the pointing object. In order to solve this problem, we are developing a system to assign the demonstrative word with the pointing object using demonstrative words and pointing gestures, which are automatically extracted from the behavior of the instructor. In this paper, we propose a method to extract demonstrative words with gestures. Performance evaluation results show that the recall ratio is about 90% and the relevance ratio is about 83%.

収録刊行物

• 電子情報通信学会技術研究報告. WIT, 福祉情報工学

  電子情報通信学会技術研究報告. WIT, 福祉情報工学 108 (332), 9-10, 2008-11-26

  一般社団法人電子情報通信学会

キーワード

• remote transcription system
• demonstrative words extraction with gestures
• speech recognition

詳細情報

• CRID: 1570572702585055488
• NII論文ID: 110007123167
• NII書誌ID: AA1155230X
• 本文言語コード: ja
• データソース種別:
  • CiNii Articles