書き起こしへの付与を目指した音声とテキストを対象とした発話印象の分析

IPSJ

Bibliographic Information

Other Title
  • Analysis of Utterance Impressions in Speech and Text for Indexing to Transcriptions
  • コーパス分析

Search this article

Abstract

近年，音声から書き起こしを自動的に作成するシステムに関する研究がさかんに行われている．これまでは，音声を正確に書き起こすことに重点をおいて研究されてきているが，見た者にとって議論の内容をより理解しやすい書き起こしの作成が重要であると考えられる．議論の内容を正確に伝えるには言語情報だけでは不十分であり，議論の場面や発話意図，感情といった情報も必要であると考えられる．そこで，本研究では会議や討論などの書き起こしに発話意図を付与することを目指し，テキストと音声の両方から発話印象について分析することを目的とした．まず，文字の太さや大きさの変化といった文字の装飾や，「！」，「？」などの記号に着目し，そのようなテキストの変化を書き起こしに付与する形で主観評価実験を行うことにより「疑問」，「驚き」などの発話印象がどの程度感じられるのかを調べた．また，音声についても同様に主観評価実験を行い，その結果と「F0」や「パワー」などの韻律パラメータを使って重回帰分析を行い，韻律パラメータと発話印象の関係を分析した．その結果，各テキスト変化，韻律パラメータとそれぞれの発話印象との関係が明らかになった．さらにそれらを総合的に分析することで，テキストと音声では発話印象の受け方が異なるものと，同じ傾向のものがあることが明らかになった．

In recent years, a great amount of research has been done on systems that transcribe utterances through automatic speech recognition. This research has generally been focused on transcribing utterances correctly. What is presently required, however, is a transcription method that enables the overall content of a given discourse to be more easily understood by readers. It is generally considered that linguistic information by itself is insufficient for this purpose, and that a way of showing speaker's intentions and emotions is also required. In this study, we analyzed user's impressions of utterances from both text and speech, with the aim of at indexing the impressions to the transcriptions of discourse forums such as meetings and discussions. We investigated how impressions such as “doubt” and “surprise” are felt by changing the size of written characters and indexing signs such as question marks and exclamation marks in the text. The relation between prosody parameters and utterance impressions was analyzed by using multiple linear regression. As a result, we were able to clarify the relationship between variations of text, prosody parameters, and utterance impressions.

Journal

Related Projects

See more

Keywords

Details 詳細情報について

Report a problem

Back to top