口語的表現を含む日本語文の形態素解析の実現と評価

被引用文献2件

書誌事項

タイトル別名
  • Implementation and evaluation of a morphological analysis method for colloquial Japanese text

この論文をさがす

抄録

日本語文章の口語的表現に対応した形態素解析手法を提案し,その評価結果を報告する.広い分野のテキスト処理を想定した場合に口語的表現の形態素解析は重要であるものの,その精度は十分とは言えなかった.本稿では,口語的表現を正しく形態素解析するために2つの手法を示す.1つは,口語特有の言い回しを辞書登録すること,もう1つは,通常は平仮名表記する語を意図的に片仮名表記するなど,表記を変えた強調表現を通常の表記に直して辞書検索することである(口語置換検索処理).これらの手法を実現した結果,口語的表現を多く含むテキストの文節区切り精度が1.8%向上し,テキストのタイプによらず安定した高い精度を得ることができた.辞書登録では,話し言葉特有の語の登録によって,文節区切りに失敗していた話し言葉の88%を正しく解析できた.口語置換検索処理では,形態素解析に失敗していた意図的な片仮名表記の75%,強調表現で特殊文字を含む単語の79%を救済できた.

収録刊行物

被引用文献 (2)*注記

もっと見る

詳細情報 詳細情報について

  • CRID
    1572824502060845312
  • NII論文ID
    110002934882
  • NII書誌ID
    AN10115061
  • 本文言語コード
    ja
  • データソース種別
    • CiNii Articles

問題の指摘

ページトップへ