HMMを用いた唇動画像の生成

• 益子 貴史

  東京工業大学 精密工学研究所

• 小林 隆夫

  東京工業大学 精密工学研究所

• 徳田 恵一

  名古屋工業大学 知能情報システム学科

書誌事項

タイトル別名

• LIP MOVEMENT SYNTHESIS USING HMMS

抄録

隠れマルコフモデル(HMM)に基づいて,任意のテキストからそれに対応する滑らかな唇形状の動きを生成する新たな手法を提案している. 提案手法では,音素や音節等,各音声単位に対応する唇形状の動きをHMMによりモデル化している. 画像生成時には,与えられたテキストに対応する文HMMを音声単位HMMを接続することにより構成し,得られた文HMMから尤度最大化基準により,唇形状の動き表す最適なパラメータ系列を求めている. 本手法の特徴は,既に提案したHMMに基づく音声合成法と同一の枠組で画像の生成が可能な点にあり,音声と画像で同一の音声単位を用いて統一的にモデル化を行なえば,音声・画像の同時生成が容易に実現できる. 本論文では,唇動画像生成システムの構成を示すとともに,実際に小規模な実験的システムを構築し,得られた画像が自然発声に近い滑らかな唇の動きを表現可能なことを示す.

収録刊行物

• 電子情報通信学会技術研究報告. SP, 音声

  電子情報通信学会技術研究報告. SP, 音声 97 (64), 33-38, 1997-05-22

  一般社団法人電子情報通信学会

キーワード

• 唇動画生成
• 隠れマルコフモデル
• 唇画像・音声同期
• マルチモーダルインターフェース

詳細情報

• CRID: 1573668927130430592
• NII論文ID: 110003295907
• NII書誌ID: AN10013221
• 本文言語コード: ja
• データソース種別:
  • CiNii Articles