歌詞情報に基づくWeb画像検索を利用した歌詞連動スライドショー生成システム

• 石先広海

• 舟澤慎太郎

• 帆足啓一郎

• 小野, 智弘

• 甲藤二郎

書誌事項

タイトル別名

• Music Slideshow Generation Based on Web Image Retrieval with Queries Constructed from Lyrics

抄録

本研究ではユーザが入力した楽曲に対して，楽曲の歌詞に基づいて検索したWeb画像と楽曲を同期させて再生するスライドショー生成システムについて提案する．楽曲歌詞の内容に適した画像を楽曲と同期させて再生することで，楽曲の情景表現を向上させ，より印象深い音楽体験の実現を目指す．具体的には，歌詞中の単語と，歌詞から推定した全体印象語から最適な画像検索クエリを抽出し，表示候補となる画像をWeb上から取得する．取得した画像に付与されているソーシャルタグと全体印象語の適合度を用いることで，歌詞の各行と連動して表示させる画像を選定する．さらに，歌詞の各行を表示する時間の最頻値を利用してスライドショー再生時の画像切替えを自動化する．最終的に，被験者評価実験により本システムの有効性を示す．

In this paper, we propose a system to generate slide shows for music which users selected, by utilizing Web images retrieved by queries constructed from song lyrics. The proposed system aims to provide new and impressive user experiences by using synchronized Web images with lyrics line. First, we propose a method to select images to compose the slideshow from the result of Web image retrieval based on queries extracted from lyrics. The system selects matched images with the whole impression of lyrics and removes images which have many social tags not related to the image content. Furthermore, we propose a method to adjust presentation periods of the images in the slides. Finally, subjective experiments are conducted to evaluate effectiveness of our system.

収録刊行物

• 情報処理学会論文誌

  情報処理学会論文誌 54 (4), 1263-1274, 2013-04-15

キーワード

• [特集：音楽情報処理の新展開（音楽情報科学研究会20周年記念特集）] マルチメディアアプリケーション，楽曲スライドショー，歌詞，Web画像

詳細情報

• CRID: 1050001337903166592
• NII論文ID: 110009579534
• NII書誌ID: AN00116647
• ISSN: 18827764
• Web Site: http://id.nii.ac.jp/1001/00091553/
• 本文言語コード: ja
• 資料種別: journal article
• データソース種別:
  • IRDB
  • CiNii Articles