解像度の違いにロバストなまばたき検出を利用したベストショット画像の自動生成(映像符号化,システム及び一般)  [in Japanese] Automatic Generation of Best-shot Image using Blink Detection Method Robust for Variations in Spatial Resolution  [in Japanese]

人物写真(特に集合写真)の撮影においては,何人かがまばたきをして撮られてしまうことを良く経験する.これに対し,全員がまばたきをしていない画像(ベストショット画像と呼ぶ)を自動的に出力することができれば,人物写真の撮影における失敗の可能性が低くなり,有用である.本論分では,ディジタルカメラによる写真撮影の際に連写機能を使用し,1枚ではなく,複数枚の写真を撮る.複数枚の画像の各々において,写っている人物のまばたきの開閉を検出し,全員が開眼している画像だけを出力する.まばたき検出については,画像中の人物の顔サイズに基づいて撮影画像を縮小し,30×6画素という小さいサイズの開眼画像との正規化相関を計算することにより,撮影画像の画素数の違いにロバストに検出できるようにした.次に,多人数になればなるほど,全員がまばたきをしていない画像がない可能性も考えられる.そこで,開眼している人物の数が最も多い画像を選択し,その画像中で閉眼状態の人物については,眼部分の画像を他フレームより取得した開眼状態の画像で置き換える.様々な条件で撮影した14種類の人物写真に本手法を適用し,ベストショット画像を自動生成できることを確認した.

We often exoerience that some persons have closed their eyes in the photograph. This paper proposes the method to automatically output the best shot image in which all members open their eyes. Firstly a series of photographs (here 6 frames) are taken by using the function of continuous release provided in a commercial digital camera. Blinking of each person is checked in each frame, and the frame in which all members open their eyes is selected. Blinking detection is carried out by calculating the normalized correlation between 30x6 pixels open eyes template and input frames of reduced size. Next, for the case that no frame exists in which all members open their eyes, closed eye image is replaced by open eye image obtained in the different frame. Experimental results using 14 kinds of photographs taken under various conditions show the usefulness of the proposed method to output the best shot image automatically.