学位論文

顔の動きを利用したユーザインタフェース

jpn

2012-03-24

Not Applicable (or Unknown)

2012-03-24

修士(工学)

工学研究科システム工学専攻; 指導教授: 平原誠

近年、デジタル化に伴い、様々なユーザインタフェースが登場するようになった。３次元コンピュータビジョン技術の発展に伴い、画像解析による非接触型のユーザインタフェースを導入した製品が多く存在する。例えば、Kinect、Air Swing などが挙げられる。本研究では、動画像から顔の平行移動・回転情報を取得し、それをユーザインタフェースに用いる。まず、Haar-like 特徴を用いて作成した弱識別器から AdaBoost に基づいて強識別器を構成し、それを利用して、顔および目、鼻領域の検出を行う。次に、目、鼻の各領域に対し、Harris コーナー検出を行い、特徴点を算出する。最後に、特徴点の追跡情報を用いて顔の平行移動・回転情報を取得する。手を使わずに顔の動きを利用してコンピュータを制御することができ、３D アプリケーション、あるいはドライブシミュレータの視点操作などに応用できる。 In recent years, various user interfaces came to appear with digitization. With development of three-dimensional computer vision technology, many products which introduced the noncontact user interface by image analysis exist. For example, Kinect, Air Swing, etc. are mentioned. In this research, the parallel translation and the rotation information on a face are acquired from video, and it is used for a user interface. First, based on AdaBoost, a strong classifier is constituted from a weak classifier created using the Haar-like feature, and detection of a face, eyes, and a nose region is performed using it. Next, to each region of eyes and a nose, Harris corner detection is performed and features are computed. Finally, the tracking information on features is used and the parallel translation and the rotation information on a face are acquired. This system can control a computer using motion of a face, without using hands, and can apply it to viewpoint operation of 3D application or a drive simulator etc.

Thesis