フェイストラッキング

フェイストラッキングでは、顔上の複数の基準点（ランドマーク）を検出・追跡することで、口や眉、目の動きといった微細な表情変化を捉える。一般的には数十から数百に及ぶ参照点が用いられ、表情、感情の変化、発音時の口形などが解析対象となる。

近年では、さまざまな顔画像データセットを用いて学習された機械学習アルゴリズムが導入されており、年齢や人種の違い、照明条件の変化などに対応した高精度な認識が可能となっている。また、処理遅延を抑えたリアルタイム動作も実現されつつある。

映像制作やゲーム開発の分野では、演者の表情をそのままデジタルアバターに反映させるキャラクターアニメーション技術として活用されている。これにより、従来の手作業によるアニメーション工程を省力化しつつ、自然な感情表現を生成することが可能となった。

娯楽用途以外にも、身体的制約のある利用者が顔の動きで操作できる支援技術、表情を音声出力へ変換するコミュニケーション支援システム、顔の動作パターンを用いた本人認証技術など、多様な応用が進められている。

計算機性能の向上やアルゴリズムの発展により、かつては専用機器を必要としていたフェイストラッキングは、一般的なカメラを備えた端末上で動作するソフトウェア型の実装へと移行しつつある。これにより、幅広いプラットフォームで表情表現を伴うデジタルインタラクションへの利用が広がっている。