An application of morphable face image model to impression transformation : Japanese looking face v.s. Westerner looking face

本論文では, 日本人/西洋人という異なる属性を持つ顔画像を用いて, 顔を和風化/洋風化する印象変換を行った. 顔画像を形状, テクスチャ情報に分けることで多次元ベクトルとして表し, それぞれに主成分分析を行い, 顔の多様性を少数のパラメータを記述した. 2つの相反する印象を与えるクラスに分類した学習サンプルに対し, パラメータ空間上でこれらを最適に分離する射影軸をFisherの線形判別法によって求め, この軸が与える方向を「印象変換ベクトル」として定義した. 入力画像に対して, 求めた印象変換ベクトルの方向に任意の重みを付加し, 変位させ, 次元数を復元することによって, 印象を変化させたイメージを可視化した. 主観評定実験から, 和風化/洋風化の印象変換の有効性を確認した. また, 学習サンプルの選び方による印象変換の効果への影響も検討した.This paper describes experimental results of transforming racial impression of the face by using a pair-wise training sets of face images with a different attribute of Japanese/Westerner. Face images are represented as high-dimensional vectors by separating the shape and texture information, and variations in the appearance of face images are coded by applying principal component analysis to a set of various face images. An impression transfer vector is defined by the Fisher\u27s linear discriminant obtained from a number of training images previously categorized into two opposing classes. The projection of the input image on the transfer vector is shifted by an arbitrary magnitude along the transfer vector. And the transformed impression is made to visible. By subjective evaluation, effectiveness of the image manipulation method for impression transformation was evaluated. In addition, we examined the influence of the difference of training images on the performance of impression transformation