モナリザが眉をひそめる、機械学習が昔の絵画や写真に命を吹き込む

機械学習の研究グループが、人間の顔写真1フレームだけから生きているような動きを再現するシステムを開発した。写真だけでなく絵画も動かすことができる。まだ完璧ではないが、（今日の多くのAIがそうであるように）うまくいったときは不気味かつ魅惑的だ。
モデルの詳細はSamsung AI Centerが発行した論文に書かれており、Arxivで読むことができる。元の顔（どんな顔でもいい）の特徴点をターゲットの顔データに対応させて元の顔の動きを再現する部分に新しい手法が使われている。
これ自体は新しくない。これはAI世界が現在直面している画像合成問題のひとつだ（最近TechCrunchが主催したロボティクス+AIイベントで興味深い議論がなされた）。ビデオの中である顔が話しているところ、見ているところを別のビデオの顔に当てはめることはすでに行われている。しかし、こうしたモデルの多くは1～2分のビデオを分析するためにも膨大なデータが必要になる。
しかし、サムスンのモスクワ拠点の研究者たちはこの論文で、わずか1枚の顔写真だけを使って顔の向きを変えたりしゃべったり普通の表情を見せるビデオを作ることができる。画質は完璧には程遠いが、説得力はある
このモデルは、膨大なデータを使って顔の特徴点を認識することで、ターゲットの顔と元の顔との対応部分を効率的に見つけることができる。データは多ければ多いほどよいが、

リンク元