http://o.aolcdn.com/hss/storage/midas/552ae8605582a7805290d974a9dc185f/205754013/dims.jpg
テルアビブ大学とフェイスブックは、動画に映った人の表情を写真の人物にアニメーションとして適用する技術を開発しました。
動画側（driving video）から表情に関する特徴を選択的に抽出し、写真側(target face)に統合して表情を模倣させる技術。具体的には、写真で閉じた口に隠れた歯の部分や、表情を変えたことで生じる顔の皺などを動的に写真側の表情へ適用させます。
本技術の特徴は、対象となる人物の写真1枚だけで、様々な表情をとらせることが可能な点。特定人物の表情を操作する技術は以前から存在していましたが、従来の技術では対象となる人物の顔がはっきりと映った動画が必要でした。
写真側の表情変化を動画側で制御するにあたっては、顔の変形を模倣する二次元ワープ法を使用していますが、表情の形成に深く関連し、かつワープだけでは不可能な顔の皺などの動的なディテール再現には、動画側の表情から対応するディテールを持ち出して使用します。この際、サンプルとなった動画側のディテールをそのまま使うわけではなく、不自然な影の除去などの処理が施されます。
開発に携わったのは、テルアビブ大学のHadar Averbuch-Elor氏、Daniel Cohen-Or氏、フェイスブックのJohannes Kopf氏、Michael F. Cohen氏の研究チーム。
研究概要によれば、本技術はインターネット上のポートレイト画像を使って動作の実証試験を進めている段階とのこと。また開発にはフェイスブックが関わっていることから、近い未来にはSNSなどのアプリケーション上において、プロフィール写真やアイコンをアニメーション化し、コミュニケーションの一手段として利用できるようになるかもしれません。
続きと動画はソースで
人物写真が「ニコリ」と笑いだす技術、Facebookが開発。顔面に動的な表情を付与 - Engadget 日本版
http://japanese.engadget.com/2017/10/11/facebook/