動画撮影中の動く顔を「スマートフォンだけ」でアニメ似顔絵風にその場で変える技術【研究紹介】 | レバテックラボ（レバテックLAB）

山下 裕毅 先端テクノロジーの研究を論文ベースで記事にするWebメディア「Seamless/シームレス」を運営。最新の研究情報をX（@shiropen2）にて更新中。 米Northeastern University、米College of William & Mary、スイスのETH Zurichによる研究チームが開発した「Real-Time Portrait Stylization on the Edge」は、機械学習を用いて、スマートフォンのカメラで自撮り撮影中の動く顔を追跡し、その場で似顔絵のようなアニメ風にスタイルをリアルタイム変換できる技術だ。これまで困難であった、モバイル上での高品質なスタイル変換を実現する。 顔だけでなく、カメラ内に映る手やヘッドフォン、メガネなどもすべてリアルタイムにスタイル変換され表示される。 ▲スマートフォンのカメラで実在の人物（左）と画面上の顔写真（

[Seamless]

モバイル機器で自撮り中の顔を似顔絵風に変換,動く表情を追跡しリアルタイムに更新。カメラ内に映る手やヘッドフォン,眼鏡等も変換。従来より10倍の計算量削減を達成した。