Dancing Snap Shot System: 個性あるキャラクタ自動生成とダンス音楽動画創作支援システム

岩本 尚也, 谷田川 達也, 加藤 卓哉, Savkin Pavel, 福原 吉博,
中塚 貴之, 野沢 綸佐, 柿塚 亮, 山口 周吾, 朝比奈 わかな, 森島 繁生

早稲田大学

概要

顔写真1枚の入力から本人そっくりの”踊るアバター”を作成・編集できるプラットフォーム

p19_outline

1. 顔の3D復元

データベースから似た陰影を持つ箇所の法線を参照することで、3Dスキャナと同等精度で顔形状を復元


事前準備

p19_fukugen1
p19_fukugen3


オンライン処理

p19_fukugen2
p19_fukugen4

2. 全身モデルへの転写

復元結果を再現するため、全身モデルの顔領域を変形、境界を滑らかに変形

p19_zenshinmodel

3.アバターの編集

衣装や、体形、髪型などを選ぶと、生成したアバターにマッチした動きを自動生成

p19_avatar

今後の展望

より高精度かつ手軽な撮影とモデリングの実現、インタラクションなどを加えたシステムの汎用化