音楽に連動した個性的な手書きアニメーション生成による創作支援
佐藤 剣太, 新納 真次郎, 久保田 夏美, 斉藤 絢基, 中村 聡史, 鈴木 正明,
小松 孝徳
明治大学
本研究の目的： 手書きの創作を数式化により手軽に！
創作の参入障壁をさげることによって、創作を行える人を増やしていく
- 自身の手書き文字を音楽動画に歌詞などの形で埋め込む
- 自身の手描きイラストを音楽動画に埋め込む
- 自身の手書き文字・イラストのアニメーションを生成する
何が問題か？
- 思い通りに手書き文字・イラストを描くことができない
- 手書き文字・イラストのアニメーション生成は難しい
アプローチ
- 手書き文字・イラストを数式として表現し、手書きの特性を明らかにする
- 数式化された手書きを平均化することによる平均手書き手法を実現する
- 数式化された手書きに数式を付与することでアニメーションを生成する
手書きを数式として表現
- 手書きを点列データとして取得し、スプライン補間により点を増やす
- スプライン補間の点列をフーリエ変換することにより数式を生成
- 複数の手書きを数式化し、数式の平均をとると、平均手書き文字が生成される
平均手書き文字・図形はきれい
- 自身の実際の手書き文字・図形より、自身の平均手書きがきれいだと感じる
- 自身の平均手書き文字・図形より、全体の平均手書きがきれいだと感じる
- 字のうまい下手にかかわらず、ひとは自身の手書きがきれいだと感じる
- 利き手の平均手書きと、非利き手の平均手書きは似通う
繰り返しの修正を自動平均化
- 実際の文字・イラストより平均がきれいになることを利用
- 複数回の手描き試行（描きなおし）を自動平均化
手書き文字アニメーション
- 手書き文字が数式で表現されているため、その数式にアニメーション用の数式やデータを反映することで手書き文字のアニメーションを生成！
- 音楽を入力とすることにより、音楽に連動した手書き文字・イラスト表現が可能になる！