ドワンゴがディープラーニングを用いたアニメ中割り実験の論文を公開 スローモーション演出などへの活用に期待

ドワンゴがディープラーニングを用いたアニメの中割り実験の結果を公開しました。原画を直接中割りするまでには至らなかったものの、動画の枚数を増やすことには部分的に成功。スローモーション演出などへの利用に可能性があるとしています。 YouTubeで公開された動画 同手法は、早稲田大学の研究チームが2016年に提案したラフスケッチの自動線画化手法（関連記事）を出発点とし、中割りができるよう変更を加えたもの。アニメ「アイドル事変」の製作委員会やMAGES.協力の下、実際の動画とセルのデータを使用し、実験により自動生成された映像はYouTubeに投稿、実験結果をまとめた論文はコーネル大学図書館が運営する「arXiv（アーカイヴ）」上で公開されています。 実験に用いられたカット（画像はarXivより） 「中割り」とは原画と原画の間を補完する動きを描いた絵のこと。「動画」は「中割り＋原画をトレースした絵」

[esper]

中割りより中抜きをどうにかしたい

[tori_toi]

日本のアニメは2・3コマ打ちがケレンみある動きを出してるから、フルフレームにする利点ってやっぱりタイトル通りスローモーションな演出やダンスシーンぐらいしか使い道が思い浮かばないな…

[sucelie]

むしろ単価が1/4になるのでは・・・

[goldhead]

宮崎駿に見せたらなんて言うかな。

[tuki0918]

ギルティギアとかケモフレ、プリキアEDみたいな3Dモデルから2Dへ落とし込むみたいな技術も発展してほしいと思う

[ultimate-ez]

昔の紙芝居アニメがディズニーアニメばりにヌメヌメ動くようになったら面白そう！！

[sgtnk]

このまま役に立つものではないが研究を進める価値はありそう

[timetrain]

これは多分学習で伸びるはず

[TakamoriTarou]

実際は原画を与えて、ある程度書かれた動画が出てきて、それを人間がきちんとエラー補正しアニメに、と言うワークフローになったり？　ただ絵柄に差が大きいのでかなりカスタマイズがいるんじゃまいかと言う希ガス

[yamadadadada2]

特徴点を与えるだけでかなり結果変わりそうだけど、そういう実験も既にやってるんだろうな。面白い。

[silverscythe]

「単なるモーフィング以上のことはできません」と言ってるように聞こえる

[ono_matope]

なかなか難しそう

[oukayuka]

最近のテレビにはフレーム補間機能がついてて、有効にするとアニメがヌルヌル動いて気持ち悪いので常に切ってる。

[adsty]

ぬるぬる動くが精度にムラがあり改善の余地がある。

[kazutomo]

現場が求めてるのは原画から動画を作ることなんだろうけど、それはさすがに無理があるよなあ。

[napsucks]

トゥーンシェーダの3DCGみたいに見えてなんだかあまり魅力を感じないんだが・・・

[shoot_c_na]

とりあえず、見せられるレベルになりました・・・だなあ

[KZE]

結論では中割りは無理、というものになったらしいけど、がっつり学習させたら行けるように素人目に見える。動画さんの賃金問題が構造的にどうにもできないんだったら、こういう技術でぶち壊すしかないじゃないか。

[youichirou]

なんかもう、目が8コマ作画に慣れきってしまっていて、補完後は違和感のほうがすごい。スローとかそういう特殊なカットならいいのかな。

[kei_1010]

まだまだ微妙だなぁ

[otihateten3510]

一方たつきは手作業でやった

[shinp]

湯浅政明「そんな事しないでもFLASH使えば一発だぞ」

[blueboy]

現段階で使い物にならないのは、単に技術が未熟だから。原理的には、この技術を進めれば、中割りは可能になるはず。／　だけど、原画をなめらかにする（アンチエイリアスする）技術の方が、省力化には役立つはず。

[gabill]

AIが学習するよりも先に人間が学習して、AI中割りしやすい画風が流行ったりして。

[tzk2106]

これ、正解パターンを10,000パターン食べさせたら、ぐっと実用的なものに近づいてこないのかな？

[sea_side]

fluid motionなんかとくらべてどうなんよ(´・ω・`)

[houyhnhm]

学習に一ヶ月かかります、とかだと使えないのでなあ。

[sds-page]

あえて物理法則を無視した演出が手書きの持ち味だったりするから単純な機械学習じゃ難しいのかな

[hoshitamotsu]

日本人は2・3コマ打ちに慣れすぎているので、セルルックのCGアニメを作る時はあえてフレームを抜いているぐらいだから、あまりヌルヌルさせるメリットがないんだよね。中割りできるようになってから呼んでください

[rti7743]

なんで失敗した時は手とかが消えるとかになるんだろう？　単純なモーフィングなら消えないのにな。DLはモーフィングで出来ない影とか専用でやればいいんでねとも思う。

[hush_puppy]

ピクサーの創業者も1977年に自動中割りプログラムを作ってたみたいだし、40年後にはドワンゴがアニメーションのトップになってる可能性もあるな。

[solidstatesociety]

首が座ってないのでまだ研究分野だね

[satohu20xx]

さらにこれをすすめると間を抜いてもアニメーションができるようになりそう

[yetch]

これはキタ。フロッグマン系の個人アニメ達の動きが劇的に変わる。アニメコンテンツに革命くるぞ

[fashi]

枚数が増えてるのにゴミが混ざることで元より荒く見えるのが難だな

[a_matsumoto]

あとで精読

[fortake]

ぬるぬる過ぎてもたまに違和感覚えるのはなんでだろう。

[arisane]

あとで読む。未読で書くけどヌルヌルになっただけなら今のフレーム補間とそう違わないのではないか。