手描きキャラクターに深層学習で影 カラーでも

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米メリーランド大学ボルチモアカウンティ校とProject HATによる研究チームが開発した「Learning to Shadow Hand-drawn Sketches」は、キャラクターに影を自動的に追加できる、深層学習を用いた手法だ。 影付きスケッチを直接生成するのではなく、スケッチとは別に影画像だけを生成しているのが特徴。このため、スケッチと影を別々のレイヤーにし、それぞれを別個に編集できる。生成した影はそのまま使用でき、より高い品質を望む場合にはユーザーがさらに修正できる。 提案モデルは、 GAN（Generative Adversarial Network）をベースに、2次元スケッ

[caligo]

突然APH絵がでてきてびっくりした

[sevenspice]

デモ動画観たけどすごい。練習で習得していたものがこうも深層学習でできるようになるとうれしいやら複雑やらな気分になるね。

[nilab]

「影付きスケッチを直接生成するのではなく、スケッチとは別に影画像だけを生成しているのが特徴。このため、スケッチと影を別々のレイヤーにし、それぞれを別個に編集できる」

[rakugoman]

ドラゴンボールでやってくれないかな。

[shimaguniyamato]

３DCGから線画を起こして、これで影付けたら、手書き風の影になるぜ（本末転倒）

[misshiki]

事例：線画を立体的に見せる影を自動生成。“提案モデルは、 GANをベースに、2次元スケッチから3次元構造をエンコードするShapeNetと、エンコードされた構造に基づいて影をレンダリングするRenderNetの2部から構成される。”

[moto_motosaka]

人間さんより絵が上手になっちゃうじゃん:;(∩´﹏`∩);:

[sjn]

納得度が高い映像になるなぁ

[shiodoki-gg]

フォトショの人物切り抜きみたいに、いつの間にかソフトの機能になってそうだなそのうち

[kamanobe]

すご。

[soraboby]

面白い。これと自動彩色をうまく重ねるだけでそれなりに絵になりそう。/ 中国さんと日本の絵がある！

[sds-page]

こういう漫画絵に手を出すの中国や日本だけかと思ってた

[pendamadura]

これは便利だ…

[pikopikopan]

凄いなあ

[reachout]

これすごい、かなり自然

[Seamless]

寄稿：手描きの線画スケッチに3次元の影をGANで自動生成する技術。リムライティングやバックライティング含め任意の光源位置からの影も自由自在。背景を除き人だけに影を付与も可能。ライブデモあり。