ジョジョのキャラクター風に顔写真を変換する「JoJoGAN」 1枚の画像からAIが学習

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワークだ。「空条承太郎」など、作中のキャラクタースタイルに似せた顔に変換する。このフレームワークは、大量のペア画像データセットを使わず、1枚の顔画像から学習できる特性を持つ。 画像をスタイル変換するモデルは、大量のペア画像データセットを必要とするが、そのデータを準備するにはコストがかかる。数枚の画像からスタイル変換する研究も報告されているが、詳細なスタイルや多様性を

[kako-jun]

実写露伴を入力したら、漫画露伴が出力されるのかな。……何部の絵柄で……？

[dydr]

イーロンマスクのDIO風はジョジョというより楳図かずおの漫画にいっちゃってる先生役で出てきそう。「なんでこんな簡単な事ができないんですか！」とか白目で言い出しそうで、トラウマが発動しそう。

[yoiIT]

思った程の精度ではなかった

[Helfard]

スタンドも出力してくれないと片手落ちでは。

[tsukitaro]

Jojoを冠するにはほど遠い。ていうかジョジョ風の顔ってそこまでパターン化されてる？

[ohana3]

学習データがアニメ版ジョジョだからなのかあまりジョジョっぽくなってないような印象。。。

[cooking_kawasaki]

北村一輝さんで試してみたが、処理前の方がジョジョだった。

[geerpm]

この手のサンプルにイーロン・マスク使われがちだけど許可とってやってるんかな。またはフリー素材なのかな？

[henno]

ジョジョっていうか、楳図かずおの「14歳」にでてくる米国大統領みたいになってるがな。

[rohizuya]

自分の顔写真を出す時に丁度いいかも

[pascal256]

ワロタｗ　特徴的な絵はこういう事しやすいよね。北斗の拳も是非！

[voodoo5]

サムネがパッと見、荒木飛呂彦のあの写真のように並んでたからそっち風に顔写真を並べるのかと思ったら、違ってた。

[UDONCHAN]

良い

[subaccountx]

アニメ版かよカスが

[pribetch]

荒木絵の魅力を理解していないという印象

[itboy]

例が面白すぎる

[toaruR]

池上遼一風味(ノ∀`)

[jacoby]

長年使っていたjojo顔メーカーのアイコンをJoJoGanに変えてみた（多分後で戻す）

[blueboy]

　まだまだ駄目なので、 徐々 に改善されるでしょう。

[tuka8s]

イーロンマスクの写真ってもしかしてフリー素材なのかな。あるいは、ganで作られたよく似た別人なのか

[algot]

スタンドをAIで生成して欲しい。能力の解説付きで。

[kei_1010]

進撃っぽくも見える

[fashi]

ジョジョというかULTRAMANみたいだの

[anguilla]

うーん…？

[ardarim]

ジョジョ風がなんなのか、まったくわからなくなった

[lejay4405]

みんな凛々しくなってて草

[inatax]

要するにいい感じのone-shot GANで別にジョジョ風に限定されるものじゃないと思うんだけど、記事のタイトルや冒頭の説明はミスリーディングだな

[ipinkcat]

第４部〜6部頃の絵が一般的に知られたJOJOの絵柄なのかな。

[white_cake]

これジョジョ風かなあ？

[upran]

なんでアニメ版の絵を使うのか。そもそもが大してジョジョ絵じゃない。

[kitamati]

RedditやYT程度の狭い観測範囲ながら、ジョジョの浸透っぷりは目を見張るものがある。きっとこの開発をした二人もノリノリだったのだろう

[call_me_nots]

“イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワーク”

[neko2bo]

第何部かにもよると思うけど…

[ttrr]

カエルの画像を入力したらちゃんとメメタァなるんだろうか

[sawat]

ジョジョ風よりもディズニー風のほうが上手く行っているような。ただし、ジョジョは部ごと、さらには原作とアニメと別で学習データ集めないとダメだから1枚のリファレンスで済むのは向いてるかもｗ