Stable Diffusionを「いらすとや」で追加学習する - TadaoYamaokaの開発日記

前回、Stable Diffusionをdanbooruデータセットを使用して追加学習することを試した。 今回は、自分でデータセットを作成して追加学習することを試す。 データセットには、画像とキャプションが揃っている必要があり、キャプションがない場合はCLIPで疑似ラベルを生成するなどする必要がある。 今回は、画像に対するキャプションがある「いらすとや」をスクレイピングして、データセットを作成した。 データセット作成 「いらすとや」から全ての画像とキャプションを取得した。 画像に複数バリエーションがある場合は、1つ目の画像のみを使用した。 キャプションは、日本語になっているため、Googleスレッドシートで、「=GOOGLETRANSLATE(XX,"ja","en")」を使って英語に変換を行った。 合計で、22891枚の画像とキャプションのセットが用意できた。 画像サイズ変換 画像は、5

[naratas]

「なんかダメな気がする」という気持ちは大変よくわかるのだけど、絵柄・画風には何の権利もないので、人間が真似しようがAIが真似しようが問題ない。「本人が描いた」ことに価値を見出す未来になるということ。

[tomoP]

イラストレーターの仕事を奪ってきたと言われるいらすとやさんが今度はお株を奪われる番になるという諸行無常感

[Palantir]

ここまで特定画風に寄せられると、それは特徴的な個人の技術として守らなくてはならないように思ってきてしまう。 国際的にもう無理なんだろうけど、なんかおかしいよなぁ。

[flont]

これが自宅の普通のPCで動くのが前提の時代 / 画風なんてレベルで保護したら、死者の権利のために現行世代は今の絵をすべて破棄して100年前の絵に戻るしか合法に絵を描けなくなるので仕方ない

[yas-mal]

https://www.irasutoya.com/2016/08/ai.html 最後の絵は、これが出て来て欲しかったのね。「AIに支配される人達のイラスト：人工知能に首輪をつけられてペットのように飼いならされている幸せな人類のイラストです。」

[ch1248]

手が増えたり異形化してて笑う。

[kunishou123]

参考に経産省の「AI・データの利用に関する 契約ガイドライン」制定に関わってる弁護士の先日の記事を貼っておきます https://storialaw.jp/blog/8820 ちなみにいらすとやは21点以上の利用は有償であり著作権フリーではないです

[eggplantte]

これで著作権問題なく商用で使えるってのは法改正入るのも時間の問題だと思う

[otchy210]

いらすとやは大変に見慣れているので「一番左の画像は、本物と区別がつかないくらいになっている。」などとは思わないし、まだいらすとやの凄さが際立っていると思う。ガチで凄いやつを本家が出す展開を期待してる。

[ano18]

いらすとやの画風をほぼそのままパクるなんて人間でもいくらでもできる。それをやんないのはやっちゃいけないからで、AIならOKになったら完全に著作権が死ぬ

[m50747]

自分の絵を学習させて楽ちんできそう。

[kamanobe]

いらすとやみたいな雰囲気で成り立っていない超絶気配り商業イラストの方がAI作成には向いていないんだろうな。肝が画風じゃない。

[timetrain]

いらすとやさんの全データスクレイピングってのが行儀悪すぎてな。

[houyhnhm]

前にも書いたが著作権法上回避出来ても営業妨害とかにはなるので権利関係はそんなに気にしなくていい（同人も売り方の問題やで大抵）／人間によるフワフワな判定でやる以上中の人はは必要になるな。

[yoshi-na]

いらすとやの場合はむしろちゃんとしたホンモノのいらすとやイラストが欲しくなるな現状では

[Byucky]

学習していく画像だけでホラー映画をみてる迫力を味わえる。技術はOKだけど、AIが書いたから元のイラストレーターへは報酬を払わなくて良いっていう事件が確実に起こるだろうな。ルールではなくモラルの問題

[sea295x2]

規約に"加工の有無、または加工の多少で著作権の譲渡や移動はありません。"とあるから2万素材を使って作られてるこれを商用利用するととんでもない額がかかる可能性があるw

[hom_functor]

海外だと少ない枚数で上手くいった報告が複数上がってるので、いらすとやは個性的すぎて難しいのかもな

[TETOS]

こう見ると、逆にどういうアルゴリズムで回ってるか見えてくるな。この辺を利用すると、絵同士の相似関係を判定できそうだな。逆説的に。

[endo_5501]

“ただし、抽象的な説明は、難しかったようである”

[NOV1975]

学習させるのも利用にあたるかって問題なのかなこれ

[mventura]

ミッキーマウスの世界ばかりを学習させて新たに別の作品を作るとする。学習することと生成することに議論の余地はあるけど、二次配布したり商用利用することはダメなんじゃない / 既出の下記ブログに書いてあったはず

[kazgeo]

実は「いらすとや」はもっと進んだAIだった？

[sds-page]

いらすとやに存在する画像とキャプションでも1枚しかないと安定しないのかな。人とか猫とかは安定するけどそれ以外が一意にならない感じ

[n_pikarin7]

自分の画風がミーム化しさらに再生産され、時空を超えて伝播していくのって凄いな。先生が喜ばれるのかは分からんが。「ただし、抽象的な説明は、難しかったようである」

[kyukyunyorituryo]

イラスト屋は白黒やカラー印刷の見栄え要素もあるから。

[marshi]

画風を法的で守りだしたらもう誰もイラストを描けなくなるだろうね。すべてのイラストを調べることなんてできないんだから垂れから訴えられるかわかったもんじゃない。

[sisya]

前回の別記事に比べて相当似てきた。ただ、これは膨大なサンプル数を持っているいらすとやだからこそなしえた技で他の人のイラストでここまで寄せるのは難しいのではないかと思う。サンプル数が1オーダー以上少ない

[blueeyedpenguin]

パチモン感がすごい

[lenore]

手が何本もあったり脚の位置に手が生えてたりもするから、人間や各種生物の基本的な構造を別ベクトルで教えておいて欲しいと思った

[estragon]

すごいなぁ。でも後ちょっと足んないのね

[napsucks]

ファインチューニングすごいな。

[typographicalerror]

ポップアートのことを考えた

[ydf]

AIが進化すると、どんな絵を描いたかに価値が無くなり、どうやってその絵を描いたかの制作過程に価値がでる、Action Painting復活!!!

[call_me_nots]

うほー！やっぱ日本ネット文化でAI倫理がブッ刺さるのはイラスト分野なのか

[Mecoysvase]

text2imgでの完全体は難しくても単体絵ならimg2imgで形の補助を入れたり、SD以外ならスケッチから3Dイラスト化する技術のベース絵をいらすとやにすれば使えるイラストができそう。絵柄パクの問題はさておき

[Bosso]

一体いつから「AIがいらすとやを取り込んだ」と錯覚していた？

[rrringress]

腕が生えすぎてて怖い