Stable Diffusionでmorphing - すぎゃーんメモ

#stablediffusion 完全に理解した pic.twitter.com/IR5yjnL07Y— すぎゃーん💯 (@sugyan) August 31, 2022 ということで少し触って遊んでみたのでメモ。 Stable Diffusion をザックリ理解 先月公開された Stable Diffusion。 stability.ai 高精度で美しい画像を出力できる高性能なモデルながら、Google Colab などでも手軽に動かせるし、 Apple silicon でもそれなりに動かせる、というのが魅力だ。 中身については 以下の記事の "How does Stable Diffusion work?" 以降のところが分かりやすい。 huggingface.co 図をそのまま引用させていただくと という仕組みになっていて、受け取る入力は "User Prompt" と "Late

[tkysktmt]

“当然ながら、京都と東京の町並みを補間するからといって愛知や静岡の風景が生成されたりはしない”

[peketamin]

フレーム間を特徴点メッシュベースでモーフィングするとさらに滑らかになるのかな

[Windymelt]

面白い!! 途中で一瞬MBPにリンゴが映るのが良い

[vndn]

あーなるほど。テキスト(?)が途中でベクトル(でいいのか?)になってる(のか?)わけだから、複数のテキスト間の任意の中間点が取れる(?)のか。

[cho45]

ちゃんと理解してるとこういうことができるんだよな～～

[Imamura]

面白い。1枚ずつ生成で時間はかかりそう

[u_mid]

へー、どういう画像が生成されるかの要因は2つの入力（ユーザーによる指示テキストと、ベースとなるランダムノイズ画像）しかないのか

[overlast]

さすが。この速度でシークできる出力結果が実時間で得られたら調整が捗る、ことが伝わってくる。

[tumo300-500]

おもしろーい

[secondlife]

これがPPAPか～

[htnmiki]

食えないリンゴはただのアップルだ

[stealthinu]

embeddingされるベクトルを保管することで中間を出す。真ん中あたりの刻みを細かくしないと急激に変化しちゃうとか面白い知見。

[canadie]

動画だと1コマ1コマの細かい破綻を目で追いにくいからAI画伯に向いてる作業かもしれない。よくある突然文字が現れたりするのも逆にオシャレに見える

[myrmecoleon]

面白い

[cartman0]

“morphing”

[yamaisan]

すごい、でも難しくて分からない

[hitode909]

すごい

[kei_1010]

ぜひ公開して欲しい / しかし、やってみると、突然右の犬が左に瞬間移動してウサギになったりする。

[hakobe932]

うおーすごいわざだ