数行のコード追加でStable Diffusion生成画像を高品質にする「FreeU」、Llama2を10万トークンに低コストで増やす手法「LongLoRA」など重要論文5本を解説（生成AIウィークリー） | テクノエッジ TechnoEdge
2014年から先端テクノロジーの研究を論文単位で記事にして紹介しているWebメディアのSeamless（シームレス）を運営し、執筆しています。 1週間分の生成AI関連論文の中から重要なものをピックアップし、解説をする連載です。第13回目は、画像生成AIを高品質にする手法、画像と文章を中間言語を用いずに入出力するモデルなど5つの論文をまとめました。 生成AI論文ピックアップ数行のコード追加でStable Diffusionなどの生成画像を高品質にする手法「FreeU」 大規模言語モデルのトークンを効率よく増やす手法「LongLoRA」 Llama2を10万トークンに 2.6兆トークンで訓練された、130億のパラメータを持つ多言語モデル「Baichuan 2」 スマホで物体検出をリアルタイムかつ高精度で行う新モデル「Gold-YOLO」 画像と文章を“そのまま”入出力できる生成モデル「Drea
知識と技術の継承としてのAI
三宅陽一郎MiyakeYouichiro @miyayou 知識の管理は学者の仕事であったが、これからはAIの仕事である。 幾百、幾千の知識の管理は人間の行えるところではない。 AIにはその能力がある。ただ、その体制が、システムが作れていない。情報学は博物学にもう一度回帰する。図書館情報学を含んで、それはより大きな体系となるだろう。 2023-09-18 14:49:10 三宅陽一郎MiyakeYouichiro @miyayou 人はやがてAIから知識を引き出すようになる。ちょうど大規模言語モデルから知識やオントロジー、アフォーダンスを引き出そうとするように、AIが所持した膨大なデータから自分用の知識を作り出す。 芸術でさえも、その流れから自由でないだろう。 2023-09-18 14:49:18 三宅陽一郎MiyakeYouichiro @miyayou いろいろ事情があって、ある論文
アニメの常識、画像生成AIが変える可能性「AnimateDiff」のすごい進化 (1/3)
原画と原画の間にあたる画像を複数枚入れることで、自然な連続性のある動きを作る。アニメの基本となる「中割」作業を画像生成AIが実現する可能性が出てきました。鍵になっているのは「AnimateDiff」という技術。8月に入って、様々なユーザーのアップデートによって機能拡張が進められています。それは完全な画像生成AIで作られるアニメの可能性を垣間見せるほどのものです。 16コマ/2秒の短い動画が生成できる AnimateDiffは7月10日に発表された、上海AIラボ、香港中文大学、スタンフォード大学の共同研究による技術。画像生成AI「Stable Diffusion」の仕組みとデータセットを利用しつつ、数百万本の動画を学習させた「モーションモジュール」と呼ばれるデータセットを別途に参照させることで、連続するキャラクターの動きを生成可能にするというのが基本原理です。生成できる時間は、16コマ/2秒
Stable Diffusionの画像条件付けまとめ｜gcem156
Stable Diffusionの画像生成を画像によって条件づける方法をまとめていきます。といっても実装とかを全部見たわけではないので、多少間違っている部分もあるかもしれませんが、まあイメージはあってるっしょ。 手法の分類 画像の情報をUNetのどこに与えるかによって手法を分類します。とりあえず5つに分けてみました Cross Attentionに与える：Prompt Free Diffusion, PFG, IP-Adapter Self Attentionに与える：Reference only, FABRIC Time embeddingに与える：UnCLIP, Revision その他の場所に与える：ControlNet, GLIGEN, T2I-Adapter LoRAの重みを学習する：HyperDreambooth あれ・・？もしかしてこの時点でたいていの人は脱落ですか。この辺の
Stable DiffusionとMidjourneyはどちらが優れている？ 「画像生成AI」の可能性と課題
画像生成AI二強の最新動向 マイクロソフトの検索エンジンBingで画像生成機能が追加されたほか、デザインプラットフォームCanvaでも画像生成が可能になるなど、生成AI技術を活用した画像生成ツールが身近な存在になりつつある。 この画像生成領域を牽引してきたのは、Stable Diffusionを展開するStability AI（ロンドン拠点）とMidjourneyを展開するMidjourney, Inc（サンフランシスコ拠点）の2社だ。 ChatGPTの開発企業として知られるOpenAIも画像生成AI「DALL-E」を開発しているが、現時点では、画像のクオリティでStable DiffusionとMidjourneyには及ばず、後塵を拝する状況となっている。そんな中、Stability AIが最新の画像生成モデルをリリース、画像クオリティがさらに向上したとして注目を集めている。 Stabi
画像生成AIがブラウザから無料で人間の全身写真をさくっと作ってくれる「AI Human Generator」レビュー
画像生成AIの登場によって、大規模なデータセンターや巨大なワークステーションがなくても自宅で簡単に画像を生成できるようになりましたが、ある程度高いスペックのPCでなければAIモデルを動かすことができません。「AI Human Generator」はブラウザから人間の全身画像を簡単に生成できるサービスで、無料で利用することができます。 AI Human Generator – Generate and Modify People Online https://generated.photos/human-generator/ AI Human Generatorを体験するには、「Create Human」をクリック。 画面はこんな感じで、左に設定項目が、右に生成された画像が表示されています。「Face」では、あらかじめ用意した顔を読み込ませて画像に反映できるとのことで、「Upload」をクリ
生成AIグラビアをグラビアカメラマンが作るとどうなる？第六回：Stable Diffusionの基本2 / LoRAの概要と6つの例を紹介 (西川和久) | テクノエッジ TechnoEdge
LoRAとは前回はモデルの1つであるCheckpointについていろいろお話した。今回はStable Diffusionが扱えるモデルの中で次によく使われるLoRAについてがお題となる。 連載の第一回では、自前で撮影した実在モデルの写真を学習させた専用のCheckpointを作り、そちらで生成した作例をいくつか掲載した。 これはCheckpoint自体に学習結果を保存する形式で一般的にはファインチューニングと呼ばれている。このキーワード自体は、LLM(大規模言語モデル)でもよく耳にするので、覚えのある人もいらっしゃるのではないだろうか。
Stable Diffusionの18禁画像セーフティフィルターをだます「プロンプト希釈法」が発見される
文章(プロンプト)を入力するだけで好みの画像を出力できる画像生成AI「Stable Diffusion」には、性的な画像が生成された際に画像を黒く塗りつぶして非表示にするセーフティフィルター機能が搭載されています。そんなStable Diffusionのセーフティフィルターを回避する「Prompt dilution(プロンプト希釈法)」と呼ばれる手法が発表されました。 [2210.04610] Red-Teaming the Stable Diffusion Safety Filter https://doi.org/10.48550/arXiv.2210.04610 Some notes on the Stable Diffusion safety filter https://vickiboykis.com/2022/11/18/some-notes-on-the-stable-dif
生成AIグラビアをグラビアカメラマンが作るとどうなる？第三回：実際の撮影とポーズ/構図の関係。openpose_handで指問題解決？ (西川和久) | テクノエッジ TechnoEdge
現役グラビアカメラマンでありソフトウェアエンジニアでもある西川和久氏が、画像生成AIを使ったリアルなAIグラビア作成技術を解説する連載の第三回。 今回はポーズ / 構図をテーマに、プロカメラマンとしての撮影スタイルとAI生成の共通点、現時点のAIでは難しい手指の表現を改善する技術についても説明します。(編集部) 実際の撮影と「呪文」の関係は似ている？グラビアでもポートレートでも、撮影する時は「立って」「座って」「前向き」「後ろ向き」……といったようにカメラマン側から指示を出す。 この大雑把な指示はどのカメラマンでもすることだが、顔の向きだったり腕の形だったり足の位置といった細かいことは、「指示する」カメラマンと「指示しない」カメラマンとで分かれる。これは撮影スタイルの話なので、どちらが良い悪いではない。 筆者の場合は割と大雑把で、細かい指示はせず、後の事はそのモデルに任せる＝個性だと思って
生成AIグラビアをグラビアカメラマンが作るとどうなる？第二回：「アジア美女」最新モデルBRAV6作例とネガティブプロンプトの基礎 | テクノエッジ TechnoEdge
使用したNegative Promptは、「1.無し」、「2.ほぼ最小限」、「3.筆者標準」、「4.embeddingsを使う」の4つパターン。 4番目だけ他と違い別途ファイルが必要となり、ダウンロードしたファイルを[Stable Diffusionのホームディレクトリ]/embeddingsへコピーする。Negative PromptでEasyNegativeなどをよく見かけるがそれだ。ここではng_deepnegative_v1_75tとbadhandv4が該当する。Promptで書く替わりに、特別に学習したModelで同じ効果を得られるようになっている。 無し (worst quality:2),illustration, 3d, painting, cartoons, sketch, illustration, 3d, sepia, (painting), cartoons, sk
妻の写真を学習させたはずなのに出てくるあなたはいったい誰なの？ AI生成グラドル写真集でちょっと考えた（CloseBox） | テクノエッジ TechnoEdge
集英社週刊プレイボーイ編集部が企画して出版したものの引っ込めてしまったAIグラビアアイドルさつきあい写真集「生まれたて。」をめぐっていくつか興味深い記事が上がっています（清水亮さんのコラム、新清士さんのコラム）。 既存のAIモデルだけではなく、さらにファインチューニングで使われたかもしれない実在の女性タレントをめぐる論考ですが、実のところは肝心の編集部が多くを語っていないため不明。 これとは別に、いくつかの画像投稿サイトではAIを使った「写真」「イラスト」の投稿を禁止するところも出てきており、大手サイトでの例外はAmazon.co.jpだけという話になっている一方、著名タレントのLoRA（学習されたAIモデル）のファイルが配布されていたりと、実在の人々の権利を脅かすのではないかと当初懸念されていた問題も顕在化しています。 筆者も実在の人物（妻）の写真をAIに学習させて、それを「異世界とりち
上原亜衣がAI写真集を出版。元トップセクシー女優が挑む“AI革命” | 日刊SPA!
セクシー女優として、長らくトップを走っていた上原亜衣。現在はタレント業に加え、コンカフェの運営なども手掛ける彼女が、デジタル写真集を出した。題して、「上原亜衣～再生～」。全編AIで作成、約50枚の写真を収録。上原亜衣のこれまでにない魅力が詰まっていると、早くも好評だ。 「ビキニやランジェリー姿の写真や、アートっぽいカットまで、いろいろ作ってもらいました。『Stable Diffusion』という画像生成AIソフトを使ったのですが、髪型をボブにしたり、ロングにしたり。自在にできるんです。私は横に座って気ままに案を出していただけなんですけど、いやあすごかった。この技術は私たちにとって、追い風になると思ってます」 そう語るのは、上原亜衣本人。AI写真集出版の背景には、彼女の強い好奇心があった。 「AIに仕事を奪われるだとか、タレントはもういらなくなるとか。そんなことを言う人もいるけど、私は違うと
「描いたイラストをリアルタイムでAIに手直ししてもらえる環境」を「Stable Diffusion」と「Redream」の組み合わせで実現する方法まとめ、ControlNetも使って高品質な画像を生成可能
画像生成AI「Stable Diffusion」の登場以来、コミュニティの有志たちによって多くのAIツールが開発されています。コミュニティ製ツールの1つである「Redream」は「PCの画面内の一部を常にキャプチャし、キャプチャした画像をimg2imgに流し込んで画像を生成し続ける」という機能を持っています。Redreamを使ってみたところ「描いたイラストをリアルタイムでAIに手直ししてもらえる環境」というメチャクチャ便利な環境を構築できたので、インストール手順や使い方をまとめてみました。 GitHub - Fictiverse/Redream: Realtime Diffusion, using Automatic1111 Stable Diffusion API https://github.com/Fictiverse/Redream Redreamで構築した「描いたイラストをリアル
「画像生成AIにエロティックに見えるセーラー服アニメ画像を出力させることは可能か？」のプロンプトハッキングテスト： プロンプト・監査報告・画像の無償公開【日本マネジメント総合研究所合同会社】
「画像生成AIにエロティックに見えるセーラー服アニメ画像を出力させることは可能か？」のプロンプトハッキングテスト： プロンプト・監査報告・画像の無償公開【日本マネジメント総合研究所合同会社】 報道機関各位 2023年5月23日 日本マネジメント総合研究所合同会社 各種感染症・台風/豪雨災害・各種震災など各地の災害や戦禍等で、国籍等に関わらず感染・被災・苦境に直面された方々と、復興者の方々や平和維持活動の皆様・世界各地の医療機関関係各位ならびに各種関係各位のご安全と1日も早い実りあるご快癒・復旧復興・和平等と共に、ご無念ながらに天上に召されました尊い御霊・御仏のご冥福を心よりお祈り申し上げます。 弊社にて人と社会と生成AIの健全な発展を目指して設立しました「GPT研究所」にて、新たに、生成AIの倫理観や自主規制について検証するプロンプトとGPT監査シリーズの監査レポートを、下記の通り公開致し
ControlNet(v1.1)の詳しい解説！輪郭やポーズから思い通りの絵を書かせる【Stable Diffusion】 | 謎の技術研究部
ControlNet(v1.1)の詳しい解説！輪郭やポーズから思い通りの絵を書かせる【Stable Diffusion】 AIイラストはPromptだけだと思い通りのポーズが出せない。そこで既存の線画やポーズから出力をコントロールする手法がControlNet。できるだけ細かいところまで設定を見ていく。 ControlNetがv1.1にアップデートされたため随時記事更新中！推定モデルの解説はほぼ網羅(一部あまり使われてないと思われるものは掲載していない) かなり頻繁に更新しているため、履歴を最下部に掲載 最終更新時のControlNetのバージョン：1.1.201 はじめに この記事はStable DiffusionのExtensionであるControlNetのより深い解説を目指す。 なにをするもの？ 今まで殆ど運任せだった画像生成だが、ControlNetを使うことである程度ユーザーが
AI美女のTikTokアカウントが2日で100万回再生超えしていてヤバい話…本人降臨「騙す、騙され、ではない新しいマーケティングの世界を先駆者として切り開いてます」
朝比奈ひかり @Asahina_hikari 25歳┊5期目の会社経営 & 慶應院で起業家×結婚の研究🧊 #Z世代 に特化した企画.SNSマーケ.リサーチ会社🧊\@seamint_inc 代表取締役┆渋谷女子校 ビジネス講師/ Xではゆるーく仕事や恋愛について呟くよ❕ aboutme.style/asahinahikari 朝比奈ひかり🧡大学院生と起業家 @Asahina_hikari やばいTikTokアカウント見つけた。AIで画像生成したAI美女が2日間で100万回再生超え。しかもコメント見る限り『みんな本物の人間』だと思ってる。しかも30キロ痩せて港区女子というキャラ😂2日でこれだしもっとフォロワー増えそう。。みんな騙されてダイエット法とか聞いてるの面白い😂 pic.twitter.com/y7Ib8F7gSZ 2023-05-21 21:27:14
画像生成AIに2度目の革命を起こした「ControlNet」 (1/4)
画像生成AI「StableDiffusion」の進化が止まりません。昨年8月にオープンソースとしてリリースされてから、世界中のプロアマ問わず多数の人たちが様々な研究成果を反映させ、毎日と言っていいほど新機能を誰かが発表するという状況が起きています。 StableDiffusion登場当初は、画像の品質のランダム性が高く、構図やポーズなどを指定できないという弱点を抱えていました。1枚の画像をもとに画像を生成する「i2i（image2image）」である程度コントロールすることはできても、「キャラクターに特定のポーズをとらせる」といったことは非常に難しかったんですね。 その状況を一変させる新機能が今年2月に登場しました。その名も「ControlNet」。プロンプトによる制約を克服するための、とてつもないポテンシャルを持つ技術でした。Stable Diffusionに次ぐ「2度目の炸裂」と言って
画像生成AI・ChatGPT・ゲーム開発・アプリ開発・AWS資格など新たなスキルを手に入れて人生をステップアップするUdemy講座まとめ
新しいスキルを手に入れると、市場価値が高まって収入が増えたり、クリエイターという新たな立場を手に入れることで将来的に自分の名前自体がブランド化して自立性の高いキャリアを築けるものですが、新たに物事を学んで習得するのは一人ではなかなか難しいものです。そうした新たなスキルを身につけようとする人を現場で活躍する講師によるムービー形式の分かりやすい講座で支援してくれるサービスがオンライン学習プラットフォームの「Udemy」で、AI関連の先進的な講座から、資格関連の手堅い講座まで幅広いラインナップが取りそろえられています。ちょうどUdemyが5月16日(火)から5月24日(水)まで、対象講座を1200円～という手頃な価格で購入可能なセールを実施しているとのことなので、人生のステップアップに役立ちそうな講座を6つピックアップしてみました。 オンラインコース - いろんなことを、あなたのペースで | U
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【全体公開】AIイラストが理解る！StableDiffusion超入門｜スタジオ真榊【AIイラスト術解説】｜pixivFANBOX
最新のAIイラストさん、一枚描くたびに服が変わったりするクセが消失……
