キャラクター画像をアニメに 中国アリババなど「Animate Anyone」開発 ボーンの動きを反映
モデルは、Stable Diffusion（SD）のネットワーク設計と事前訓練された重みを継承し、Denoising UNetを複数フレームの入力に対応できるように変更している。 この方法には3つの重要なコンポーネントが組み込まれている。参照画像からキャラクターの外観的特徴をエンコードする「ReferenceNet」。骨格動画からキャラクターの動きを制御するためのモーションデータをエンコードする「Pose Guider」。キャラクターの動きの連続性を確保するための時間的関係を補う「Temporal layer」。 ReferenceNetで抽出した特徴は、Spatial-Attentionを用いてDenoising UNetに統合される。これにより、Denoising UNetはReferenceNetと同じ特徴空間にある関連する特徴を選択的に学習できる。また、CLIP画像エンコーダーを使
アニメキャラを無限に生成「Crypko」、PFNが提供
AIベンチャーのPreferred Networksが、アニメキャラクターを無限に生成できるというサービス「Crypko」の提供を始めた。 AI（人工知能）ベンチャーのPreferred Networks（東京都千代田区）は4月3日、ディープラーニングを活用し、アニメキャラクターを自動生成するサービス「Crypko」（クリプコ）を始めた。まずはアニメ、イラスト、ゲームなどの制作企業に提供する。 画像を生成するAIと画像を評価する別のAIを「敵対」させ、精度を向上させていく技術「GAN」（Generative Adversarial Network：敵対的生成ネットワーク）を活用した。生成したキャラには滑らかな動きをつけ、自然な表情を作ることも可能だ。パーツごとにユーザーの好みや意図も反映できるという。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
17日放送アニメ「イングレス」に超解像GRADIA。ジャギーレス
言葉の壁をヴィジュアルで超えろ：国際感覚に磨きをかけた和製CG、ハリウッドに挑む
