cedro

ディープラーニングの技術ブログを書いています。E資格ホルダー。好きなものは、膨大なショットの中の奇跡の１枚、薪ストーブとウイスキー、何もしない南の島、コード通りに動くチップ、完璧なハーモニー、仲間とのバンド演奏、数えきれない流れ星。

[cedro @jun40vn]

@matsumatsu04 画像

[cedro @jun40vn]

ブログを書きました！

今回ご紹介するのは、１枚の画像から動画を生成する「Animate Anyone」です。アリババからの公式コード公開はまだですが、これは論文の実証結果を元に作られたシミュレーションコードです。

ブログ：https://t.co/3fTcmfCPnE

[cedro @jun40vn]

静止画から動画を生成する SVD（Stable Video Diffusion）を試してみました。Midjourney V6.0と相性がとても良い様です。

ブログ：https://t.co/bHUIo3vsvM

[cedro @jun40vn]

DiffMorpherは拡散モデルのためのモーフィング技術ですが、この技術を使うと、従来GANでは難しかった任意の画像間でのモーフィングが可能になります。例えば、こんなことも。

ブログ：https://t.co/6gsAlA53He

[cedro @jun40vn]

「Domo AI」は、実写動画をアニメ化するAIサブスクリプション·サービスです。従来からこういうタイプのAIはありましたが、ようやく実用に耐えるレベルになって来たようです。

ブログ：https://t.co/K3qXSjY5vN

[cedro @jun40vn]

ブログを書きました！

現在の画像生成の主流である拡散モデルは、潜在空間が構造化されていないためスムーズなモーフィングが困難です。今回ご紹介するDiffMorpherは、その問題点を解決する技術です。

ブロブ：https://t.co/6gsAlA53He

[cedro @jun40vn]

ブログを書きました！

今回ご紹介するのは、実写動画をアニメ化するAIサブスクリプション·サービス「Domo AI」です。従来からこういうタイプのAIはありましたが、ようやく実用に耐えるレベルになって来ました。

ブログ：https://t.co/K3qXSjXxGf

[cedro @jun40vn]

@JUNVESTOR1 コーチさん、こんにちは！
colabのバージョンアップ対応がうまく出来ておらずすみません。ただ、さらに進化したfacefusionがあり、こちらの方が精度も操作性も良いので、こちらをお使いただくとありがたいです。下記、リンクです。
https://t.co/6CD1N9fJVj

[cedro @jun40vn]

ブログを書きました！
今回ご紹介するのは、音楽を自動生成するSuno AIというWebサービスです。

これは、Suno AIで作った曲とMagicAnimateで作った動画を組み合わせたものです。

ブログ：https://t.co/0mMqx9XVFr

[cedro @jun40vn]

ブログを書きました！

今回ご紹介するのは、１枚の画像とモーションシークエンスから動画を生成する、MagicAnimateという技術です。

これは、モナリザの絵とダンスのモーションシークエンスから、「踊るモナリザ」の動画を生成した例です。
ブログ：https://t.co/twn7zo8xoC

[cedro @jun40vn]

@wireless_power ありがとうございます！
今、全世界で、このコードを待ち望んでいる人が沢山いますよね。
まさにブレイクスルー技術ですね！

[cedro @jun40vn]

これは、作詞・作曲・歌・演奏・シンガー・動画の全てをAIで作成したMVです。

作詞・作曲・歌・演奏：https://t.co/lwww9AaHcv
シンガー・動画：https://t.co/14gNs5lmV4
口と歌の連動：https://t.co/L7uFLz15sg

[cedro @jun40vn]

AIで作ったMVです。AnimateDiffで動画を生成し、wav2lip-HQで歌と口の動きを連動させています。

ブログ
AnimateDiff : https://t.co/14gNs5lmV4
wav2lip-HQ : https://t.co/L7uFLz15sg

[cedro @jun40vn]

ブログを書きました！

今回ご紹介するのは、たった１枚の顔画像で、動画の顔を入れ替える事が出来る技術の最新版 facefusionです。

ブログ：https://t.co/6CD1N9fc5L

[cedro @jun40vn]

AnimateDiffとwav2lip UHQを組み合わせて、ミュージックビデオのようなものを作ってみる。

AnimateDiff : https://t.co/14gNs5lmV4
Wav2lip UHQ : https://t.co/hzGGp8FfmU

[cedro @jun40vn]

4D-Humansは、単眼画像から人物の３Dモデルを推定する最新技術です。

ブログ：https://t.co/3upStcXTuU

[cedro @jun40vn]

AnimateDiffは、文から動画を生成するモデルの最新技術です。

この技術は、ベースモデルで一度学習すると、ベースモデルからDreamBoothやLoRAなどで作った様々な派生モデルに、その結果を学習なしで適用出来ます。

ブログ：https://t.co/14gNs5lmV4

[cedro @jun40vn]

@deji_panda 単眼３Dモデル推定も実用期に入りましたね^^

[cedro @jun40vn]

4D-Humansは、単眼画像から人物の３Dモデルを推定する技術です。従来は難しかった「体が逆さまになるような特殊なポーズ」でも、３Dモデル推定が可能になっています。

ブログ：https://t.co/3upStcXlFm

[cedro @jun40vn]

@HKansoku34002 今ブログのリンクから飛んで、proとFreeの両方でやってみました。まだ動きます😊ビデオはHDで20秒くらいを目安に🤔私の場合、「グーグルコラボ契約。。。」は表示されず対応は不明です。

[cedro @jun40vn]

ブログを書きました！

今回ご紹介するのは、文から動画を生成するモデルの最新技術AnimateDiffです。この技術は、ベースモデルで一度学習すると、ベースモデルからDreamBoothやLoRAなどで作った様々な派生モデルに、その結果を学習なしで適用出来ます。

ブログ：https://t.co/14gNs5lmV4