ディープラーニングの技術ブログを書いています。E資格ホルダー。好きなものは、膨大なショットの中の奇跡の１枚、薪ストーブとウイスキー、何もしない南の島、コード通りに動くチップ、完璧なハーモニー、仲間とのバンド演奏、数えきれない流れ星。 github.com/cedro3
Joined March 2014
- Tweets 1,156
- Following 509
- Followers 5,822
- Likes 4,362
374 Photos and videos
ブログを書きました！
今回ご紹介するのは、１枚の画像から動画を生成する「Animate Anyone」です。アリババからの公式コード公開はまだですが、これは論文の実証結果を元に作られたシミュレーションコードです。
ブログ：cedro3.com/ai/animate-anyone…
1
14
83
11,966
静止画から動画を生成する SVD（Stable Video Diffusion）を試してみました。Midjourney V6.0と相性がとても良い様です。
ブログ：cedro3.com/ai/svd/
1
2
14
3,341
DiffMorpherは拡散モデルのためのモーフィング技術ですが、この技術を使うと、従来GANでは難しかった任意の画像間でのモーフィングが可能になります。例えば、こんなことも。
ブログ：cedro3.com/ai/diffmorpher/
11
32
4,875
「Domo AI」は、実写動画をアニメ化するAIサブスクリプション·サービスです。従来からこういうタイプのAIはありましたが、ようやく実用に耐えるレベルになって来たようです。
ブログ：cedro3.com/ai/domo-ai/
5
22
4,196
ブログを書きました！
現在の画像生成の主流である拡散モデルは、潜在空間が構造化されていないためスムーズなモーフィングが困難です。今回ご紹介するDiffMorpherは、その問題点を解決する技術です。
ブロブ：cedro3.com/ai/diffmorpher/
1
14
1,632
ブログを書きました！
今回ご紹介するのは、実写動画をアニメ化するAIサブスクリプション·サービス「Domo AI」です。従来からこういうタイプのAIはありましたが、ようやく実用に耐えるレベルになって来ました。
ブログ：cedro3.com/ai/domo-ai/
54
205
42,937
ブログを書きました！
今回ご紹介するのは、音楽を自動生成するSuno AIというWebサービスです。
これは、Suno AIで作った曲とMagicAnimateで作った動画を組み合わせたものです。
ブログ：cedro3.com/ai/suno-ai/
1
5
21
3,497
ブログを書きました！
今回ご紹介するのは、１枚の画像とモーションシークエンスから動画を生成する、MagicAnimateという技術です。
これは、モナリザの絵とダンスのモーションシークエンスから、「踊るモナリザ」の動画を生成した例です。
ブログ：cedro3.com/ai/magicanimate/
6
23
2,718
これは、作詞・作曲・歌・演奏・シンガー・動画の全てをAIで作成したMVです。
作詞・作曲・歌・演奏：suno.ai
シンガー・動画：cedro3.com/ai/animatediff/
口と歌の連動：cedro3.com/ai/wav2lip-hq/
1
8
34
4,105
AIで作ったMVです。AnimateDiffで動画を生成し、wav2lip-HQで歌と口の動きを連動させています。
ブログ
AnimateDiff : cedro3.com/ai/animatediff/
wav2lip-HQ : cedro3.com/ai/wav2lip-hq/
3
26
3,036
ブログを書きました！
今回ご紹介するのは、たった１枚の顔画像で、動画の顔を入れ替える事が出来る技術の最新版 facefusionです。
ブログ：cedro3.com/ai/facefusion/
2
14
42
4,108
AnimateDiffとwav2lip UHQを組み合わせて、ミュージックビデオのようなものを作ってみる。
AnimateDiff : cedro3.com/ai/animatediff/
Wav2lip UHQ : github.com/numz/sd-wav2lip-u…
5
38
4,596
4D-Humansは、単眼画像から人物の３Dモデルを推定する最新技術です。
ブログ：cedro3.com/ai/4d-humans/
39
189
16,661
AnimateDiffは、文から動画を生成するモデルの最新技術です。
この技術は、ベースモデルで一度学習すると、ベースモデルからDreamBoothやLoRAなどで作った様々な派生モデルに、その結果を学習なしで適用出来ます。
ブログ：cedro3.com/ai/animatediff/
3
17
2,912
4D-Humansは、単眼画像から人物の３Dモデルを推定する技術です。従来は難しかった「体が逆さまになるような特殊なポーズ」でも、３Dモデル推定が可能になっています。
ブログ：cedro3.com/ai/4d-humans/
2
115
664
88,948
ブログを書きました！
今回ご紹介するのは、文から動画を生成するモデルの最新技術AnimateDiffです。この技術は、ベースモデルで一度学習すると、ベースモデルからDreamBoothやLoRAなどで作った様々な派生モデルに、その結果を学習なしで適用出来ます。
ブログ：cedro3.com/ai/animatediff/
1
12
33
4,617
ブログを書きました！
今回ご紹介するのは、単眼画像から人物の３Dモデルを推定する「4D-Humans」という技術です。従来は難しかった「体が逆さまになるような特殊なポーズ」でも、３Dモデル推定が可能になっています。
ブログ：cedro3.com/ai/4d-humans/
95
498
51,093
SadTalkerは、音声で顔画像を動かす最新の技術です。
これは、RADIO FISHの「7th Color」を題材に、歌で顔画像を動かした例です。
ブログ：cedro3.com/ai/sadtalker/
3
14
2,334
ブログを書きました！
今回ご紹介するのは、動画の人物を３Dモデルに置き換えることが出来る「Wonder Studio」というWebサブスクサービスです。
ブログ：cedro3.com/ai/wonder-studio/
9
50
6,975
SadTalkerは、音声で顔画像を動かす最新の技術です。
これは、RADIO FISHの「全知全能」を題材に、歌で顔画像を動かした例です。
ブログ：cedro3.com/ai/sadtalker/
3
11
2,525