[Must-Watch!] Introducing the Leveled-Up Evolutionary Version of AnimateDiff! [Stable Diffusion]

[@Your-Stranger]

待ってました！！いつもありがとうございます💛

[@NicoNicoDougaInmuCookieYajuSen]

分かりやすい動画ありがたいです

[@奥澤伸一]

お忙しいところすいません。動画ではTileをクリックするとコントロールネットのpreprocessorとmodelの欄にそれぞれresampleとcontrol_v11f1e_sd15_tileが入力されますが、私の方では、preprocessorはresampleと入力されたのですが、modelの欄がnoneのままです。 TDSさんのsd-webui-controlnetのフォルダのなかのmodelsフォルダをみてみたところ、yamlファイルしかなく、推定モデルが入っていなくて、そのために、modelの欄がnoneのままなようです。これはこのままにしてもよいのでしょうか？いちおう、画質などは荒いような気はしますが、動画は作れます。stable diffusionはversion1.7を使っております。stable diffusionのversion1.7に対してTDSさんのsd-webui-controlnetのversionが古すぎるのでしょうか？

[@AI_is_in_wonderland]

コントロールネットのモデルは別でダウンロードする必要があります huggingface.co/lllyasviel/sd_control_collection/tree/main

[@奥澤伸一]

返信ありがとうございます。上のURLにcontrol_v11f1e_sd15_tile.pthがないのですが、control_v11f1e_sd15_tile.pthを設定ファイルが入っているmodelsフォルダにいれればよいのでしょうか？いれてみてgenerateをクリックしたんですが、生成できません。一瞬動いて、すぐに生成が止まってしまいます

[@奥澤伸一]

「if control.control_model_type not in [ControlModelType.IPAdapter, ControlModelType.Controlllite]: File "C:\Users\okuzawa shinichi\AppData\Local\Programs\Python\Python310\lib\enum.py", line 437, in __getattr__ raise AttributeError(name) from None AttributeError: IPAdapter 」　これがエラーの原因なようで、copilotに解決方法を質問してみたところ、「このエラーは、ControlNetのモジュールで発生しているようです。ControlNetは、画像生成の制御を行うためのツールで、IP-Adapterという画像をプロンプトとして扱える技術を含んでいます1。エラーの原因としては、以下の可能性が考えられます。 ControlNetのバージョンが古いか、インストールされていない。 IP-Adapter用のモデルがダウンロードされていないか、正しい場所に保存されていない。 IP-Adapterのプリプロセッサとモデルの設定が間違っている。」

[@オワリスギゾー]

解説ありがとうございました。 ８Gですが参考に試してみようと思います。

[@AI_is_in_wonderland]

コメントありがとうございます。試してみてください！6GB試しましたがダメでした。

[@AI_animation_seiiiru]

twitterで勝手ながら紹介させて頂きました！思いのほか見てもらえましたので一応ご連絡しておきます。メンションとかさがせなくてすみません！

[@AI_is_in_wonderland]

ありがとうございます！うれしいです！またtwitterは初心者ですが、チャンネルにリンクを載せてみました。

[@aslanmaskedmodeler3798]

お疲れ様です。アニメディフ、面白いですよね。動画の中割を増やしてくれるツールがあるので60fpsまで上げたらぬるぬる動くんじゃないかな？と思ってやってみたんですけどあんまりうまくいかなくて大差ない感じでした。中割ツールによるかもしれないんですけれどいろいろ組み合わせてぬるぬる動く動画が出来たら面白いかなーと思います。

[@AI_is_in_wonderland]

コメントありがとうございます!中割を増やすのはEbsynthですか?もし教えていただけたら嬉しいです!

[@aslanmaskedmodeler3798]

おはようございます。ぼくが使ってみたのはDVDFab Smoother AIっていうツールです。インストール型の有償ツールですが30日間無料使用できます。フレーム補間だけでなく動画のアップスケールとかいろいろできるみたいです。30fpsで撮影した動画を60fpsにした時は違いを感じたのですがさすがに8fpsを60まで引き上げてもあまり違いは感じなかったです。ぼくのGPUがショボいのでそのせいもあるかもしれないんですが・・・　フレーム補間系のツールは「これで完璧！フレーム補間 おすすめソフト5選」っていうブログにいろいろ紹介されてますのでよろしければご参考までに・・・

[@AI_is_in_wonderland]

ありがとうございます!　 今Ebsynthも触っていますので、高性能の補完と比べてみます。animatediffの動画をもつとぬるぬる動かしたいですね。

[@AI_is_in_wonderland]

早速使って見ました！フレームを増やした後に、ebsynth utilityで画像を分割すると、全く同じ画像をふやして60fpsにしていただけでした。テレビアニメとかも約30fpsですが、同じ画像を繰り返し使用しており、1秒間に使用する絵は8－10枚程度らいいです。情報ありがとうございました。

[@aslanmaskedmodeler3798]

検証ありがとうございます。やっぱりそうだったんですね。何の意味もない詐欺商品ですねこりゃｗ　他のフレーム補間ツールは試せていないのでよさげなのがありましたらまたお知らせしますね。

[@csdcjk9250]

thank you alice-san. Your video is amazing and helpful as always. I really want to learn more by myself. Maybe it's time for me to start.. Do you have a discord that you recommend for learning the latest information ?

[@AI_is_in_wonderland]

Thank you! But I don't have Discord or join it. I usually get information from Twitter or KZbin videos made by others.

[@tt-vc5ll]

凄いなこれ　その内アニメ制作がAIでどんどん簡単になるだろうな

[@AI_is_in_wonderland]

そうですね。まだ超えるべきハードルは多いですがどんどんAIが入り込んでいくでしょうね

[@ikumirhou4624]

想像以上ですね。 特に最初と最後を指定でき、頑張れば長編も作れるというところが凄い。 ただVRam２４G は流石に・・・如何せんRamと違って容易に増設できないですから。 自分は１２Gなんで、今までは別に不足を感じていなかったのですが・・・。 でも、なんかもうしばらくすると軽くなりそうかな？という気もするのですが。 改良に期待したいですね。

[@AI_is_in_wonderland]

コメントありがとうございます。VRAM12GBは試せていないので、できるかどうかは分りませんが、試してみてください！ 6GBは普通のanimatediffもout of memoryでした！ 確かにもう少し軽くなる可能性はありますね。

[@kurukuru-c6s]

VRAM24GBだけど足りるかな？

[@AI_is_in_wonderland]

コメントありがとうございます。足ります！！www

[@mmpwktamg]

AssertionError

[@AI_is_in_wonderland]

残念です(⁠╯⁠︵⁠╰⁠,⁠)