最強の顔認識機能、FaceIDをstable diffusionで使う

Рет қаралды 24,087

AI is in wonderland

Күн бұрын

Пікірлер

@kusoueiai 10 ай бұрын

顔を固定する方法を探していたのでとても参考になりました。素敵な解説ありがとうございます💖

@AI_is_in_wonderland 10 ай бұрын

コメントありがとうございます。お役に立ててうれしいです😊

@superoki 11 ай бұрын

使ってみました。単純に顔だけが変わるかと思いましたが、いい感じにポーズも変更してくれるのがすごいですね！また、楽しみが広がりました。顔素材のLoRAと併用したらどうなるのか検証中です。紹介していただいてありがとうございました。

@AI_is_in_wonderland 11 ай бұрын

コメントありがとうございます。全体の画風なども引っ張られるようですね。結構面白いですね

@sci_worlds 11 ай бұрын

ControlNet情報は少ないので動画助かります！アニメ調のイラストではやはりエラーが出ました。入力画像はリアルまたはセミリアル向けのようですね。

@AI_is_in_wonderland 11 ай бұрын

insightfaceはアニメに対応していないようですね

@shinjisaito5848 11 ай бұрын

有益な情報ありがとうございます。確かに実写系では生成結果が美化されがちなモデルが多いなか、モデルを変えずにこれは凄いですね。西洋系のモデルで東洋系の顔が自然に生成されるのも強いです。ただ、Hires.fixやADetailerの過程で、モデルに引っ張られるところはありそうなので、モデル選びが重要なのは変わりはなさそうですかね。再限度が思わしくない場合は、顔LoRAも組み合わてみたりするなど、いろいろ遊べそうです。

@AI_is_in_wonderland 11 ай бұрын

Hires.fixのでノイズを強くすると利きが悪くなるかもしれませんね。Adetailerはまだ試していませんが、コントロールネットの後に働くので顔が戻ってしまうかも

@unako333 11 ай бұрын

『美女ではない画像』で笑いました。機能紹介ありがとうございます♪

@AI_is_in_wonderland 11 ай бұрын

世界のUNAKOさん、コメントありがとうございます。美女ではないは失礼でしたかね🤭

@katoriyamada 11 ай бұрын

これだけ楽に顔再現が可能になると、リアル系の顔LoRAとか作る意味なくなるかもしれないですね。SDXLでの性能はちょっと「あれ？」と感じますが、1.5系では顔再現機能として完成の域に達している気がします。生成で使うと優秀なLoRAもインペイントで使うと再現性かなり下がるんですが、このコントロールネットがそこも克服していたら学習データの作成でも強力なツールになりそうですね

@AI_is_in_wonderland 11 ай бұрын

まさに顔LoRA不要説ありますね！この機能は静止画像作るときは最強だと思います😆

@春日恵理-o5z 11 ай бұрын

わんこが気になって仕方ない

@AI_is_in_wonderland 11 ай бұрын

私の壁紙かわいいでしょ💓

@ltfr51hs6g 11 ай бұрын

insightfaceですが、FaceID初回使用時にインストされてるような気がします。自分はモデルとLoRAを入れただけですが、ちゃんと動作してる気がします。（気のせいだったらすいません）

@AI_is_in_wonderland 11 ай бұрын

最新版ではそうなっているのでしょうか？私はreactorの時にインストールされていたので検証できていません。

@坂崎ケンコ 11 ай бұрын

２次元、アニメ系の顔読ませたらそれも再現して生成してくれるんでしょうか、興味深いです

@AI_is_in_wonderland 11 ай бұрын

アニメ系は無理のようですね😨

@かにざ-g8m 11 ай бұрын

まだroopしか使ったことないのに時代が進化してた。覚えていく端から古くなっていくな

@AI_is_in_wonderland 11 ай бұрын

進化速いですよね💦

@ゼンツゲーミングガジェット 7 ай бұрын

とても参考になりました！forge版なのですが、extensionsフォルダの中にControlnetフォルダがありません。この場合ファイルはどこに入れたら良いのでしょうか？

@AI_is_in_wonderland 6 ай бұрын

コメントありがとうございます。あなたのディレクトリ\sd-webui-forge\webui_forge_cu121_torch21\webui\models\ControlNetに入れていただければよいと思います。

@word4you 11 ай бұрын

仮想環境にinsightfaceをインストするためには、Reactor に加えて　Visual Studioもインストしないとダメなのでしょうか？

@AI_is_in_wonderland 11 ай бұрын

visual studioも必要だと思います ReActorのインストール手順を追ってください✨

@word4you 11 ай бұрын

@@AI_is_in_wonderland さんありがとうございますm(__)m VS入れてやってみます。

@Blendarling 10 ай бұрын

マルチコントロールネットで、顔を混ぜることが出来たりするのでしょうか!?🤔･･･○○○ face,のような、顔の形を表すプロンプトは、相性が悪いので使わないほうがいいみたいです！😓

@AI_is_in_wonderland 10 ай бұрын

印象としてはかなり強く顔モデルの画像を引き継ぐようですので、混ぜるような使い方なら他のコントロールネットを使ったほうが良いかもしれませんね

@Blendarling 10 ай бұрын

CFGスケールは低めが良さそうですし、ディテールブーストLoRAの方も、弱めが良さそうです。まだ横顔とか泣き顔のような、特殊な顔も描けるのかも、わかりませんが、ここまで出来るのなら、次は衣装や背景の固定の機能も期待したいですね！

@romeojoje1568 2 ай бұрын

face id何度も試してるのですがあまり似てない人物の顔が生成されてしまいます… LORAの数値もcontrol weightも変えながら試してるのですが、うまくいきません😢 原因教えて頂けると幸いです！

@JPC-kb2yr 10 ай бұрын

Midjourneyのような美女すぎないアジア人を作りたいのですが、それに近くなるようなモデルが見当たりません、、。やはり今回の動画のようにipアダプターなどを使って1枚ずつ頑張るしかないのでしょうか？、、

@AI_is_in_wonderland 10 ай бұрын

チェックポイントの中では一般的な顔が出やすいものもあったと思います。bracing evomixなんかは良い気がします。また、ネガティブエンベッティングにbad dreamを使うとよいかもしれません。

@SEdge-y9o 2 ай бұрын

SD v1.１０.１でも使用できますか？

@銭形-o5n 11 ай бұрын

プリプロセッサが出てこない原因は分かりますか？ループもリアクターもインストール済みなので、インサイトフェイスの問題は無いかと思います。アップデートも行ってます

@AI_is_in_wonderland 11 ай бұрын

ver1.1.4以降は出るはずなのですが・・・ごめんなさい。ちょっと分かりません

@lll55lllgj 11 ай бұрын

なぜか全く機能しませんね… faceIDもLoraもちゃんと認識しているんですが… ReActorはかなりよく機能してるんで環境は出来てると思うんですが

@AI_is_in_wonderland 11 ай бұрын

残念です～🥺

@御伽草子-b2q 11 ай бұрын

自分も同じ状態でしたが、結果的に上手くいきました。動画の通りにしても機能しなかったので、最初からStableDiffusionを構築しなおしました。その際、まっさらの状態にcontrolnetだけを導入して、ip-adapterのファイルを指定のフォルダに入れたら、それだけで機能しました。 insightfaceは、controlnetに含まれているので、ReActorなどは不要ですね。多分、何か競合していて、上手く機能しなかったのかな。