最強の顔認識機能、FaceIDをstable diffusionで使う

Рет қаралды 22,687

AI is in wonderland

Күн бұрын

Пікірлер: 40

@kusoueiai 7 ай бұрын

顔を固定する方法を探していたのでとても参考になりました。素敵な解説ありがとうございます💖

@AI_is_in_wonderland 7 ай бұрын

コメントありがとうございます。お役に立ててうれしいです😊

@superoki 9 ай бұрын

使ってみました。単純に顔だけが変わるかと思いましたが、いい感じにポーズも変更してくれるのがすごいですね！また、楽しみが広がりました。顔素材のLoRAと併用したらどうなるのか検証中です。紹介していただいてありがとうございました。

@AI_is_in_wonderland 9 ай бұрын

コメントありがとうございます。全体の画風なども引っ張られるようですね。結構面白いですね

@unako333 9 ай бұрын

『美女ではない画像』で笑いました。機能紹介ありがとうございます♪

@AI_is_in_wonderland 9 ай бұрын

世界のUNAKOさん、コメントありがとうございます。美女ではないは失礼でしたかね🤭

@sci_worlds 9 ай бұрын

ControlNet情報は少ないので動画助かります！アニメ調のイラストではやはりエラーが出ました。入力画像はリアルまたはセミリアル向けのようですね。

@AI_is_in_wonderland 9 ай бұрын

insightfaceはアニメに対応していないようですね

@shinjisaito5848 9 ай бұрын

有益な情報ありがとうございます。確かに実写系では生成結果が美化されがちなモデルが多いなか、モデルを変えずにこれは凄いですね。西洋系のモデルで東洋系の顔が自然に生成されるのも強いです。ただ、Hires.fixやADetailerの過程で、モデルに引っ張られるところはありそうなので、モデル選びが重要なのは変わりはなさそうですかね。再限度が思わしくない場合は、顔LoRAも組み合わてみたりするなど、いろいろ遊べそうです。

@AI_is_in_wonderland 9 ай бұрын

Hires.fixのでノイズを強くすると利きが悪くなるかもしれませんね。Adetailerはまだ試していませんが、コントロールネットの後に働くので顔が戻ってしまうかも

@katoriyamada 9 ай бұрын

これだけ楽に顔再現が可能になると、リアル系の顔LoRAとか作る意味なくなるかもしれないですね。SDXLでの性能はちょっと「あれ？」と感じますが、1.5系では顔再現機能として完成の域に達している気がします。生成で使うと優秀なLoRAもインペイントで使うと再現性かなり下がるんですが、このコントロールネットがそこも克服していたら学習データの作成でも強力なツールになりそうですね

@AI_is_in_wonderland 9 ай бұрын

まさに顔LoRA不要説ありますね！この機能は静止画像作るときは最強だと思います😆

@かにざ-g8m 9 ай бұрын

まだroopしか使ったことないのに時代が進化してた。覚えていく端から古くなっていくな

@AI_is_in_wonderland 9 ай бұрын

進化速いですよね💦

@春日恵理-o5z 9 ай бұрын

わんこが気になって仕方ない

@AI_is_in_wonderland 9 ай бұрын

私の壁紙かわいいでしょ💓

@ゼンツゲーミングガジェット 4 ай бұрын

とても参考になりました！forge版なのですが、extensionsフォルダの中にControlnetフォルダがありません。この場合ファイルはどこに入れたら良いのでしょうか？

@AI_is_in_wonderland 4 ай бұрын

コメントありがとうございます。あなたのディレクトリ\sd-webui-forge\webui_forge_cu121_torch21\webui\models\ControlNetに入れていただければよいと思います。

@坂崎ケンコ 9 ай бұрын

２次元、アニメ系の顔読ませたらそれも再現して生成してくれるんでしょうか、興味深いです

@AI_is_in_wonderland 9 ай бұрын

アニメ系は無理のようですね😨

@word4you 9 ай бұрын

仮想環境にinsightfaceをインストするためには、Reactor に加えて　Visual Studioもインストしないとダメなのでしょうか？

@AI_is_in_wonderland 9 ай бұрын

visual studioも必要だと思います ReActorのインストール手順を追ってください✨

@word4you 9 ай бұрын

@@AI_is_in_wonderland さんありがとうございますm(__)m VS入れてやってみます。

@romeojoje1568 3 күн бұрын

face id何度も試してるのですがあまり似てない人物の顔が生成されてしまいます… LORAの数値もcontrol weightも変えながら試してるのですが、うまくいきません😢 原因教えて頂けると幸いです！

@SEdge-y9o 3 күн бұрын

SD v1.１０.１でも使用できますか？

@銭形-o5n 9 ай бұрын

プリプロセッサが出てこない原因は分かりますか？ループもリアクターもインストール済みなので、インサイトフェイスの問題は無いかと思います。アップデートも行ってます

@AI_is_in_wonderland 9 ай бұрын

ver1.1.4以降は出るはずなのですが・・・ごめんなさい。ちょっと分かりません

@Blendarling 8 ай бұрын

マルチコントロールネットで、顔を混ぜることが出来たりするのでしょうか!?🤔･･･○○○ face,のような、顔の形を表すプロンプトは、相性が悪いので使わないほうがいいみたいです！😓

@AI_is_in_wonderland 7 ай бұрын

印象としてはかなり強く顔モデルの画像を引き継ぐようですので、混ぜるような使い方なら他のコントロールネットを使ったほうが良いかもしれませんね

@Blendarling 7 ай бұрын

CFGスケールは低めが良さそうですし、ディテールブーストLoRAの方も、弱めが良さそうです。まだ横顔とか泣き顔のような、特殊な顔も描けるのかも、わかりませんが、ここまで出来るのなら、次は衣装や背景の固定の機能も期待したいですね！

@JPC-kb2yr 7 ай бұрын

Midjourneyのような美女すぎないアジア人を作りたいのですが、それに近くなるようなモデルが見当たりません、、。やはり今回の動画のようにipアダプターなどを使って1枚ずつ頑張るしかないのでしょうか？、、

@AI_is_in_wonderland 7 ай бұрын

チェックポイントの中では一般的な顔が出やすいものもあったと思います。bracing evomixなんかは良い気がします。また、ネガティブエンベッティングにbad dreamを使うとよいかもしれません。

@ltfr51hs6g 9 ай бұрын

insightfaceですが、FaceID初回使用時にインストされてるような気がします。自分はモデルとLoRAを入れただけですが、ちゃんと動作してる気がします。（気のせいだったらすいません）

@AI_is_in_wonderland 9 ай бұрын

最新版ではそうなっているのでしょうか？私はreactorの時にインストールされていたので検証できていません。

@CrimsonRedJP 9 ай бұрын

フェイススワップはされてるけど顔の比率とか首の長さとか露骨におかしい気はする

@AI_is_in_wonderland 9 ай бұрын

たしかに元の絵とずれる部分が出る場合もありますね。特にSDXLはちょっとおかしくなりやすいですね。

@lll55lllgj 9 ай бұрын

なぜか全く機能しませんね… faceIDもLoraもちゃんと認識しているんですが… ReActorはかなりよく機能してるんで環境は出来てると思うんですが

@AI_is_in_wonderland 8 ай бұрын

残念です～🥺

@御伽草子-b2q 8 ай бұрын

自分も同じ状態でしたが、結果的に上手くいきました。動画の通りにしても機能しなかったので、最初からStableDiffusionを構築しなおしました。その際、まっさらの状態にcontrolnetだけを導入して、ip-adapterのファイルを指定のフォルダに入れたら、それだけで機能しました。 insightfaceは、controlnetに含まれているので、ReActorなどは不要ですね。多分、何か競合していて、上手く機能しなかったのかな。