Savior of Hand Corrections! How to Use Hand Refiner (Stable Diffusion)

[@eiri033]

分かりやすい動画をありがとうございます。 今まで、あまりKZbinでは情報収集してませんでしたが、 このチャンネルは有益な動画が多く非常に助かりました。 特に以下の点が良かったです！ ・実験・検証がツボを押さえていて有用性が抜きん出ている。 （自分で検証がいるかなと思ったところを、先回りで検証してくれているような感覚） ・文章の構成が理路整然としていて分かりやすい。 （無駄な言い回し、曖昧な表現がない。日本語として不自然なところがない。） ・動画を見やすく聞きやすくする工夫が多い。 （この三代目のボイスは個人的には非常に聞き取りやすい。） 長くてすみません、とにかく褒めたかったんです

[@AI_is_in_wonderland]

ありがとうございます！とてもうれしいコメントをたくさんありがとうございます これからも頑張ります！💖💖💖

[@RaulCabrera-r2s]

really good video! thanks for the video!

[@AI_is_in_wonderland]

Thank you so much for your kind words! I'm glad you enjoyed the video!

[@ai-studio-46]

情報ありがとうございます。手の不具合には苦戦していましたので、是非試してみたいと思います。

[@AI_is_in_wonderland]

コメントありがとうございます。ぜひトライしてみてください！

[@silvermoon7007]

素晴らしい機能の紹介、ありがとうございます。説明も分かりやすいです。

[@AI_is_in_wonderland]

コメントありがとうございます！うれしいです✨

[@aroanimas1479]

手の修正にはまだまだ悩まされますがこれは有効な方法かもしれませんね。 素人にやさしい丁寧な解説動画に感謝します。

[@AI_is_in_wonderland]

コメントありがとうございます！うれしいです

[@AIVVVVA]

最新情報のキャッチアップから情報展開が早くとても信頼のできるチャンネル。 いつもありがとうございます。 ComfyUIのHand detectと組み合わせればAuto Hand Fixが可能そうですね😤

[@AI_is_in_wonderland]

それはメンバー動画で配信します💖

[@半熟生太郎]

ありがとうございます。丁寧で、大変参考になりました！！！

[@AI_is_in_wonderland]

良かったです😄✨

[@hw4m-n6y]

いつも情報ありがとうございます。

[@AI_is_in_wonderland]

😄

[@dartois_tv]

手の修正といえばアリスさん...ですね！いよいよこれで手との戦いも決着した感じですね｡

[@AI_is_in_wonderland]

まだ完ぺきではないですが、工夫して使えばかなり良い機能だと思っています

[@jiraco7710]

大変参考になる説明ですが、何度生成しても手の修正部分に指のところに小さな顔が出現します。 プロンプトを書き換えたが良いのでしょうか？ またチャレンジします。ありがとうございました。

[@AI_is_in_wonderland]

コメントありがとうございます。チェックポイントにインペイントモデルを使用してみてください。プロンプトも手のプロンプト以外は入らないようにすると良いかもしれません。

[@あばす-e3i]

ユキちゃん一言も喋らなかった（笑） 手軽に手の修正が出来るのは本当にありがたい！

[@AI_is_in_wonderland]

ユキちゃん今日は出番なしでした💦 時々しゃべってもらいますね

[@takizawa1976]

いつも有益な情報をありがとうございます。リアル系ではほぼ修正できている感じですね。 イラスト系はもう少し調整が必要みたいですが、どちらにしても手の修正時間がかなり短縮されそうな印象ですね。

[@AI_is_in_wonderland]

コメントありがとうございます 工夫が必要だと思いますがうまく使えばイラストでも活用できそうですね

[@yama2non]

素晴らしい拡張機能だと思い、説明のとおりにインストールを試みましたが、以下の理由でうまく機能していないようです。 ・指定されたフォルダに、control_sd15_inpaint_depth_hand_fp16を入れて選択はできる状態ですが、画像を生成した後に深度マップが出ません。 ・他の方の質問の回答で、control_sd15_inpaint_depth_hand_fp16.safetensorsとhrnetv2_w64_imagenet_pretrained.pthの２つのファイルを指定のフォルダに入れる 　というのも試みましたが、解決しませんでした。 何か、ほかに対処法があれば教えていただけると有難いです。 また、既にアップスケールしてしまった画像には使えない機能なのでしょうか？

[@MrSongib]

Using inpaint model might help for anime, and you can make inpaint model from the main model separately as well if the creator of the model didn't make the Inpaint model itself.

[@AI_is_in_wonderland]

Thank you for the valuable information. I will check it out and share it with everyone. I really appreciate it.

[@MrChickenbeck]

いつも有益な情報ありがとうございます。 今回の動画に倣って試してみましたが、初回生成時にモデルのダウンロードが実行されず、マスクした手の部分に人物の顔が貼り付いた異形が誕生してしまいました😭 その後は何度試しても変わりません。 webui はv1.7で拡張機能は常に最新化している状態ですが、うまくいかない事もあるのですね。 仮想環境を作り直して再度挑戦してみます…

[@AI_is_in_wonderland]

他にも何人か動かない人がいるようですね。みんなモデルがダウンロードされないエラーの様です。少し待っていたら改善されるかもしれませんね。

[@edm5168]

stable matrixを使ってる人のほとんどは、パスの長さ制限でひっかかる人が多いかもしれないちんです。パスの長さ制限を解除するには、フォルダを移動する方法以外では、レジストリ設定からでもいけますちん。 方法は管理者権限でコマンドプロンプトを起動して以下のコマンドを実行するちん。 > reg add "HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\FileSystem" /t REG_DWORD /v LongPathsEnabled /d 1 /f あいちんはこれで使用することができましたちん！

[@AI_is_in_wonderland]

自分の環境では、正規のものがダウンロードされてしまうので試せていないのですが ハンドリファイナーのモデルがダウンロードできない場合の対処法です Xで窓際の鉛筆削りさん（@PvBXp6xWmrJqet3）に教えていただきました huggingface.co/hr16/ControlNet-HandRefiner-pruned/tree/main このページから control_sd15_inpaint_depth_hand_fp16.safetensors hrnetv2_w64_imagenet_pretrained.pth この二つをダウンロード C:\stablediffusion20230811\stable-diffusion-webui\extensions\sd-webui-controlnet\annotator\downloads\hand_refiner\hr16\ControlNet-HandRefiner-pruned このフォルダの中に入れる で解決するそうです 試してみて、上手くいったりダメだったらコメントください

[@AI_is_in_wonderland]

あいちん、情報ありがとうちん！

[@MrChickenbeck]

@@AI_is_in_wonderland 教えていただいたhuggingfaceのページから２ファイルをダウンロードして再起動した所、画像生成時にgraphormer_hand_state_dict.binの自動ダウンロードが行われた後、正しく手が生成されました。 ・プロンプト内でloraを使用していると正しく動作しないようなのでloraを消す必要がありました。 ・再描画した手の背後に人の顔が描かれてしまうことが時々ありますが、それはもうガチャですね。 迅速なご案内ありがとうございます。

[@mirai-m6h]

凄く勉強になりました。 手以外の部分の一部（ネックレス、ブレスレットetc）の一部のみをインペイントするときは コントロールネットのプロセッサとモデルは何にすればいいですか？

[@AI_is_in_wonderland]

コントロールネットは普通のインペイントでよいと思います。Inpaint anythingという拡張機能もありますが

[@mirai-m6h]

@@AI_is_in_wonderland プロセッサをdepth anthingではなく、 inpaint anythingの拡張機能を使うんですね？ 過去の動画もう１回見てみます！！ ありがとうございます。

[@岩田邦夫-v8k]

手の修正をするだけで、アチコチのパラメータを行ったり来たりが手間ですねー。パーツの修正用にプリセットが用意されて、すぐに切り替えられるようになったら良いのですが。

[@AI_is_in_wonderland]

手の修正は最も難しい課題の一つです。このhand refinerは結構画期的だと思います

[@祐志中村]

いつもわかりやすい動画、ありがとうございます。 質問なのですが、インペイントした部分が壊れた画像になるんですが、原因は何だと思いますか？ 動画通りにやっても上手くいかないのは、設定などに問題があるんでしょうか？回答いただけると幸いです。

[@AI_is_in_wonderland]

デノイジングストレングスなどにより画像が変化することもありますし、複雑な手の形はうまくいかないことがあります。色々な場合があるので一概には言えないと思います。

[@donkun9876]

久しぶりに見に来たら誰だおめえー！アリスちゃん関西住まいだったりする？ｗ それは置いといてこれは革命的ですね。色々すごくなっても手が苦手だけはずっと克服出来てなかったから完璧でなくとも少ないレタッチで修正出来る可能性があるだけでめちゃくちゃありがたい！ 後は自分はアニメメインなのでアニメ系に強くなってくれるともう完璧ですね。 もしかしたらマルチコントロールネットで他と併用すればうまくいく方法あるかもなので色々模索してみます。

[@AI_is_in_wonderland]

久しぶりに来てくれてありがとうございます✨こちらのアリスもよろしくお願いします!関西出てました? アニメ系でも工夫すればいけると思います😊 何か良い方法があったら教えてね!

[@msdshsk]

定期的にイライラして手の修正とか、ググってました。 KZbinのほうが情報展開がはやいの、全然気がつきませんでした。 素晴らしい情報ありがとうございます。たすかりました！

[@AI_is_in_wonderland]

コメントありがとうございます。このチャンネルは結構情報が早いので、フォローお願いします✨

[@msdshsk]

@@AI_is_in_wonderland 早速タメしてみたのですが、どうやら対象の手の大きさが大きくても小さくてもダメなようで、fullbodyで生成された画像は、高解像度修正済みのほうが、成功するようですね。

[@gamip5990]

手を書き直すときのプロンプトはどんな感じいいのでしょうか、使用したい画像のそのままのプロンプトではマスクしたところに新たに手ではなくプロンプト特有のイラストが出力される気がします。

[@AI_is_in_wonderland]

手を書く時のプロンプトは確かにシンプルなものにしたほうが良いと思います。女性（人物）の画像であることと、手に関するもの以外は省いても良いと思います。

[@ぶたまるのひまつぶし]

今日の修正でできました、ありがとうございます。しかし、手の深度マップのボタンがありません。これも何か入れるのでしょうか？

[@AI_is_in_wonderland]

手の深度マップのボタン？ ボタンはないですが

[@きんちゃん-o5x]

手の指の修正って、結構拡張機能で、できるけど、足の指って、修正むずかしいですね。 なにか、いい方法ないですかね？

[@AI_is_in_wonderland]

足は、あまり修正したことがなかったです。手描き要素が出ますが、krita ai diffusionを使う方法が一つの答えだと思います。

[@きんちゃん-o5x]

SD-WEB-UIだけでは、難しそうですね。足の指を出さないように、プロンプトで、靴下でもはかせるのがよさそうですね。SD-WEB-UIを、もう少し、自在に使えたら、試して位ですね。それと、なんかSD-WEB-UI　forgeというのがあるみたいです。なんでも生成速度と、VRAM消費が削減できるらしいです。

[@AI_is_in_wonderland]

@@きんちゃん-o5x ありがとうございます!forgeはすでに検証に入っています!

[@きんちゃん-o5x]

楽しみに、待ってますね@@AI_is_in_wonderland

[@tamkakit1233]

New avatar and voice?

[@TsukasaSugiyama]

機能としては動作しましたが、手持ちの画像ではきれいに修正されたかどうかで言うと悪化しました。特にアニメはひどいです。アニメだとDepthすらできない時がありました。ご参考までに。

[@AI_is_in_wonderland]

きれいに修正するにはいろいろな検証が必要だと思います。 アニメはなかなか難しそうですね

[@word4you]

ついに本命がキタ！？これは期待大ですね！ ということでやってみたら・・・うまく行かない(T_T) MODELのDLもしてないようですね。 きっと、自分のSDは1.6.0なのでアカンのでしょう？ VerUPして再チャレンジしてみますです。

[@word4you]

[追伸] SDを1.7にVerUPしてPCを再起動しましたが、 うーん、なんかアカンですね・・・😥 手の部分に画像全体の縮小イメージが張り付くみたいな感じに。 ￥extensions\sd-webui-controlnet\annotator\downloads\　の下に ￥refinerフォルダが作られていな～い これ最初の実行でモデルがDLされてないってことでしょうね？(T_T) ちなみに、SDフォルダはC:¥の直下にムーブしました。 controlnetは2024-01-06Verです。 GUIの設定が間違ってるのかしら??🤔

[@AI_is_in_wonderland]

他にも何人か動かない人がいるようですね。みんなモデルがダウンロードされないエラーの様です。少し待っていたら改善されるかもしれませんね。

[@AI_is_in_wonderland]

自分の環境では、正規のものがダウンロードされてしまうので試せていないのですが ハンドリファイナーのモデルがダウンロードできない場合の対処法です Xで窓際の鉛筆削りさん（@PvBXp6xWmrJqet3）に教えていただきました huggingface.co/hr16/ControlNet-HandRefiner-pruned/tree/main このページから control_sd15_inpaint_depth_hand_fp16.safetensors hrnetv2_w64_imagenet_pretrained.pth この二つをダウンロード C:\stablediffusion20230811\stable-diffusion-webui\extensions\sd-webui-controlnet\annotator\downloads\hand_refiner\hr16\ControlNet-HandRefiner-pruned このフォルダの中に入れる で解決するそうです 試してみて、上手くいったりダメだったらコメントください

[@word4you]

@@AI_is_in_wonderland さん おお！早速良い情報、ありがとうございますm(_ _)m 家に帰ったら試してみます(^^)/

[@word4you]

@@AI_is_in_wonderland さん 上記のフォルダを作って2つのファイルを入れてPC再起動してみましたが、 症状は変わらず、うまく描けません(+o+)

[@ヨーミン-q7j]

非常に期待の持てる情報ありがとうございます。 他の方も書いてますが最新のv17.0でモデルも入れて使ってみましたがエラーが出て深度マップが作られません。(inpaintの部分が手ではなく元々のプロンプトの指示のキャラクターを書き込んでしまいます) 元もCドライブ直下にフォルダを置いてますので今のところ手詰まりです。 新しい情報をお待ちしています。

[@AI_is_in_wonderland]

自分の環境では、正規のものがダウンロードされてしまうので試せていないのですが ハンドリファイナーのモデルがダウンロードできない場合の対処法です Xで窓際の鉛筆削りさん（@PvBXp6xWmrJqet3）に教えていただきました huggingface.co/hr16/ControlNet-HandRefiner-pruned/tree/main このページから control_sd15_inpaint_depth_hand_fp16.safetensors hrnetv2_w64_imagenet_pretrained.pth この二つをダウンロード C:\stablediffusion20230811\stable-diffusion-webui\extensions\sd-webui-controlnet\annotator\downloads\hand_refiner\hr16\ControlNet-HandRefiner-pruned このフォルダの中に入れる で解決するそうです 試してみて、上手くいったりダメだったらコメントください

[@ヨーミン-q7j]

追加の情報ありがとうございます。 downloads\hand_refiner\hr16\ControlNet-HandRefiner-pruned downloads以下のフォルダがなかったので↑のまま作成して指定されたダウンロードファイルを入れたら動きました。 これからガシガシ使って行こうと思います。ありがとうございます。

[@ruitanaka9922]

パーだけなの？

[@AI_is_in_wonderland]

パーだけでなく、グーやチョキもできますよ🎶

[@ruitanaka9922]

@@AI_is_in_wonderland ありがとうございます！