Перерисовка лица в FORGE используя Instant ID

Как перерисовать реальное лицо на фотографии?
Рекомендую смотреть полностью, чтобы понять логику работы.
Я использую FORGE.
Все подробности смотрите на видео.
00:00 - Начало
00:18 - Первая генерация
02:23 - Делаем лучше с IP adapter
03:20 - Исправление исходной фотографии для IP adapter
03:28 - Подправляю мелочи
04:00 - Вторая генерация, лицо боком
04:20 - 2 способа подправить если лицо натянулось плохо
04:25 - Первый способ
04:35 - Второй способ
04:52 - Сравнение
05:10 - Косяк (неидеальное разрешение фотографии)
05:33 - Подправление уже сгенерированого лица
06:00 - Сравнениие итоговых генераций разными методами
06:20 - Полная перерисовка головы
06:58 - Третья генерация
07:20 - Комбинируем способы
08:33 - Сравнения трех фотографий
09:00 - Четвертая генерация
09:43 - Добавляем деталей
10:05 - подправляю мелочи
10:15 - Сравниваю результат
10:35 - Бонус, быстрая перерисовка фона

[@intergalacticpassenger5911]

Полезное видео, но было бы лучше если поделился ссылками на модели ipadapter

[@DimaMebiusPC]

В прошлом видео уже было. Продублирую: на сегодняшний день я пользуюсь huggingface.co/h94/IP-Adapter/tree/main/sdxl_models . Для инстанта скачать и переименовать по инструкции github.com/Mikubill/sd-webui-controlnet/discussions/2589

[@user-lb6cy9sx3j]

Спасибо за видеоуроки!

[@pawall3deller468]

Зачетно🎉

[@abzaloff_ru]

Хорошая работа 👍

[@andreychernov1]

Спасибо за видеоурок! Способ замены лица выглядит классно.

[@DimaMebiusPC]

Рад стараться.Такой способ может удивить, если подобрать удачное фото

[@leoniddzhabiev]

хорошие у тебя видео, спасибо

[@DimaMebiusPC]

спасибо за ваш комментарий

[@GeGe-gg3zt]

спасибо!

[@ShuSerg101]

Отличный урок! Не подскажете каким расширением делается inpaint background? В стандартном Forge нет такой закладки.

[@DimaMebiusPC]

sd-webui-inpaint-background в поиске, или сразу по ссылке установить github.com/John-WL/sd-webui-inpaint-background.git

[@user-yk5gz8kc3e]

Ofigenno

[@knigiexpress]

Еще один комментарий от меня. Эта технология в forge лучше работает чем в automatic 1111. И еще момент очень много зависит от исходной картинки (лица которое хотите вставить). Соответственно и вес нужно подбирать везде разный.

[@DimaMebiusPC]

надо найти такую комбинацию, чтобы было похоже на неудачное фото

[@user-lb6cy9sx3j]

Можете еще сделать видеоурок по Soft inpainting в ForgeUi? 😊

[@DimaMebiusPC]

А что там особенного? Пока не приходилось туда даже заходить

[@user-hu3cb4rb5n]

Как вы сделали такую, не закреплёную, кнопку генерации?

[@DimaMebiusPC]

Вообще можно стартовать через ctrl+enter. А с кнопкой это моя фишечка, окно с генерацией тоже ездит. forge\webui\style.css в нем два окна отредактированы txt2img_generate drive.google.com/file/d/1163nSqn-D95RXPzMoTNDFc6XUSMEseHO/view?usp=sharing

[@user-hu3cb4rb5n]

@@DimaMebiusPC СПАСИБО, очень удобно!

[@pawall3deller468]

Может есть урок, как восстановить, добавить детали лица, кожи, морщины, глаза, с минималтными искажениями от оригинала?

[@DimaMebiusPC]

Такой способ есть, но он пока в зачаточном состоянии и требует видеокарту нвидия от 12гб. Есть просто вариант увеличить картинку без потерь, вам какой интересен?

[@pawall3deller468]

@@DimaMebiusPC Supir? Он пока только в CompyUI , в ноды лезть ре хочу, хватает блендера. Меня интересуют любые, действующие способы :) Мой рабочий диапазон разрешения 2к, 3к максимум, это для достаточной детализации, остальное апскейлиться. Главное восстановить лицо, одежду, детали. Ретушь, восстановление фотографий дело тонкое... Есть с ума сводящие примеры работ, как достигается такое качество, ума не приложу, по этому интересно, откуда берут такую детализацию, буквально до пор кожи, с восстановлением при этом без искажений оригинального лица.

[@DimaMebiusPC]

@@pawall3deller468 ну фактически только супир, но и он не идеален, поры не рисует. Кларити убивает узнаваемость, супир апскейлит только из 512 пикселей, тайловый апскейл в Форже не добавляет деталей) Тяжко с пОрами на коже. Надеюсь супир интегрируют в форж со временем, у меня комфи только ради него, на неделю выпал из жизни с ним)

[@pawall3deller468]

​@@DimaMebiusPC да, ноды слишком жосткая система для узких направлений, нужно быть маньяком программирования) Может это делается с хирезом и морфится? Или какие то лоры так умеют? У меня а1111, хз как в имдж2имдж хирез использовать. У тебя есть свой канал в тг?

[@DimaMebiusPC]

​@@pawall3deller468создал канал. В имг2имг самое нижнее меню в списке , там апскейл. Я пробовал обычное фото с 4000 до 1000 ужать фотошопом, и потом разжать апскейлом, 1 в 1 почти выходит. Но в любом случае пока нельзя дорисовать поры на лице, не попортив всю фотографию. А тем более нельзя проапскейлить из 400 пикселей, там будет 90% отсебятины

[@user-lb6cy9sx3j]

Привет😊

[@DimaMebiusPC]

Добро пожаловать на премьеру

[@user-kr9iw6cv8x]

В последнее время SD разных версий и на разных компах часто стал "шуметь" - делает сепию, шум. Что бы от этого избавиться надо перезапускать SD, но глюк всё равно вылезает снова, частота его появления рандомная. Никто с этим не сталкивался?

[@DimaMebiusPC]

у меня было несколько раз просто разноцветная картинка на выходе. Всегда причиной оказывалась галочка в контролнете не выключеная. Но так чтобы изображение портилось - не припомю

[@user-kr9iw6cv8x]

@@DimaMebiusPC в каком контроллере? Я пробовал "Kohya Hires.fix" выключать, пробовал "Dynamic Thresholding" выключать и "ADetailer" тоже... Глюк вылезает что ни делай. Причём не всегда это приводит к абсолютной пиксельной анархии, порой даже какое-то изображение сформировывается... Хз что делать, в тырнете не нашёл подобных проблем (или искал херово)😕

[@DimaMebiusPC]

@@user-kr9iw6cv8x вот так выглядит или нет? кстати еще можно считать метаданные в файле с шумом, может вдруг увидите что вмешивается в генерацию. Или выложите где-нибудь такой файл в родном png, я бы посмотрел. drive.google.com/file/d/1JJY_t8wxvsZmQ5QjHkleXYkJoKzzGZ5F

[@maxim_kuprikov]

У меня такая проблема тоже. Без ControlNet идеальное качество генерации. А с включённым именно InstantID фото становится плохого качества и перенасышенная. Вот смотрю, к у автора видео всё в порядке. В интернете пишут, что это в только в Forge так. Но и в automatic такая же история. Если найдёте решение напишите пожалуйста. Я тоже если решу сюда вернусь.

[@DimaMebiusPC]

@@maxim_kuprikov проверяйте настройки: сколько шагов. сколько cfg, какая модель выбрана и семплер. можете даже мне картинку отправить сгенерированую, я посмотрю внутри ее настройки ваши

[@knigiexpress]

у меня вообще не похоже лицо, не пойму почему((

[@DimaMebiusPC]

пробуйте другие фотографии, проверяйте настройки, должно получиться

[@knigiexpress]

​@@DimaMebiusPCбуду пробовать, очень хочется чтобы получилось.

[@knigiexpress]

​@@DimaMebiusPCа какая модель стоит у вас ? Может она так влияет, я на джигернауте делал

[@DimaMebiusPC]

@@knigiexpress в двух видео по инстанту все обяснено, и модели какие я использую, и настройки. Джагер я вообще не уважаю, оттолкнитесь от моих настроек, и все получится

[@knigiexpress]

​@@DimaMebiusPCспасибо)