Мастерим LoRA с моделью FLUX в ComfyUI: потрясающие результаты!

Погрузитесь глубже в мир ComfyUI с этим захватывающим уроком, где мы исследуем мощную новую модель FLUX и интегрируем её с LoRA (Low-Rank Adaptation). Узнайте, как мы разблокируем передовые функции, добавляя и настраивая новые узлы, наблюдая их сложные взаимодействия и создавая оптимизированный рабочий процесс, который обеспечивает потрясающие визуальные результаты.
В этом видео вы узнаете:
Как интегрировать модель FLUX в вашу среду ComfyUI.
Технические преимущества использования LoRA для эффективной доработки и творческой гибкости.
Лучшие практики по добавлению и настройке новых узлов для максимальной эффективности рабочего процесса.
Пошаговые методы достижения высококачественных и визуально впечатляющих результатов.
Будь вы опытным пользователем или только начинаете работать с ComfyUI, это видео наполнено полезными советами, техническими рекомендациями и творческим вдохновением. Не забудьте поставить лайк, подписаться на канал и нажать на колокольчик, чтобы не пропустить углубленные уроки по ComfyUI, Stable Diffusion и возможностям творчества с использованием ИИ!
Flux model: huggingface.co...
Flux Loras: huggingface.co...
#ComfyUI #FLUXModel #LoRA #AICreativity #StableDiffusion #WorkflowOptimization #DigitalArtTips
My store: geekatplay.gum...
Patreon: / geekatplay
My stuff: www.amazon.com...
www.geekatplay...

[@EscanderSBV]

Это самый полезный канал на который я подписался в этом году! Спасибо! Рад что вас нашел! Смотрю ВСЁ!

[@geekatplay-ru]

Спасибо огромное за такие теплые слова! 😊 Очень рад, что канал оказался полезным и интересным для вас! Постараюсь продолжать радовать вас качественным контентом. Если есть темы, которые хотите видеть в будущих видео, обязательно дайте знать! 🙌🎥

[@ВасилийСлонов]

Только вчера наткнулся на Ваш канал. Пока информации о ComfyUI более доступно и комплексно ни у кого не видел. Думал голова лопнет, пока по крупицам буду собирать информацию что для чего и в какую папку копировать. Вчера смотрел Ваше видео о начале работы с ComfyUI, приготовился ожидать дальнейшие видео, а сегодня уже новое. Благодарю Вас за моё сохраненное время. Подписался, лайки прожал)

[@geekatplay-ru]

Спасибо большое за теплые слова и поддержку! Рад, что мои видео помогают разобраться с ComfyUI и экономят вам время. Буду стараться продолжать в том же духе, чтобы информация была доступной и полезной. Новые видео уже в процессе, так что следите за обновлениями - впереди еще много интересного! 😊

[@K-A_Z_A-K_S_URALA]

не он толковый и грамотный дядька я давно подписан год точно ..

[@ARTT0M]

Thanks! Вам , вашим близким и всем - всем! С наступающими новым годом! Рождеством и всеми всеми праздниками! 🎄❄️⛄🎅🎉 Крепкого Здравия 💪, МИРА 🕊️, вдохновения и денежек побольше 💰💰💰

[@geekatplay-ru]

Спасибо огромное за такие теплые пожелания! 🎄❄️⛄ Вас, ваших близких и всех-всех тоже с наступающим Новым годом и Рождеством! 🎅🎉 Пусть здоровье будет крепким 💪, в душе будет мир и гармония 🕊️, вдохновение не покидает, а денежки 💰💰💰 всегда будут радовать! Пусть новый год принесет только счастье и удачу! 🥳✨🎁

[@sevload5609]

После SD или Fooocus, работа с Comfy выглядит как первый раз в самолете Спасибо за гайд!

[@geekatplay-ru]

Согласен, ComfyUI - это полёт на самолёте для тех, кто привык к более простым инструментам!

[@SVOYA_ATMOSFERA_]

Супер, спасибо 👍

[@geekatplay-ru]

Спасибо за ваш отзыв! Рад, что вам понравилось! 👍😊

[@willbe5426]

Супер, благодарю. Все доходчиво и понятно !!

[@geekatplay-ru]

Спасибо большое! 😊 Рад, что всё оказалось понятным и полезным. Если будут ещё вопросы, обращайтесь! 🙌✨

[@sharksgangs]

спасибо, очень полезное видео

[@geekatplay-ru]

Спасибо большое! Рад, что видео оказалось полезным! 😊 Если будут еще вопросы или темы, которые хотелось бы разобрать, дайте знать. Буду рад помочь! 🙌

[@chitavideoa3751]

Спасибо Вам большое за уроки! А есть возможность небольшое видео сделать по редактированию путей к моделям из других директорий? А то на видео не получается текст разобрать. Может по загрузке своих шаблонов с миниатюрами в Браузер Темплейт?

[@geekatplay-ru]

Спасибо большое за отзыв! Отличная идея, я обязательно запишу видео о том, как редактировать пути к моделям из других директорий, и покажу процесс пошагово. Также добавлю про загрузку своих шаблонов с миниатюрами в Браузер Темплейт. Постараюсь сделать это максимально подробно и понятно. Следите за обновлениями!

[@Victor_Ivanovsky]

Владимир, благодарю за урок, использовал при первом запуске FLUX. Стала ли для вас AI-генерация/редактирования изображения серьезным увлечением, как фотография, или 3D? Или вы пока присматриваетесь к новому инструменту (AI)? Миру - мир, солдату - дембель. Мне - ваше следующее видео.

[@geekatplay-ru]

Спасибо за ваш отзыв и отличный вопрос! 😊 AI-генерация и редактирование изображений стали для меня чем-то средним между увлечением и рабочим инструментом. Как фотография и 3D, это невероятно вдохновляющая область, но всё ещё новое и развивающееся. Пока присматриваюсь, изучаю и тестирую, но уже вижу огромный потенциал для творчества и работы. Ваши слова зарядили позитивом! 😊 Миру - мир, солдату - дембель, а вам - новое видео совсем скоро! 🚀✨

[@qlpdlb2319]

Тык, Anime (* ^ ω ^), вышло💁‍♂

[@qwetry-j2u]

Большое спасибо за столь доходчивое объяснение! Скажите, пожалуйста, а если я хочу, чтобы на моем сгенерированном изображении был какой-то вполне конкретный объект из реального мира (т.е. определенная картина на стене или определенная статуэтка на столе и т.п.) - как быть в этом случае? Тоже делать серию фотографий этого предмета и тренировать лору на них? Или, может быть, есть более простой и быстрый способ?

[@geekatplay-ru]

Большое спасибо за ваш вопрос! 😊 Да, если вы хотите, чтобы на сгенерированном изображении появился конкретный объект, то обучение LoRA на серии фотографий этого предмета действительно будет наиболее точным способом. Для этого сделайте 20-30 снимков объекта под разными углами и с хорошим освещением, а затем используйте эти фотографии для тренировки. Если же обучение кажется слишком трудоемким, есть более быстрый способ - попробовать использовать ControlNet или Inpainting. С помощью ControlNet вы можете загрузить изображение вашего объекта, чтобы AI учитывал его при генерации. А Inpainting позволяет "вписать" объект в уже готовую сцену. Однако точность и реализм в этом случае могут зависеть от сложности задачи и качества исходного изображения. Если потребуется подробный гайд по этим методам, дайте знать - могу сделать отдельное видео! 😊

[@qwetry-j2u]

@@geekatplay-ru О, да, такой гайд (особенно по различным технологиям inpaint-а) был бы очень кстати! Буду ждать с нетерпением :)

[@alieksandrchehovich4750]

Спасибо огромное вам за вашу работу часто вас смотрю, много вопросов и много чего ещё не получается не давно только занялся генерациями, комфи , это непростая оболочка, и тут как раз именно про флакс лору гайд, за 15 минут по вашему гайку все получилось, и тут вопрос назрел, у меня лора с персонажем, а есть ли возможность подключить 2 лоры с персонажем, или добиться получения 2 ух персонажей на одном изображении? Не важно будет это лора из моделей флюкса или из стейбл дифужна, метод интересует , с этим вопросом огромная морока началась, как получить двух персонажей, и в каком интерфейсе , на одном изображении

[@geekatplay-ru]

Спасибо вам за тёплые слова, очень приятно знать, что мои гайды помогают! 😊 Что касается вашего вопроса о генерации двух персонажей на одном изображении с использованием двух LoRA: Использование двух LoRA в ComfyUI: В ComfyUI можно подключить несколько LoRA одновременно. Для этого нужно: Загрузить обе LoRA через LoraLoader. Настроить их веса (сила влияния) индивидуально, чтобы они не конфликтовали друг с другом. Подключить эти LoRA к одной и той же модели, с которой вы работаете. Генерация двух персонажей на одном изображении: Метод 1: Разделение сцен по текстовым промптам. Используйте описания для каждого персонажа в разных частях изображения. Например: "Слева стоит молодой человек в синей одежде, справа девушка в красном платье." Точно опишите действия и внешний вид каждого персонажа. Метод 2: ControlNet или сегментация. Если вы работаете с ControlNet, можно подготовить маски или использовать дополнительные гайды, чтобы задать расположение персонажей. Советы для работы с LoRA: Если LoRA "забивают" друг друга, попробуйте уменьшить их силу (например, с 1.0 до 0.6). Используйте negative prompt, чтобы избежать нежелательных конфликтов (например, если один LoRA добавляет лишние детали, которые не нужны). Интерфейсы для работы: ComfyUI: Здесь можно гибко настраивать ноды и вручную добавлять несколько LoRA. AUTOMATIC1111 (Stable Diffusion WebUI): Поддерживает работу с несколькими LoRA одновременно, есть удобный интерфейс для регулировки их веса. Если останутся вопросы, или понадобится пример рабочего графа для ComfyUI, дайте знать - всегда рад помочь! Удачи с генерацией! 😊

[@alieksandrchehovich4750]

@@geekatplay-ru огромное спасибо за ответ, задали направление -буду разбираться ну и ждать видео от вас по любым темам, сколько не смотрю всякого, но лучше вашего пока что ничего не нашол

[@K-A_Z_A-K_S_URALA]

15::00 вы прописываете названия моделей лора а менять в загрузках load не нужно? у вас там все это время анимэ лора?!

[@geekatplay-ru]

Спасибо за комментарий! Да, в prompt обязательно нужно указывать точное название модели LoRA, чтобы она корректно применялась. В загрузках (load) менять ничего не нужно, если вы заранее настроили правильную модель. Что касается аниме LoRA, да, она была загружена всё это время, но ключевое - это использование точной ссылки на неё в prompt. Если есть вопросы или хотите уточнить детали, пишите! 😊

[@K-A_Z_A-K_S_URALA]

@@geekatplay-ru вопрос почему только работает в sampler euler и все другие только черный квадрат генерят...

[@НастяНовикова-ж6т]

Правой кнопкой на названии лоры в строке загрузчика лоры тыкайте и получите информацию о лоре, где можно считать все ключевые слова, по которым данная лора тренировалась.

[@geekatplay-ru]

Отличный совет, спасибо за дополнение! 🎯 Это действительно полезная функция, особенно когда нужно понять, какие ключевые слова лучше использовать для конкретной LoRA. Это помогает добиться максимального качества и точности при генерации. Благодарю за подсказку, уверен, многим это пригодится! 😊

[@inqvisitor3722]

@@yuriycherkashin6880 тоже не нашел

[@PlayGameToday]

Привет, Вы Владимир Чопайн? Vladimir Chopine? Канал назывался раньше по-другому, вроде бы. Я был подписан на Вас

[@geekatplay-ru]

Канал действительно раньше назывался иначе, возможно, вы подписаны на Geekatplay Studio или другой из моих проектов. Рад, что вы со мной!

[@iHudo3D]

чет я не догнал, вы меняете описание в промте для лоры, но не меняете саму лору в ноде ? как это работает?

[@geekatplay-ru]

Хороший вопрос! На самом деле, в ComfyUI, если вы меняете описание в промпте для LoRA, но не заменяете саму LoRA в ноде, то изменения касаются только того, как модель будет интерпретировать заданные параметры. LoRA, подключенная в ноде, остается активной и используется в пайплайне. Проще говоря, описание в промпте служит для настройки веса и влияния LoRA, но сама LoRA, подключенная в ноде, определяет, какие данные и стили она добавляет к генерации. Если хотите изменить саму LoRA, нужно заменить файл или ноду, чтобы использовать другую модель. Если что-то непонятно или нужно показать на примере, дайте знать, я могу сделать об этом подробное объяснение! 😊

[@Midzay]

Использовал информацию по конфигурации путей. Не сразу, но запустил: наверное в пути надо учитывать регистр буквы для диска "С". В общем - запустил. Что дальше: буду изучать инпаинт, контролнет, апскейл. Вопрос: Владимир, вы "щупали" SD3.5? Неужели FLUX перехватил инициативу у SD лучшим качеством? Удивляет, что после выхода FLUX о SD как будто вовсе забыли. Что вы думаете?

[@geekatplay-ru]

Отлично, что удалось запустить! 😊 Насчёт регистра буквы диска - да, это может быть важным нюансом, особенно в Windows. Удачи в изучении инпейнта, ControlNet и апскейла - это действительно мощные инструменты для творчества! По поводу SD 3.5 и FLUX: Да, я "щупал" SD 3.5, и он, безусловно, хорош, особенно с точки зрения стабильности и совместимости. Но FLUX действительно удивил качеством и возможностями, особенно в работе с LoRA и генерацией деталей. Такое впечатление, что он специально создан для тех, кто ищет больше точности и контроля в результате. Кажется, что FLUX захватил внимание именно благодаря своему "пользовательскому" подходу и качеству рендеров, но я уверен, что SD ещё покажет себя, особенно с развитием своих новых версий. Спасибо за интересный вопрос!

[@pacostydio]

Спасибо за видео👍👍👍 Я только начинаю учится работать с ComfyUi, у меня нет мощного компьютера, подскажите какое железо должно быть что б комфортно работать в данной программе!?

[@geekatplay-ru]

Спасибо за ваш отзыв! 👍😊 Рад, что видео оказалось полезным! Для комфортной работы с ComfyUI желательно иметь достаточно мощный компьютер, особенно если вы планируете работать с высокими разрешениями и сложными пайплайнами. Вот минимальные и рекомендованные параметры для железа: Минимальные требования: GPU: Видеокарта с поддержкой CUDA (например, NVIDIA GTX 1060 с 6 ГБ памяти). Чем больше видеопамяти, тем лучше. CPU: Современный процессор с 4+ ядрами (например, Intel i5 или AMD Ryzen 5). RAM: 16 ГБ оперативной памяти. Хранилище: SSD-диск для быстрого доступа к данным. Рекомендованные параметры: GPU: NVIDIA RTX 3060 (12 ГБ VRAM) или выше. Для комфортной работы с большими моделями или высоким разрешением лучше RTX 3080/3090 или даже 40-й серии. CPU: Процессор с 6-8 ядрами (например, Intel i7 или AMD Ryzen 7). RAM: 32 ГБ, чтобы избежать перегрузок, особенно при работе с большими моделями. Хранилище: NVMe SSD, чтобы ускорить загрузку моделей и текстур. Если у вас сейчас нет мощного компьютера, можете попробовать использовать облачные сервисы, такие как Google Colab или аренду GPU на платформах типа Paperspace. Это хорошее решение для старта и изучения программы без значительных затрат на железо.

[@pacostydio]

@@geekatplay-ru огромное спасибо шеф!

[@78diki]

Так а чего в загрузчике Лор только первый раз выбрали лору? А потом она оставалась та же в последующих генерациях. И для флакса еще нужно подключать text encoder

[@geekatplay-ru]

Отличное замечание! В загрузчике LoRA, если вы выбрали модель один раз, она остается активной для последующих генераций, пока вы явно не замените её в ноде. Это удобно, если вы работаете с одной и той же LoRA в серии экспериментов. Однако, если хотите изменить LoRA для новых генераций, нужно снова зайти в загрузчик и выбрать другую модель. Что касается Flux и необходимости подключения Text Encoder - это действительно важно. Flux часто требует, чтобы Text Encoder был явно подключен, иначе модель может неправильно интерпретировать изменения в промпте. Без Text Encoder некоторые нюансы LoRA могут потеряться, особенно если вы используете сложные стили или специфические данные.

[@78diki]

@@geekatplay-ru спасибо за ответ. Столько нюансов... И все тонкости все равно невозможно учесть) Но будем стремиться)

[@leizer1876]

Здравствуйте, у вас очень хорошие видео но, как я понял вы снимаете на большом расширении, поэтому в видео все кажеться маленьким и тяжело читаемым. Советую во время монтажа зумить те у частки о которых вы расказываете.

[@geekatplay-ru]

Здравствуйте! 😊 Спасибо за ваш отзыв и совет! Вы абсолютно правы, иногда мелкие детали могут быть плохо видны. В будущем постараюсь добавлять увеличение тех частей интерфейса, о которых рассказываю, чтобы было легче воспринимать информацию. Спасибо за замечание, это очень помогает сделать контент лучше! 🚀✨

[@K-A_Z_A-K_S_URALA]

я хорошо все вижу может монитор большой)))

[@3dsalavat]

Владимир, спасибо за урок! Можете пожалуйста подсказать, вы работали с Dreamboth? Мне посоветовали обучать Lora и Chekpoint через Dreamboth, и сказали что это можно делать в Kohya_ss. Я только не понял как все это вместе связать, Kohya_ss я установил, а как использовать Dreamboth не понял. В интернете пишут что его можно установить как плагин в a1111. Можно ли его установить в ComfyUI? Извините за сумбур заранее, только начал осваивать эту тему, спасибо что помогаете лучше вкуривать сложную тему!

[@geekatplay-ru]

спасибо за ваш комментарий! Да, я работал с Dreambooth и сделал видео об этом на моем другом канале @geekatplay, но планирую также сделать больше видео на эту тему на этом канале. Что касается вашего вопроса: обучать LoRA и Checkpoint через Dreambooth можно, и использование Kohya_ss для этого действительно удобный вариант. Для работы с Dreambooth в Automatic1111 (A1111) он действительно доступен как плагин, который вы можете установить через раздел Extensions. Однако в ComfyUI Dreambooth напрямую пока не интегрирован как отдельный инструмент. ComfyUI больше подходит для работы с графическими пайплайнами и кастомными процессами генерации изображений, а не для тренировки моделей. Для интеграции вам нужно будет вручную соединить результаты, полученные через Dreambooth, с вашим пайплайном в ComfyUI. Если вы только начинаете разбираться, могу порекомендовать сосредоточиться на Kohya_ss, так как он интуитивно понятен для обучения моделей, а затем экспериментировать с другими платформами. Если у вас будут вопросы или проблемы, пишите, постараюсь помочь! 😊

[@3dsalavat]

​@@geekatplay-ru Спасибо за ваш ответ! Подскажите, пожалуйста, название видео, где вы работали с Dreambooth, не смог его найти на вашем другом канале. Я правильно понимаю, что Dreamboth можно отдельно установить от пользовательских интерфейсов и Kohya_ss?

[@geekatplay-ru]

Я только что проверил, и действительно удалил это видео, потому что техника перестала работать после обновления в Automatic1111. Мне нужно записать новое видео с обновленной информацией. Спасибо, что указали на это.

[@ИеронимФонМюнхгаузен]

Контролнет работает?

[@geekatplay-ru]

Да, об этом в следующем видео.

[@ИеронимФонМюнхгаузен]

@@geekatplay-ru ура. Ждём

[@date2077]

Работа с Lora в Comfy реализована максимально неудобно. Я не понимаю почему все молчат. Почему никто не сделал ноду которая объединяет загрузчик Lora и Clip, тем самым передавая триггер в промпт.

[@geekatplay-ru]

Согласен, работа с LoRA в Comfy действительно оставляет желать лучшего в плане удобства. Этот процесс можно было бы упростить, создав такую ноду, как вы описали, которая объединяет загрузчик LoRA и Clip и автоматически передаёт триггер в промпт. Почему все молчат? Возможно, просто не хватает энтузиастов, готовых взяться за реализацию этой идеи, или разработчики сосредоточены на других задачах. Это явно нужный шаг для улучшения UX. Надеюсь, со временем такая функция появится - либо через обновление, либо благодаря сообществу. Если у вас есть предложения по реализации, делитесь! Это точно поможет многим. 😊🚀

[@StPaaty]

ERROR: Could not detect model type of: C:\__ComfyUI\ComfyUI_windows_portable\ComfyUI\models\checkpoints\flux1-dev-fp8.safetensors фал flux1-dev-fp8.safetensors лежит в папке checkpoints, но все равно ошибка

[@geekatplay-ru]

Проблема может быть связана с несколькими факторами. Попробуйте следующее: Проверьте версию ComfyUI - Возможно, ваша версия не поддерживает этот формат модели. Обновите ComfyUI и проверьте снова. Переименуйте файл - Иногда длинные или сложные имена могут вызывать ошибки. Попробуйте переименовать flux1-dev-fp8.safetensors в что-то попроще, например, flux1.safetensors. Переместите модель в другое место - Попробуйте положить её в другую папку (models/Stable-diffusion вместо checkpoints). Некоторые модели работают только из основного каталога моделей. Проверьте формат файла - Убедитесь, что скачанный файл не повреждён. Можно попробовать открыть его с помощью safetensors в Python: from safetensors.torch import load_file model = load_file("flux1-dev-fp8.safetensors") print(model.keys()) Если файл повреждён, попробуйте перескачать его. Запустите ComfyUI с параметрами отладки - Попробуйте запустить с --lowvram или --disable-torch-inductor, это может помочь в некоторых случаях.