Stable Cascade - это Stable Diffusion на стероидах, локальная установка

Это очень впечатляющий новый генератор ИИ от Stability.ai.
Стабильная диффузия на массовых стероидах, большие рендеры, сверхбыстрая скорость и впечатляющее качество.
Ресурсы:
stability.ai/news/introducing...
openreview.net/forum?id=gU58d...
github.com/Stability-AI/Stabl...
pinokio.computer/

[@magistrral6002]

Спасибо за ваши знания, и очень подробное объяснение к их применению.

[@slyjpg]

Спасибо за видео! Очень приятное и понятное повествование

[@user-mp3bp4py6k]

только нудное и чересчур долгое...

[@IgorBahov]

спасибо за обзор с грамотным объяснением

[@AeroGameCenter]

Красиво говорите! 😊 Хороший канал!

[@CrazyPCman]

Интересную вещь придумали!

[@geekatplay-ru]

Согласен

[@user-tw2ut4ku7p]

спасибо

[@paniks]

Прикольно слушать, приятный акцент.

[@geekatplay-ru]

Спасибо, мой акцент в английском очень сильный, поэтому я нахожусь между двумя языками. Просто мой акцент постоянный. ;)

[@morsadis]

Благодарочка! Щас потестим 🙂

[@geekatplay-ru]

Спасибо, удачи вам.

[@Namirovich]

Waiting for Stable Diffusion 3(жду стеибл 3 - хз на каком тебе писать) .Спасибо . Thaks bro.

[@user-qg4gx7be2j]

Спасибо, я уже видел что Stable Cascade можно добавить как расширение в Automatic111 и в нем Stable Cascade кушает меньше видеопамяти.

[@geekatplay-ru]

Спасибо за обновление! Я собираюсь изучить это! Спасибо!!!

[@Nandarion]

У вас очень хороший русский язык.

[@geekatplay-ru]

Спасибо

[@koloved1]

@@geekatplay-ru откуда вы ?

[@Takumi_Yosimoto]

​@@koloved1Но, ты же можешь посмотреть в «информация о канале»?

[@ThatessicXiean]

Здравствуйте, можно ли использовать изображения stable cascade например для обложки музыкального альбома или оформления социальной сети, например - Soundcloud?

[@johndo6501]

Можно, это опенсорс, вы имеете право использовать. Я вообще продаю официально картинки.

[@TheTornado73]

спасибо ,lora пока мимо насколько я понял

[@geekatplay-ru]

В их документации указано, что CS поддерживает ControlNet и LoRa, возможно, нужно добавить поддержку в пользовательский интерфейс.

[@alexandergachukov2282]

Владимир, спасибо большое! Но есть такой вопрос - сколько VRAM надо для Стейбл Каскад?

[@geekatplay-ru]

Из документации: "Благодаря модульному подходу Stable Cascade, ожидаемые требования к VRAM для вывода можно поддерживать примерно на уровне 20 ГБ, но их можно дополнительно снизить с использованием более компактных вариантов (как уже упоминалось, это также может сказаться на качестве окончательного вывода)." stability.ai/news/introducing-stable-cascade#:~:text=Thanks%20to%20Stable%20Cascade's%20modular,decrease%20the%20final%20output%20quality).

[@user-th9jy1du2j]

Владимир спасибо всё интересно. один вопрос чисто для понимания она каждый раз будет грузиться так. спасибо.

[@geekatplay-ru]

Это занимает время только при первой загрузке, требуется некоторое время на распаковку и установку, а также загрузку модулей. Во второй и последующие разы это происходит намного быстрее.

[@anmi3479]

🙏👍

[@geekatplay-ru]

Спасибо!

[@user-lw2yi1zz3e]

Здравствуйте, а есть ли у этой нейросетки возможность генерации img to img?

[@geekatplay-ru]

Да, но нужно использовать установку ComfyUI. Это будет в предстоящем видео.

[@r-cross]

Я все установил но у меня ссылка прокси не открывается в браузере. Просто стоит и грузит с белым экраном. Что не так не пойму.

[@aleksandrkosovtsev2209]

Благодарю за видео. Установил. У меня 3060 на 12 Гб, по умолчанию генерирует картинку 13 минут!!! Да, карта далеко не топ, но для того же stable diffusion вполне себе хватает - на XL генерирует картинку за 25-35 секунд. Возможно что-то криво встало. Но качество изображений, безусловно впечатляет! Вот теперь не знаю что и делать - с одной стороны, невозможно ждать по 15 минут, c другой - очень крутой результат...

[@pijiwomejazxc7905]

что то медленно у меня на rx 6600 в автоматике на sdxl 768 на 1024, секунд 30 генерит

[@geekatplay-ru]

Проверьте, как приложение использует ресурсы. Возможно, оно исчерпывает VRAM и начинает использовать оперативную память системы, что замедляет работу. В таком случае, попробуйте снизить разрешение, чтобы использовалась только VRAM. Это должно существенно ускорить работу.

[@Jilexa]

Какое разрешение-то у картинки?

[@KSergey1970]

Очень долго... 1500х1000 RX4070Ti super

[@KSergey1970]

Извиняюсь, после второго запуска быстро заработала.

[@user-cq2ic2fp5m]

3060 6gb, я не дождался, по умолчанию, первая картинка 37 мин., а потом написало 4 часа. Я и остановил. Быстрее?

[@alex4alex]

Ребят. что с установкой на макось?

[@Artmencrazy]

Спасибо, а есть Stable Cascade collab ?

[@geekatplay-ru]

Да, в ссылке на GitHub есть информация о том, как использовать и установить в Colab.

[@Jean_2718]

Я пробовал эту нейронку ровно в таком же веб-интерфейсе на huggingface. Там указано, что она сделана на базе архитектуры Würstchen. Та сетка мне очень зашла в генерации пейзажей. Stable Cascade тоже неплохо справляется. А вот в плане генерации лиц - да, качество хорошее (слишком даже глянцевое), но показалось что, например, у SDXL (на том же huggingface) всё-таки больше вариабельность выдаваемых образов от одного и того же промта. А тут приходится промт и параметры подкручивать, чтобы разнообразия добиться. Либо датасет был не столь обширный, либо какие-то особенности архитектуры.

[@geekatplay-ru]

Все зависит от того, на какой модели проводилось обучение. Если в модели были очень ограниченные веса для портретов, то она будет создавать искаженные лица.

[@timifree]

Знатоки, подскажите пож-ста: а умеет ли Stable Diffusion генерить надписи с красивым шрифтом ? (ну или может какая другая бесплатная нейросеть умеет такое?)

[@Dmitriy_Khrustalev]

Умеет. Видосы есть по этой теме

[@geekatplay-ru]

Спасибо за предложение, я работаю над видео по этому поводу.

[@74mihain]

Ставил буквально вчера эту штуку на Комфи, ну ооочень медленно. Лично для себя не увидел большую разницу с тем что обычный XL выдает и данное решение. Но оптимизация пока хромает. А так как полностью ушел с Автоматика на Комфи из-за постоянной нехватки памяти, постоянных проблем с xformer`ом и посредственной работой с моделями XL, оценить каскад там не могу. Подожду пока что.

[@Sky_Eagle]

Пробуйте forge

[@user-yj5pc6cw9l]

xformer, вроде уже всё

[@blood505]

что насчёт работы на картах амд?

[@geekatplay-ru]

У меня сейчас нет под рукой AMD, я проверю Reddit, если кто-то использует.

[@DedBruzon]

Не работает, все время выдает ошибку такого плана: "It seems like you have activated model offloading by calling `enable_model_cpu_offload`, but are now manually moving the pipeline to GPU. It is strongly recommended against doing so as memory gains from offloading are likely to be lost. Offloading automatically takes care of moving the individual components decoder, tokenizer, text_encoder, scheduler, vqgan to GPU when needed. To make sure offloading works as expected, you should consider moving the pipeline back to CPU: `pipeline.to('cpu')` or removing the move altogether if you use offloading."

[@AloneStroller]

Вопросик - памяти Nvidia 4070 хватит? Как и 32 Гб ОЗУ?

[@geekatplay-ru]

Я не тестировал на этой видеокарте, однако другие люди говорят в отзывах, что всё работает нормально.

[@worldnews3297]

Здравствуйте , сделайте пожалуйста видеоурок как в Stable Diffusion восстанавливать старые фото ..

[@geekatplay-ru]

Спасибо за предложение, я работаю над видео по этому поводу.

[@worldnews3297]

@@geekatplay-ru Будем очень ждать , за ранее благодарю!

[@user-rj7ks6ik2s]

У каскада есть серьезная проблема (похоже связанная со сжатием данных). Он очень плохо отрабатывает средний и дальний планы. Конечно можно использовать SDXL в качестве "рефайнера". Но все-таки по практическому использованию вопросов пока еще очень много. Я надеюьс что его родной "апскейлер" возможно как-то исправит ситуацию, но есть сомнения. Возможно придется ждать кастомые модели, которые уже все сделают "как надо". К слову сегодня уже появились модели специально сделанные для Comfyui (но сам еще не ставил и новый воркфлоу сделанный специально "под них" не тестировал)

[@geekatplay-ru]

Я изучаю ComfyUI и SC. Видео скоро будет доступно, оно предоставляет гораздо больше возможностей, но есть и некоторые проблемы.

[@trollfat5093]

Скачал архив. Распаковал. Но там нет exe-файла. Как запустить этот Stable_Cascade?

[@mirakop3115]

pinokio setup будет

[@zimaleto9240]

А можно в таких случаях в начале сообщать, подходит ли всё это для AMD видеокарты или нет? Чтобы люди не тратили своё время

[@TurnToTheLight]

как controlnet накатить и всё остальное ? просто без этих приблуд - бесполезная фигня ) лайк поставил.

[@geekatplay-ru]

В заметках к выпуску они сообщают, что поддерживают ControlNet, Lorras и т. д., но это отсутствует в установке Pinochio, однако есть в ComfyUI, и я готовлю видео об этом.

[@RINTVRINAT]

Error У меня при установке выскакивает это. Посоветуйте что делать Спасибо. Error: ENOENT: no such file or directory, copyfile 'C:\Users\РИНАТ\pinokio\bin\miniconda\python.exe' -> 'C:\Users\РИНАТ\pinokio\bin\miniconda\python3.exe'

[@geekatplay-ru]

Похоже, Python не был установлен или не был зарегистрирован в окружении Windows. Попробуйте установить Python снова и перезагрузить компьютер.

[@RINTVRINAT]

@@geekatplay-ru Python установлен не был зарегистрирован

[@ustgame]

не работает. Выдает ошибку: NameError: name 'previewer' is not defined. Did you mean: 'Previewer'?

[@geekatplay-ru]

Попробуйте перезапустить или даже переустановить, возможно, некоторые библиотеки не установились правильно.

[@video-sketches]

3080 Ti (12 Gb). Пишет что отсутсвует Triton и постоянно выкидывает слово "ошбика".

[@RaZvAL26]

Здравствуйте хочу сделать клип к своей песне что посоветуете как бесплатно сделать живые картинки.Мне нужны видеоряды на песни. Если это можно сделать опираясь на текст песни.

[@geekatplay-ru]

Я сделал видео об этом на своем английском канале. Я перезапишу обновленную версию на русском. Не забудьте подписаться на уведомления, когда оно выйдет.

[@RaZvAL26]

@@geekatplay-ru благодарю😎 по вашему видео я зарегистрировался на дастион студио там есть что можно менять кадры но как скачать готовый мультик не нашёл

[@snopnik]

Как раз занимаюсь таким на коммерческой основе. Но я совмещаю с видеорядом снятым в студии для клипа.

[@yuduz367]

Лучше через комфиЮИ ставить. Там можно большую, среднюю и малую модель качать по отдельности, в отличии от того что пинокио сразу жир даёт. Средняя жрёт около 8.5 гигов на моей 3060 12.

[@geekatplay-ru]

Согласен, больше возможностей с ComfyUI. Я работаю над дополнительным видео.

[@KSergey1970]

Первую картинку, после запуска делает быстро. На второй тормозит. Проверил три раза.

[@geekatplay-ru]

У меня нет этой проблемы. Проверьте, освобождается ли память после использования приложения. Это можно увидеть в мониторинге ресурсов.

[@thebigfortuno3329]

Для комфи завезли полноценную поддержку каскада, превью только не работаю пока что.

[@geekatplay-ru]

Я сейчас изучаю ComfyUI и SC.

[@runesarunas1052]

Не понимаю, все работает, но уж неописуемо медленно. В чем здесь причина? У А1111 такие разрешения в 12 раз быстрее и качественнее.

[@CrazyPCman]

Винчестер. Никто не может выговорить это название. Вюрстхен. Колбаска по-немецки.

[@geekatplay-ru]

Мне нужно узнать, как произносить правильно.

[@TurnToTheLight]

так, ну что хочу сказать, какая-то шляпа. во-первых почему-то при установке заново устанавливались конга, питон, визул студио и остальные штуки, хотя всё есть, установленно и с глобальной привязкой - странно. во - вторых - при запуске сразу сжирается вся оперативка, у меня 12 гигов. генерации проходят суууууупер медленно, в обычном sd за несколько секунд. может CUDNN или pytorch2.0 надо поменять, новые библиотеки, я хз, но реально трешь. я молчу уже о tensorrt, когда за 3 секунды 1024*1024 генерится. поделитесь опытом, для чего этот каскад нужен, в чем фишка, я не вьезжаю.

[@geekatplay-ru]

Это меня тоже беспокоило. У меня были установлены все эти библиотеки и компиляторы, но система не проверяла это и устанавливала двойные версии. Я предполагаю, что это связано с желанием иметь изолированную систему, и это имеет смысл, поскольку другие окружающие среды могут влиять на работу. Они хотят быть уверены, что все проходит гладко, без вмешательства старых установок, чтобы избежать проблем. Но это также требует увеличения размера и продолжительности установки. Также было необходимо следить за некоторыми вещами, например, установкой Visual Code, которую у меня уже была. Ничто не идеально.

[@nikolaj8523]

Все скорее всего зависит от метода установки и самой сборки. Я для пробы ставил просто в отдельную папку простую сборку "в один клик" и у меня никто и ничего не устанавливал заново. Только те модули, что ей нужны, как и все подобные сборки.

[@FlowerPower3000]

круто конечно.... но видеокарту с 20 гигов оперативки)) слишком жирно

[@geekatplay-ru]

Это не дешевое хобби.

[@havemoney]

У вас русский родной или вы носитель английского? Приятный акцент.

[@geekatplay-ru]

Я родился в Москве, переехал в США в 1990 году, в конце концов у меня плохой русский и плохой английский, руссинглиш.

[@Sky_Eagle]

​@@geekatplay-ruне скромничайте, все у вас хорошо с русским =)

[@video-sketches]

Короче ни одна версия в этом пинокио у меня не заработала. Всё время ему чего-то не хватает. Напомню 3080 Ti (12 Gb), Intel Core i5, 32 Gb памяти, M2 на 1 Gb жёсткий и 200 мегабит интернет. Остаюсь на матрице, т.к. очень стабильная. Там у меня работают все версии, которые предоставляет Matrix. А этот пинокио какая-то недоделка.

[@alexus1981]

Мда. Стоило начать с аппаратных требований. Не так уж много людей с видеокартами уровня 4090 и выше. Я сделал всё по инструкции, за час всё установилось. У меня 11900К, 32Гб оперативки, 4070Ti 12Гб и SSD со скоростями 8гб/с на запись. Сижу уже минут 10, жду первую картинку в настройках по дефолту, любуюсь 100% загрузкой памяти видеокарты и тормозами всей системы. С такими успехами таки проще использовать серверные решения. Поправочка, уже 30 минут сижу, но ничего кроме первой мозаики не вижу. Комп загружен полностью. Если это так работает, абсолютно бесполезная хрень для 99,9% пользователей.

[@havemoney]

Чувствуется что что то как будто недоделано, моlель требует прожарки. Меньше памяти просит, но сверх разрешения качество не бустят.

[@geekatplay-ru]

Возможно, разработчикам понадобится еще немного времени, чтобы создать дополнительные компоненты и модели.

[@havemoney]

@@geekatplay-ru возможно

[@Sky_Eagle]

Да уже трёшка на подходе.

[@Takumi_Yosimoto]

Стройды, не может быть, это же сток.

[@mirakop3115]

8 gb мало

[@geekatplay-ru]

Согласен

[@Willyhoplofimusic]

Всем хорошего настроения ! WillyHop приглашает всех в удивительный мир LOFI Музыки - www.youtube.com/@WillyHop_Music

[@geekatplay-ru]

Спасибо

[@aigerimkimrai9180]

Если я не смогу установить то ты старый

[@yuart67]

очень медленная хрень, даже на rtx 4090 еле рендерит. одну и туже картинку рендерил в Stable Cascade по времени 11 минут, в SD AUTOMATIC 46 СЕКУНД.интерфейс убогий и ограниченный, одно разочарование

[@multiman9490]

Постоянно ошибка при установке Stable Cascade Error: Command failed: start /wait X:\pinokio\bin\vs_buildtools.exe --passive --wait --includeRecommended --nocache --add Microsoft.VisualStudio.Workload.VCTools at C:\Users\NeoRUS\AppData\Local\Programs\Pinokio esources\app.asar ode_modules\sudo-prompt-programfiles-x86\index.js:577:25 at FSReqCallback.readFileAfterClose [as oncomplete] (node:internal/fs/read_file_context:68:3) как устранить?

[@geekatplay-ru]

Убедитесь, что у вас установлен Visual Code.