ComfyUI & Reactor Nodes: Effortless AI Face Swap Adventure!

[@BrawnyAi]

That's a lot of work. I tried to put everything like you did into a single workflow but I realized it was better for my total workflow to have smaller workflows that can load quickly and doing just one single thing that tons of things at the same time.

[@murphylanga]

Hello, I can understand that very well. I also have lots of little ones :-), but at some point I lost track of which ones I need. And then it's too much work for me to keep them all up to date. I once packed more into a workflow, but that wasn't practical. I tried to make everything switchable and interchangeable in “modules”. So there is one with a focus on IP-Adapeter, one with a focus on Styler, one with Inpaint/Outpaint... Everyone has to decide for themselves. You can also pick out individual modules.

[@BrawnyAi]

@@murphylanga Understood!

[@VietnamShorts]

workflow is interesting, I am tryinig to understand is there a posibility in that workflow to add a styling to a swapped face picture without disturbing its shape. First Img2Img part creates totally different character to the one in the picture.

[@murphylanga]

@VietnamShorts That's fine, you can also go through several steps with image to image and use a very low denoise 0.1 - 0.3 value and Lora, and use only the style as a prompt. If you use one of my newer workflows, you can also integrate a Lora to optimize with the Ultimate SD Upscaler. In addition, there is also the option in these to use a Scribblel or Lineart Controlnet, then a slightly higher denoise value can be used. Finding the right denoise is something you have to find out by approximating. Try to get the created image closer to the desired style several times with low denoise values ​​and Controlnet. Here is the latest video with links to a workflow package, if your computer is too weak for Flux, simply do not switch it on in the Ultimate workflow, or deleting the groups should also work. kzbin.info/www/bejne/kH3EeGx_iKyfbM0

[@VietnamShorts]

@@murphylanga So there's no good answer for that. if I apply lower noise i won't see the style :) I did several experiments every time when you aply a style it distort the character. It is ok when you use some non existing character but it is not very nice when you use real pictures with real people. Just try to use your own face, you will see how quickly it will become someone's face you don't know ;)

[@murphylanga]

@@VietnamShorts It's not really possible in one step, but it works quite well in several. First change the style (possibly with Controlnet and image to prompt) + Lora and possibly IP adapter only style, then face swap (can be done in one step). Then 2-3 steps with low denoise values ​​to completely adapt only the face to the style. In the newer workflows, only directly with SD upscale/downscale and e.g. the Remarci upscaler

[@VietnamShorts]

@murphylanga I will check that. Anyway Lora is here so that means whole process become very time consuming. I have my own dreambooth cktp - it works quite ok, but it consumes at least few hours of processing to get a final result. Or maybe you meant just a styling lora🙃 i guess yes you did😏

[@Dreddoom]

Great work again. Well done 😊

[@HiProfileAI]

Why do you use individual stacked Lora loaders in the workflow why not just use an automatic Lora stacker. It's one node. It's clean and easier to use. Just curious

[@murphylanga]

Yes, you are right, but I would like to write the information of the Lora models in the generated images. So far this only works with these special Lora loaders. This means that this information is also automatically linked when uploading to e.g. CivitAI. But, you can easily rebuild this, the workflow is modular. At the top of the upscale groups there is what I consider to be the best compact Lora loader from the Rgthree nodes. You can install it, for example. The developer may even customize this node. Then I'll convert that too.😉

[@jurgenmayr8164]

Das nenne ich mal einen umfangreichen Workflow. Ich stelle mir vor, dass die Wartung hier sehr kompliziert wird, oder?

[@murphylanga]

Ne, nicht wirklich, sind alles einzelne Module. Wenn man das Prinzip mal verstanden hat, ist ziemlich einfach. Da Gute ist durch die RGthree Nodes kann ich alles abschalten und gewinne Performance. Ich habe noch einen ganz großen, der ist aber niemand zuzumuten. Von dem baue ich Stück für Stück als austauschbaren Modul um... Leider habe ich nicht die Zeit die ich gerne hätte.

[@jurgenmayr8164]

@@murphylanga Ich meinte mit der Pflege auch eher, wenn sich bei einem Update von ComfyUI und den Nodes mal wieder alles ändert. Das sind ja alles noch keine Stable Releases. Da wird mal ne Variable geändert oder etwas hinzugefügt ohne es mit einem sinnvollen Default zu unterlegen usw. Ich finde deinen Workflow mehr als beeindruckend. Könntest du dir eigentlich Vorstellen Workflows als Auftragsarbeit zu erstellen?

[@murphylanga]

@jurgenmayr8164 Mit der Zeit weiß man welche Nodes "wacklig" sind, oder sich einfach ohne Doku ändern. Aber es stimmt schon, es kann Überraschungen geben. Diese Woche zum Beispiel hat ein Entwickler ein Update veröffentlicht, das den kompletten Workflow lahmgelegt hat. Ein Anwender hat mich angeschrieben, den vorab eine Version geschickt habe, dass nichts mehr funktioniert. Ich hatte schon etwas gebraucht, um den Fehler zu finden. Meistens, ist Comfy aber bei der Fehlersuche behilflich. Ich habe den Entwickler kurz angeschrieben und 15min später war das Problem gefixt und ein neues Update veröffentlicht. Einige glücklichen Zufälle, sodass fast niemand das überhaupt mitbekommen hat. Vielleicht ist auch die Erfahrung aus meinem "richtigen" Job hilfreich, da beschäftige ich mich ab und an mit parametrischer 3D-CAD Methodenentwicklung und Automatisierung und schule Kollegen. Es gibt immer mehrere Lösungsmöglichkeiten und Bedenken habe ich nur, wenn sich etwas Grundsätzliches im Zusammenspiel mit Comfy und den Rgthree nodes passiert. Zu deiner 2. Frage. Ich hatte bei OpenArt letztes Jahr einen Anerkennungspreis gewonnen. Und wurde auch angefragt, ob ich Interesse hätte etwas für sie zu machen. Irgendwie ist das im Sand verlaufen, Spamfilter oder keine Ahnung. Ich habe das aber auch nicht weiter verfolgt. Grundsätzlich kann ich mir das schon vorstellen. Aber meine Zeit ist begrenzt.

[@bookssums]

incredible, !😃

[@hadbildiren123]

What is this workflow? Inside of a spaceship? ComfyUI is too complicated! Why not an easy UI as Fooocus or A1111?

[@murphylanga]

Hm, operating this workflow is easier than operating Automatic1111. But of course ComfUI is more complex than Automatic1111. But that wasn't your question. I could write because there are many more options. I have Automatic1111 and also Foocus installed on my computer. But I hardly ever use it. Because, and this is my reason, Comfy is much, much faster for me than the other tools.