ИИ на ПК: сравнение Stable Diffusion и Flux

[twilightshade]

В общем разобрался в генераторах и всё поставил подключил вроде. То есть оба которые являются нормальными и на слуху: Stable Diffusion и Flux. Их ещё много и новые появляются постоянно, отрасль сейчас в ситуации технологического взрыва. Но эти уже как бы старые и проверенные. Может потом ещё какие посмотрю...
Первый попроще но и ресурсов требует поменьше. Попроще он в том что не понимает сложных сцен и запросов. И лучше всего реализован он в прооге Fooocus. Очень простой интерфейс но и возможности так себе.
Flux поставил на другую прогу. Он конечно крут всё понимает и может многое, но очень требователен к компу. Слишком большое разрешение поставил, памяти не хватило, извольте бриться.
В итоге по скорости и техническим ограничениям Stable Diffusion луше Flux примерно в 2-3 раза при том что Flux лучше в потенциале.
Таким образом Stable Diffusion на Foooсus наиболее быстрый и наименее требовательный к оборудованию и с хорошим качеством (хорошо справляется с разрешением 1000dpi) и ему хватает памяти ( у меня 8GB видео и 24 оперативной), возможно потому что программа более оптимизирована. Но что касается обработки запросов, он их чуть хуже понимает, чуть хуже справляется с генерацией сложных сцен и чуть хуже качество самой сцены (не разрешение а именно качество). Flux на stable-diffusion-webui-amdgpu-forge выдаёт хорошее качество, сам по себе прекрасно понимает запросы и рисует сцены, но очень требователен к оборудованию, в высоком разрешении 1000dpi при видеопамяти менее 12 GB он просто отказывается работать. Просто у меня видеокарта AMD 6600 с 8Gb что недостаточно для нормальной работы FLUX. Повторюсь, минимальные требования нормальных генераторов типа Flux 12ГБ видеопамяти. К оперативке тоже, потому что она тоже эмулирует видеопамять более медленную так сказать (но мой Flux брать её не хочет, видимо прога не оптимизирована или ему и ее мало). По этой же причине нужен быстрый SSD c виртуальной памятью, в целом нужно многие десятки гигабайт кэшированной совокупной памяти. А вот процессор мало используется, даже графический, хотя графический процессор для генерации естественно используется, в среде т.н. архитектуры cuda (у AMD - zluda), поэтому требования к ЦП не выставляют, подойдёт практически любой, вообще ИИ-генерациия изображений это не столько мощность процессора, сколько объёмы вычислений, количество и скорость памяти.

Теперь примеры...
Для простоты запрос будет проще некуда: cat.
Итак сравним два изображения из разных генераторов на которые понадобилось примерно одинаковое время по 5-минут.

Stable Diffusion от Fooocus (конкретно его версия там называется juggernautXL)

Flux Schnell - stable-diffusion-webui-amdgpu-forge (здесь stable-diffusion это не генератор а название проги,модели там у меня только Flux а нормальный Stable Diffusion для неё не нашел пока)


Ну и наконец для понимания того что Flux это не какое то гуано а просто мой комп не тянет вот кот от Flux Schnell почти аналогичный по качеству Stable Diffusion хоть и поменьше разрешением (повторюсь 1000 dpi мой Flux не тянет) и вполне ничего. Но генерировался он... 15 минут!

P.S. Забавно что ИИ имел в виду этой надписью в правом нижнем углу... Это не логотип если что это игры флюкса...

Конечно что лучше Flux или Stable Diffusion это вопрос дискуссионный, но что касается требований к железу, то есть соотношение затраты/выхлоп, то ответ очевиден, Stable Diffusion получше будет. А что касаемо возможностей тут разные мнения...

Comments

[pokerart]

Круто! Спасибо за описания. Результат радует :)

[twilightshade]

Я кстати с flux разобрался немного, нужно sampling steps уменьшить до 2 и можно пользоваться даже с нормальным разрешением (но тоже вряд ли запредельным надо пробовать, тут всё от памяти зависит будь она неладна). Для него в отличие от Stable diffusion количество этих итераций обработки не так критично главное чтобы больше одной. А на каждую минута уходит. А вот для Stable diffusion эти итерации критично для качества картинки, 8 это где-то минимальное количество, правда и отрисовывает он их в три раза быстрее, секунд за 20. Поэтому можно сказать так на так, но повторюсь flux лучше понимает что ты от него хочешь, Stable Diffusion в этом плане туповат, некоторых слов не понимает совсем, в нем сложную сцену не закажешь. А вообще дерзайте, в интернете полно инструкций. Если видеокарта у вас с 8GB видеопамяти уже можно пробовать. Но если покупать новую, то желательно Nvidia c 12 гигами.
Но если не хотите возиться то рекомендую Krea.ai, там есть всё, генератор флюкс, суточный бесплатный лимит на всё, но можно несколько акков если у вас несколько мейлов создать, цензура там очень мягкая.