FLUX 3 Image Klein Base

Это базовая версия компактной открытой модели картинок, которую Black Forest Labs выпустила как уменьшенный вариант FLUX 3 Image. Внутри трансформер на 5,6 млрд параметров, а текст запроса для него разбирает отдельная языковая модель Qwen3-VL-4B-Instruct. Умеет она то же, что и старшая FLUX 3 Image: рисует по описанию, правит готовые изображения, собирает картинку по нескольким образцам (до десяти за раз) и расставляет объекты по рамкам, которые задаются в запросе координатами.

Лаборатория выпустила сразу две версии модели. Обычную прогнали через дистилляцию — дополнительное обучение, после которого ей хватает 16 шагов, чтобы получить картинку. Базовую так не сжимали: ей нужно 50 шагов, и на каждом она делает дополнительный расчёт, чтобы точнее следовать запросу, поэтому работает заметно медленнее. Зато именно её Black Forest Labs советует брать за основу для дообучения и исследований.

Её берут, чтобы дообучить модель на своих изображениях или обучить LoRA — небольшую надстройку, которая учит модель новому стилю, персонажу или предмету без переобучения всех весов. По документации лаборатории, LoRA, обученная на базовой версии, подключается и к быстрой: учить можно на медленной модели, а рисовать на быстрой. Black Forest Labs пишет, что обе версии работают на домашних видеокартах, начиная с RTX 3090. Короткий запрос, как предупреждает лаборатория, даёт шаблонную картинку, поэтому его советуют сначала развернуть в подробное описание сцены отдельной вспомогательной моделью, а ей по замерам из карточки модели нужно ещё около 28 ГБ видеопамяти.

Веса выложены под лицензией Black Forest Labs для сообщества. Некоммерческое применение свободно, а коммерческое бесплатно только для людей и компаний, у которых годовая выручка меньше 5 млн долларов. Лаборатория предупреждает, что модель может ошибаться в надписях на картинках, повторяет перекосы обучающих данных и не годится как источник фактов. Рамки в запросе задают положение и масштаб объекта, но не работают как жёсткая маска, а результат сильно зависит от того, как написан запрос.

источники:Заметки о выпуске Black Forest Labs ↗Модель в библиотеке Diffusers: запуск и обучение ↗