Делаем скрытый текст в картинке с помощью ControlNet и Stable Diffusion.

Лолзтимерам привет! Сегодня я расскажу как в Stable Diffusion используя ControlNet можно сделать скрытый текст, как на примере ниже. Чтобы его увидеть нужно отдалить изображение или же прищуриться.

Милые котята со скрытым посланием

Надпись Lolzteam в форме городов

Суетной котик

Девушка с посланием

Ещё одна девушка

LZT в виде котика

Гайды как установить Stable Diffusion от AUTOMATIC1111 вы можете найти в ютубе или в моих предыдущих статьях.

Прикреплю все ссылки которые использовались здесь:
https://github.com/AUTOMATIC1111/stable-diffusion-webui/ - Stable Diffusion с интерфейс от AUTOMATIC1111
https://github.com/Mikubill/sd-webui-controlnet - ControlNet
https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster - QR Code Monster, который мы использовали в прошлой статье для генерации красивых QR.
https://civitai.com/models/4201/realistic-vision-v51 - модель которую я использовал для генерации изображений
https://www.imagetotext.info/text-to-image - для создания изображения с указанным текстом

QR Code Monster

Нам необходимы только 2 файла
.yaml и .safetensors

Закидываем их по пути: yaml - \extensions\sd-webui-controlnet\models

.safetensors - \models\ControlNet

Выбираем txt2img и указываем prompt, negative prompt

txt2img

Первое поле отвечает за prompt который будем генерировать, второе же negative prompt - отвечаем за то, что мы видеть не хотим на нашем изображении

Мои настройки генерации выглядят так:

Ширина 1024, высота 768, иногда я ставлю 768x512.
Batch size - кол-во изображений 1-4 (отвечает за кол-во изображений который сгенерируются).
Sampling steps я указываю от 30 до 40 (тем больше, тем лучше будет прорисовываться изображение)
Sampling method я использовал DPM++ 2M Karras​

Перейдем к настройке ControlNet​

Создаем текст для нашего изображения

Можно создать где угодно, в фотошопе, либо же через сайт https://www.imagetotext.info/text-to-image

Нажимаем кнопку Download и выбираем PNG.

Далее полученное изображение мы перетаскиваем в Single image, ControlNet. Либо же вставляем через CTRL + V

Устанавливаем ControlNet

Выбираем вкладку в интерфейсе Extensions > Install from URL
В первое поле вставляем ссылку https://github.com/Mikubill/sd-webui-controlnet.git
Нажимаем кнопку Install и устанавливаем расширение.

После установки перезагружаем UI

После перезагрузки у нас должны будут появиться новые вкладки в интерфейсе

Настраиваем ControlNet

​

Модель выставляем QR Code Monster


Control Weight, Starting Control Step и Ending Control Step выставляем как у меня на скриншоте



Желательно выставлять Control Weight в данном диапазоне: 0.85 - 1.5 (чем больше вы укажите, тем сильнее будет виден текст)

​

Устанавливаем модель Realistic Vision

Переходим по ссылке https://civitai.com/models/4201/realistic-vision-v51
нажимаем на иконку скачать и выбираем Model SafeTensor (я использовал на 3.97 GB)
После того как скачается, открываем папку со Stable Diffusion, ищем папку models

затем внутри нее Stable-diffusion

и перемещаем файл туда

После того как мы все настроили можем генерировать изображение

Генерация и результат

Выбираем модель, в моем примере Realistic Vision

Жмем кнопку Generate

Как вышло у меня (seed не меняйте, я его использовал лишь для повторной генерации своей картинки)
​

Так же вместо текста можно использовать другие иллюзии, достаточно найти подходящую картинку и закинуть ее в ControlNet