Обучение генеративной нейросети Stable Diffusion XL уникальному стилю авторских иллюстраций с помощью техники DreamBooth + LoRA.
Датасет: Коллекция из 30 оригинальных рисунков
Ожидаемые результаты: Повторение моделью, характерных для авторского стиля особенностей, в частности: — Цветовая палитра: приглушённые, атмосферные тона — серо-голубые, тёплые жёлтые, тёмно-красные, глубокие синие — Техника: сочетание карандашного рисунка с цифровой заливкой, стилизация под акварель — Атмосфера: меланхоличная, кинематографичная, с драматическим освещением
Процесс обучения
— Модель: SD 1.5 (~2 ГБ), метод: LoRA через train_text_to_image_lora.py;
— Обучение: 800 шагов, 8-bit Adam, gradient checkpointing, fp16;
Результаты: Удалось передать некоторые элементы стиля
