Идея проекта
Идея проекта заключается в до-обучении готовой модели LoRa для генерации изображений в стилистике керамических изразцов.
Исходные изображения для обучения модели
Результаты генерации обученной модели
Изображение 1 — горный пейзаж в изразцовой стилистике Изображение 2 — натюрморт с чашкой кофе в изразцовой стилистике Изображение 3 — фентезийный замок в изразцовой стилистике Изображение 4 — уличное кафе в изразцовой стилистике Изображение 5 — город вид сверху в изразцовой стилистике
По полученным изображениям видно, что:
- модель смогла передать объемность изразцов, то как на них падает свет, в двухмерных изображениях,
- модель запомнила палитру цветов заданных изразцов и воспроизводит ее при генерации. И тем не менее модель лишь немного отражает изначальную цель задумки, поскольку продолжает опираться на базовый для изначальной модели формат (одни и те же пейзажи, одни и те же строения, один и тот же угол изображения).
Код обучения
Ниже прилагается код для обучения модели. Процесс обучения:
- Установка Diffusers
- Импорт изображений-референсов из облака
- Формирование личных токенов для референсов
- Импорт и обучение модели LoRa
- Генерация изображений Также для создания промптов при генерации были взяты идеи из нейросети DeepSeek.
Описание применения генеративной модели
Искусственный интеллект применялся для до-обучения уже существующей модели в образовательных целях. Использованная модель:
