Концепция и референсы
Основой проекта стало творчество Симона Столенхага — шведского иллюстратора и концепт-художника, его стиль строится на сочетании повседневных пейзажей шведских пригородов с масштабными научно-фантастическими объектами, которые органично вписаны в привычную среду.
«Forest Iron», Симон Столенхаг. // «Tales from the Loop», Симон Столенхаг.
Интерес к переносу стиля Симона Столенхага в нейросетевую среду во многом связан со сложностью его работы с текстурами. Хотя художник работает в цифровом формате, его изображения напоминают традиционную живопись. Передача этой тонкой границы между цифровым исполнением и эффектом «живой» краски представляет собой непростую задачу для генеративных моделей.
«Tales from the Loop», Симон Столенхаг.
Ниже приведены работы Столенхага, которые были включены в обучающую выборку для нейросети.
Исходные изображения, состоящие из картин Симона Столенхага.
Процесс обучения нейросети для генерации изображений включает несколько последовательных этапов. Сначала проводится сбор и очистка базы изображений, в данном случае это работы художника. Затем определяется подходящая архитектура модели, например GAN или VAE, после чего запускается обучение генератора и дискриминатора.
Фрагменты кода.
Обучение модели проводилось в облачной среде Google Colab. Выше приведены основные фрагменты кода, использованные для настройки и запуска процесса файнтюнинга (подготовка среды и запуск обучения).
Мои генерации
Для оценки работы модели и демонстрации её возможностей были подготовлены специальные промпты, направленные на проверку различных аспектов стиля.
A massive, rusted bipedal robot standing idle in a foggy, snow-covered field, a small 1980s Volvo parked nearby, in the style of stalenhag style, muted colors, digital painting, visible brushstrokes.
A massive, rusted bipedal robot standing idle in a… // A group of teenagers with backpacks walking down a rural dirt road, a colossal hovering cargo ship looming in the overcast sky above them…
На мой взгляд, нейросети удалось в определённой степени приблизиться к уникальному стилю Симон Столенхаг и передать его ключевые особенности. В сгенерированных изображениях прослеживаются характерные черты его работ: приглушённая, пасмурная атмосфера, контраст масштабов и узнаваемая цветовая палитра, создающая ощущение ностальгической меланхолии.
Inside a dimly lit 1980s living room, looking out the window at a colossal, dark mechanical tower in the distance, in the style of stalenhag style, narrative focus, contrast between cozy and…
A suburban neighborhood in the 1990s, but with a massive cooling… // A futuristic but worn-down public bus driving through a snowy, desolate landscape, heavy snowfall, in the style of stalenhag…
A scientist in a yellow hazmat suit inspecting… anomaly… in the style of stalenhag style, realistic lighting… // A giant, mechanical dinosaur-like machine roaming through a misty swamp…
An abandoned, moss-covered metallic sphere half-buried in a dark pine forest, glowing softly with blue light, in the style of stalenhag style, realistic lighting, traditional painting feel.
Тем не менее результат остаётся далёким от идеала. В изображениях заметны искажения текстур, утрата живописной фактуры в пользу «гладкого» 3D-эффекта, а также проблемы с логикой конструкций, из-за чего техника выглядит неубедительно.
A close-up of a tangled mess of thick, black industrial cables and glowing neon tubes spilling. // A massive, brutalist concrete facility looming over a quiet suburban house, thick fog rolling in…
Описание применения генеративной модели
Для генерации промтов, а также для корректировки и более точного описания отдельных нюансов, связанных с механикой работы кода, использовалась модель Claude Sonnet 4.5. Такой подход позволил уточнить формулировки, сделать изложение более последовательным и понятным, а также аккуратно проработать детали, которые важны для корректной реализации и интерпретации логики работы.