В данном проекте я рассмотрю насколько точно генеративный ИИ stable diffusion может уловить стиль с работ онлайн художника markReymer.
Выбор на эти работы упал в первую очередь из-за нестандартного подхода к стилю. На этих работах присутствует не совсем характерная для манги и комикса штриховка, больше похожая на каракули своей абстрактностью. Линии проведены небрежно и накладываются друг на друга, что создаёт яркий и не самый стандартный стиль рисования, который сильно отличается от более выверенного и чистого стиля, присущего большинству манг и комиксов. Мне интересно рассмотреть сможет ли генеративный ИИ поймать эти отличительные черты стиля художника
Для обучения модели я выбрал 20 страниц в стиле комикса этого художника и обрезал их под необходимый формат 1:1
В процессе разработки идеи также был применен Claude. Благодаря этому ии я смог более точно формировать видение стиля — готическая архитектура и другие яркие черты, которые в дальнейшем использовались для написания промптов генераций
Итоговые изображения
На сгенерированных итоговых изображениях у меня получилось передать основные черты стиля markReymer, а именно контрастные тени с грязным рваным штрихом и общую грубую атмосферу, более похожую на рисунок карандашом или же каракули. ИИ смог обучиться основам этого стиля на базе исходных изображений и выдал довольно близкий к работам автора результат. Особенно удачными получились генерации архитектуры, которые почти идентичны стилю рисования художника
«sks dark gothic manga illustration, cloaked warrior standing in a vast dark hall, ink splatter, dynamic composition, manga action panel»
«sks dark gothic manga illustration, towering dark cathedral spires against stormy sky, monochrome ink art, heavy crosshatching, atmospheric fog»
В ии изображениях также было принято расширить объём используемого сеттинга. Вместо того чтобы ограничиться лишь элементами готического стимпанка, я решил также добавить генерации с более фентезийным готическим вайбом. Стиль штриховки и рисования художника сохранился даже в них, несмотря на отличия в архитектуре
«sks dark gothic manga illustration, girl with long black hair standing on cliff edge above stormy sea, lighthouse in distance, wind-swept composition»
«sks dark gothic manga illustration, crumbling graveyard with twisted iron fence, full moon behind clouds, skeletal tree silhouettes, dense ink hatching»
ИИ довольно неплохо справился не только с созданием похожего стиля рисовки локаций и композиций, но и даже частично уловил стиль рисования лица, с детальными грязными тенями, большими детализированными глазами, тонким носом и маленьким ртом. Слева оригинальная работа художника, а справа портрет персонажа при помощи генеративного ии
«sks dark gothic manga illustration, lone violinist on a rooftop at midnight, wind blowing cape, cityscape below shrouded in mist, high contrast»
Основными инструментами в создании проекта были: Google Colab-блокнот, Stable Diffusion XL, Claude для более создания более четких промптов и DreamBooth LoRA.