Original size 1140x1600

Обучение генеративной модели Stable Diffusion под стиль аниме Хаяо Миядзаки

PROTECT STATUS: not protected

ИДЕЯ

Идея для обучения генеративной нейросети заключается в том, что бы обучить ее рисовать персонажей в стилистике аниме Хаяо Миядзаки. Для обучения я собрала датасет из квадратных картинок, в одинаковом разрешении, со стоп кадрами из различных произведений.

ИСХОДНЫЕ ИЗОБРАЖЕНИЯ

Для обучения были взяты 38 стоп кадра из разных аниме Хаяо Миядзаки. Все они отформатированы под единый размер. Чтобы модель смогла считать стиль аниме для генерации будущих картинок при сборе изображений ключевой задачей стал поиск кадров с портретами персонажей, природой, интерьерами и вымышленными существами.

big
Original size 2586x1469

ПРОЦЕСС ОБУЧЕНИЯ

  1. Загрузка изображений.
big
Original size 2470x1298
  1. Процесс обучения.
Original size 2130x600
  1. Загрузка обученной модели на HuggingFace.
Original size 1942x1680

Готовая серия изображений

Original size 3121x1024

The house on the mountain; A car is driving on a Japanese highway; Japanese village in summer

Original size 3121x1024

A father walks around Tokyo with his child; The family dines at the table

Original size 3121x1024

Ghibli-style sunset beach; Sakura garden with a river and a bridge crossing it

Original size 3121x1024

Japanese car drift; Car at dusk at the gas station; Formula 1 car in Suzuka

Original size 3121x1024

Photo collage in ghibli style, times square, new york; The skyscraper quarter

Original size 3121x1024

An eagle diving into a rocky river near a waterfall; A bear climbing a cliff at dawn

Original size 3121x1024

Сoffee shop with a veranda; Vinyl Store; The interior of the living room with a window overlooking the garden

Обучение генеративной модели Stable Diffusion под стиль аниме Хаяо Миядзаки
Project created at 10.04.2025
creativecity.academy
A joint project of the HSE ART AND DESIGN SCHOOL and the Institute for the Development of Creative Industries, focused on working with Russian regions. The Creative City digital platform is a media outlet that aggregates projects related to territorial branding, a community of professionals, and a service that allows you to create local websites, work with the local identity and popularity of cities and places. Study the map of the Creative City. Get acquainted with the projects that have already been implemented. Add your... Show more
events
travelling
history
art and design
We use cookies to improve the operation of the HSE website and to enhance its usability. More detailed information on the use of cookies can be fou...
Show more