
Введение
Evil inspiration — один из моих любимых художников онлайн арт комьюнити. Целью проекта является обучение генеративной нейросети Stable Diffusion, создающей изображения в стиле этого автора.
Для обучения генеративной нейросети Stable Diffusion я собрала датасет из некоторых работ художника в объёме 163 изображения, приведённых к единому размеру 1800×1800 пикселей.
Примеры работ художника Evil inspiration


Примеры работ автора
Примеры работ автора


Примеры работ автора
Автор рисует множество разных сюжетов, однако, на мой взгляд, если рассматривать большинство работ, то можно увидеть, что стиль отличается некой мягкостью и загадочностью. В связи с этим я захотела узнать, как обученная мною нейросеть видит один из моих любимых фильмов «Сумерки», обладающего холодной, тёмной, мрачной, загадочной, но в то же время романтичной эстетикой.


Кадры из серии фильмов «Сумерки»
Кадры из серии фильмов «Сумерки»


Кадры из серии фильмов «Сумерки»
Генерация изображений
На основании обученной нейросети, мною была создана серия из 20 изображений.
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Фильм «Сумерки», нейросеть Stable Diffusion
Вывод
Так как датасет был собран из работ автора разного времени, за которое его стиль успел немного поменяться, итоговые генерации вышли неким симбиозом всех его «подстилей». В целом, нейросеть смогла повторить стиль автора, выделив некоторые основные черты стиля: мягкость, текстурность мазков кисти, местами размытость фона, блюр эффект, засветы, не очень насыщенная, пастельная, немного однотонная палитра. Однако местами проявляются несовершенства в виде косых глаз, странной перспективы, на одной генерации даже появился текст и др.
Описание применения генеративной модели
В проекте также была использована нейросеть ChatGPT4 для улучшения качества описания промптов к генерируемым изображениям.