Обучение генеративной модели Stable Diffusion под стиль Виктора Васнецова
Идея
В Санкт-Петербурге в Русском музее проходит выставка работ Виктора Васнецова к 175-летию с его дня рождения. Посетив данную выставку, я очень вдохновилась его работами, мне стало интересно попробовать сделать серию картинок в его стиле. Данный проект — восхищение современными технологиями и работами великого художника.
Исходные изображения
Я собрала датасет из тридцати пяти самых узнаваемых картин Васнецова и подогнала их под пропорции квадрата.
Обучение
В проекте было задействовано всего три элемента:
◍ Stable Diffusion для обучения нейросети
◍ Hugging Face для получения токена
◍ Google Colab для кода и генераций всех получившихся изображений
За основу работы был взят код, данный нам преподавателем.
Я установила все нужные библиотеки, собрала все мои изображения (датасет) и после их загрузки я начала обучение модели in Vasnetsov style.
Датасет в коде
Ура! Модель обучилась
Процесс генерации картинок с промптом
Получившиеся изображения
Средовые изображения
Промпт: photo collage in Vasnetsov style, times square, new york
Промпт: Photo collage in Vasnetsov style, an image of a Moscow Kremlin
Промпт: Photo collage in Vasnetsov style, an image of Saint-Petersburg Hermitage
Промпт: Photo collage in Vasnetsov style, an image of a mountain with lake and forest
Промпт: Photo collage in Vasnetsov style, an image of Moscow metro
Промпт: Photo collage in Vasnetsov style, an image of a forest from a fairytale
Промпт: Photo collage in Vasnetsov style, an image of Buddhist temple with khurul
Изображения с людьми
Промпт: Photo collage in Vasnetsov style, an image of a girl sitting on the rock near the sea
Промпт: Photo collage in Vasnetsov style, an image of a girl dancing in a bright dress
Промпт: Photo collage in Vasnetsov style, an image of a crowd of men and women dancing around a fire
Промпт: Photo collage in Vasnetsov style, an image of a men and women standing near the small hut
Промпт: photo collage in Vasnetsov style, an image of men drinking wine near the table with tasty food
Промпт: Photo collage in Vasnetsov style, an image of woman laying in bed on the sunset
Промпт: Photo collage in Vasnetsov style, an image of woman doing her makeup in front of the mirror
Промпт: Photo collage in Vasnetsov style, an image of young girls chatting with each other on the bench in the summer street
Промпт: Photo collage in Vasnetsov style, an image of group of dogs playing on the backyard
Итог
Это был интересный проект с точки зрения взаимодействия искусства и нейросетей. Если со средовыми объектами нейросеть справляется неплохо, то с людьми и животными уже, конечно, хуже.
Это в любом случае не предел, и я уверена, что в будущем времени мы сможем наблюдать шикарные работы искусственного интеллекта, и они будут представлять даже свою определённую культурную ценность.
