Обучение генеративной модели Stable Diffusion стилю Марка Шагала
Идея
Я родилась и выросла в Беларуси. Местные художники создавали особую атмосферу через свои работы — их картины часто изображали повседневную жизнь горожан и передавали ту самую белорусскую доброту и гостеприимство. Сейчас, находясь далеко от дома, я попыталась ощутить связь с родной землёй через творчество Марка Шагала. Его работы с узнаваемыми сюжетами из белорусской провинции, на основе которых я обучала нейросеть, помогли сохранить в памяти то, что когда-то было частью моего мира
Исходные изображения
Исходный сет изображений собран из картин в стиле кубизм. Картины были написаны в разные этапы жизни автора — в период с 1911 по 1966 год
Инструментарий проекта
Инструментарий проекта:
Stable Diffusion — настройка генеративной модели нейросети на создание уникальных изображений;
Hugging Face — авторизация на платформе для получения API-ключа, обучение модели и её публикация в облачном хранилище;
Google Colab — запуск скриптов машинного обучения и создание изображений через облачные вычисления.
Промежуточный результат
Чекпоинт-250 (при общем числе шагов тренировки 500) начинает добавлять в изображения сглаженные черты кубизма Шагала, но все же является очень далеким родственником стиля, к которому мы стремимся
Промпт — painting in SHAGAL style, a blonde woman in black with a child on her hands
Итоговые работы
painting in SHAGAL style, a cute black cat
painting in SHAGAL style, abstract shapes
painting in SHAGAL style, Murakami style flowers
painting in SHAGAL style, a crowded square
painting in SHAGAL style, blonde woman with child on hands
painting in SHAGAL style, people dancing
Ниже — серия из четырех картин, объединенных одной темой — пейзаж деревни в разные сезоны года
painting in SHAGAL style, winter village landscape
painting in SHAGAL style, spring village landscape
painting in SHAGAL style, summer village landscape
painting in SHAGAL style, autumn village landscale
Итоги
Выборка из 60 картин оказалась более чем достаточной для того, чтобы нейросеть на хорошем уровне переняла черты Шагала — сочетание прямых ломаных линий, дробление форм на геометрические элементы и контрастные переходы в цветах
