Обучение генеративной модели Stable Diffusion под стиль Клода Моне на Deziiign
Исходный размер 721x1024

Обучение генеративной модели Stable Diffusion под стиль Клода Моне

Идея

Всем нам иногда хочется сбежать от реальности и погрузиться в волшебный мир фей, русалок, гномов и прочих сказочных атрибутов. Поэтому я решила обучить модель легкому, немного волшебному художественному стилю Клода Моне. И с ее помощью посмотреть как могли бы выглядеть дома тех или иных сказочных персонажей.

Исходные изображения

Я взяла самые популярные изображения картин Клода Моне с его официального сайта. И так как их размер был слишком большим для обработки нейросетью, то я приняла решение «порезать» их на более мелкие фрагменты и на их основе обучать модель.

big
Исходный размер 3319x2483

Процесс обучения

Инструменты, использованные для реализации проекта:

Stable Diffusion — обучение генеративной нейросети под свой стиль

Hugging Face — получение токена для обучения нейросети, загрузка полученной модели на сайт

Google Colab — выполнение кода и генераций

Обучение модели осуществлялось на основе кода, данного нам преподавателем.

После того, как были установлены все необходимые библиотеки, я собрала вручную 28 изображений, «порезала» их на множество фрагментов и получилось 56 изображений для датасета, который и был использован для обучения нейросети.

Исходный размер 2705x680

После загрузки датасета и других данных я начала обучение модели in impressionism style.

Исходный размер 1044x665
Исходный размер 1291x548

И после того, как модель обучилась я приступила к генерации картинок.

Исходный размер 2127x1119

Готовая серия изображений

Итак, предлагаю вам посмотреть на мой маленький архитектурно-фэнтезийный от самого маленького здания до самого большого.

Промты к изображениями будут подписаны ниже.

Начать, думаю, стоит с дома лесного эльфа, который поселился в самом красивом мухоморе в округе.

0

photo collage in impressionism style, an elf’s house in a mushroom with a red hat, with a wooden door and a round window from which light can be seen

Это домик гномика, который поселился в старом дубовом пеньке в густом лесу.

photo collage in impressionism style, surrounded by dense forest and fireflies fantasy little gnome house made from an old tree stump, with a flat roof covered with mushrooms and moss

Кто из нас не мечтал о том, чтобы хоть немного пожить в доме на дереве? А вот у гнома-лесовика он есть и в нем даже можно пожить, если конечно, договориться с хозяином.

Исходный размер 1024x1024

photo collage in impressionism style, a house in a tree, with suspension bridges, standing in a dense magical forest, on which stands a small gnome in a red cap, entwined with bindweed

Это дом цветочной феи, которая живет в розовом кусте.

Исходный размер 1024x1024

photo collage in impressionism style, a tine fairy house located in the rose bush

А это дом водяной феи, которая живет на берегу живописного лазурного озера.

Исходный размер 1024x1024

photo collage in impressionism style, a fairy house standing on a small island surrounded by azure water with graceful elements of the facade and a picturesque garden around it

В моем волшебном мире есть место всем! И даже героям Толкиена — хоббитам.

Исходный размер 1024x1024

photo collage in impressionism style, a hobbit house standing under a spreading oak tree with a round yellow door, surrounded by a luxurious flowering garden

Обучение генеративной модели Stable Diffusion под стиль Клода Моне
Проект создан 10.04.2025