Обучение генеративной нейросети под свой стиль

Рисование с детства является важной частью моей жизни. Со временем увлечение переросло в деятельность, которая приносит не только радость, но и доход: мои работы нашли отклик у аудитории, и я начала получать индивидуальные заказы.Однако увеличение объёма творческой работы привело к эмоциональной усталости и постепенному выгоранию. Необходимость постоянно создавать новые оригинальные изображения, учитывая все пожелания заказчиков, заставила задуматься о том, как сбалансировать затраченное время и творческий процесс.В рамках изучения курса мне стало интересно, как генеративные нейронные сети, которые в последние пару лет сделали огромный рывок в качестве, могут помочь художникам. Тем более, что сгенерированные искусственным интеллектом короткие сериалы с людьми или животными набирают популярность.

Цель проекта — адаптировать модель к особенностям моего стиля с помощью дообучения на рисунках.Полученные изображения будут использоваться не как готовые произведения, а как источник вдохновения и основа для дальнейшей доработки. Такой подход позволит ускорить этап поиска идей, расширить возможности визуального эксперимента и уделить больше внимания проработке с учётом требований заказчиков.Я считаю, что такие генеративные модели будут служить вспомогательными инструментами в творчестве.

После завершения обучения модель использовалась для генерации изображений по текстовым запросам с сюжетами и объектами, которые часто встречаются в моих работах: коты и природный фон.

Стоит отметить успешную передачу особенностей фонового оформления. Нейросеть достаточно точно воспроизвела характерные контрастные элементы цифровых кистей, которые я использую при рисовании в программах. Особенно заметно это проявляется на изображении облаков и травы: у первых сохраняется округлость линий между тенью и светом, а у второй — «пушистая», плотная композиция. Обучаемая модель смогла уловить некоторые особенности моей манеры работы с окружением и перенести их в новые композиции. Фон в работах играет важную роль в формировании впечатления и соответствующей атмосфере настроения.

Также меня порадовало, насколько точно нейросеть передала линии в контуре шерсти на мордах и шеях персонажей. Она смогла сохранить характерные штрихи, которые во многом отделяют мой стиль рисования от других художников. Важно, что эти линии выглядят не просто как текстура шерсти, а повторяют мой привычный способ её прорисовки.

Портреты, на мой взгляд, получились успешнее всего. Поскольку этот формат чаще всего заказывают у меня, в обучающем датасете он был представлен значительно в большем количестве, чем работы с проработанным фоном. Вероятно, это повлияло на результат: модель достаточно точно воспроизвела характерные особенности персонажей, особенно форму носа, контуры морды и глаза.