проектини нейросетини
Концепция и референсы
Весь Тикток пару недель назад захватил ужасающий и прекрасый тренд — сгенерированные картинки животных, совмещенных с самыми разными объектами, под хаотичную итальянскую речь. У них появились имена: Бомбардило Крокодило, Тралалело Тралала, Бомбомбини Гузини и другие представители этой странной касты.
Знаменитая сцена боя между Бомбардилло Крокодило и Бомбомбини Гузини
Насмотревшись на бомбардило стайл (именно так я решила назвать этот хаотик в моем проекте) в Тиктоке, я поняла, что хочу создавать своих собственных героев и внести свою лепту в виток этой истории.
Однако я столкнулась с тем, что для генерации качественных изображений необходим платный ресурс, так как бесплатные нейросети либо выдавали мне низкокачественную картинку (так как промпт «создай мне крокодила, тело которого выглядит как ананас, а лапы и морда как у крокодила, он стоит на двух ногах и улыбается, а на его лице солнечные очки» оказался для них внезапно сложным), либо приходилось по несколько раз перегенерировать изображения, чтобы достичь удовлетворительного результата, а на это расходовались кредиты.
Исходных изображений было около 50, все они были взяты с просторов Тиктока
Это привело меня в некоторое расстройство, но вместе с тем дало стимул создать свой собственный инструмент, к которому я всегда буду иметь доступ и который поймет мою потребность создать лягушку-томат с полуслова. Да, изображения для обучения модели сгенерированы нейросетью, но каждый из них был создан человеком, в каждом бомбардило заложен свой концепт, своя история, к тому же, мне было интересно обучить нейросеть на нейросети в качестве эксперимента.
Мне захотелось обобщить идеи и концепции бомбардило стайла и создать удобный инструмент, который заточен под создание новых шедевров брейнрота без необходимости описывать долгие промпты и генерировать все по нескольку раз, пока результат не станет удовлетворительным.
Мои генерации
В основе стиля лежит фотореалистично-мультяшное изображение какого-либо животного в симбиозе с неким предметом или едой. Они объединяются в единое целое и обязательно получают забавное имя на итальянский манер. Все промпты подписаны под изображениями.
images of animals combined with objects in BOMBARDILO style, pinguin with orange
images of animals combined with objects in BOMBARDILO style, a giraffe with a tulip; images of animals combined with objects in BOMBARDILO style, monkey with chess
Меня удивило то, как быстро нейросеть научилась генерировать весьма качественный контент. Как правило, она с первого раза реагировала на промпты типа «тигр и персик» и выдавала очень забавные картинки.
images of animals combined with objects in BOMBARDILO style, a beaver with a planet; images of animals combined with objects in BOMBARDILO style, an owl with a cactus
images of animals combined with objects in BOMBARDILO style, a crocodile with bread
Попадание в стиль было довольно точным с первых генераций. Возможно, это связано с тем, что исходные изображения тоже были сгенерированы нейросетью, и модели было проще обучиться на них.
images of animals combined with objects in BOMBARDILO style, a goose with a rose; images of animals combined with objects in BOMBARDILO style, a frog with a tomato
Изображения очень яркие и разнообразные. Они все отличаются по цветовой гамме и окружению, хотя я не описывала это в промптах и нейросеть сама вытянула эту особенность из датасета. Модель самостоятельно продумала обстановку, и пусть иногда ошибалась в количестве лап, это, на мой взгляд, придавало брейнротам только больший антураж.
images of animals combined with objects in BOMBARDILO style, a tiger with a peach
Каждому животному я придумала имя (в левом нижнем углу). Это сделало меня счастливой.
images of animals combined with objects in BOMBARDILO style, an bear with a clock; images of animals combined with objects in BOMBARDILO style, a cat with an apple
Описание применения генеративной модели
Проект был создан с использованием генеративной модели Stable Diffusion XL с DreamBooth и LoRA, которую я дообучала на своем датасете с целью создать уникальную модель, генерирующую изображения в стиле брейнрота в образовательных целях (познакомиться с данной технологией и освоить ее) и для собственного развлечения. Также некоторым картинкам я расширяла фон с помощью Image Outpaint.
Видео с тикток аккаунта @italianbrainrot
