Концепция
Что если бы в Древней Греции задумывались о далеких цивилизациях так же, как размышляем о них мы? Как бы это отражалось в их искусстве?
В этом проекте воспроизведена гипотетическая реконструкция данной идеи. За основу взят один из самых распространенных античных видов искусства: мозаика.
Исходными изображениями для обучения модели послужили непосредственно мозаики с различными сюжетами для наиболее разнообразных генераций.
Готовые изображения
Итоговая серия изображений состоит из 10 генераций. На каждом из них представлен определенный аспект представления древних греков о неземной цивилизации. Начиная от внешенего вида самих инопланетян и других существ, заканчивая их транспортом и окружением.
Обученная модель успешно переняла мозаичную стилистику. Во многих изображениях заметен не просто заметен не просто хаотичный рисунок из маленьких деталей, а продуманные линии из смальты и камня, которые словно укладывали вручную.
Более того, в стилистике отражены характерные цвета и текстуры.
Что же касается персонажей, по началу модели было достаточно сложно понимать, как выглядят инопланетяне, так как она обучалась на образах людей. Поэтому возникала необходимость прописывать более подробные промпты, в которых выделялись особенности пришельцев.
Особенно удачными, на мой взгляд, инопланетные существа получились при генерации обложек проекта. Они выглядят максимально приближенными к привычным нам образам.
Процесс обучения
Обучение проводилось с использованием метода DreamBooth + LoRA на базовой модели Stable Diffusion XL (SDXL). Датасет состоял из 30 изображений мозаик разрешением 512×512 пикселей.
Для каждого изображения с помощью модели BLIP было автоматически сгенерировано текстовое описание (caption), к которому добавлялся единый префикс стиля «ancient Greek mosaic style,». Это позволило модели ассоциировать ключевую фразу с усваиваемыми стилевыми признаками.
Обучение модели происходило в Google Colab и заняло около 40 минут.
