[1] Концепция проекта
Создание визуальной вселенной, в которой смешиваются бескрайние северные просторы и суровые пейзажи космоса. Исследование возможного симбиоза астрономических и арктических явлений: туманности, галактики, звездные скопления, ледники и заснеженные горы. Проект ставит целью нахождение новых эстетических форм на стыке двух огромных самодостаточных миров.
[2] Исходные изображения
Все медиа материалы, использованные в работе были взяты с сайта Wikimedia Commons с тегом «No restrictions»
Обучение проводилось на датасете, состоящим из двух тематических групп: 10 фотографий космического пространства и 10 изображений северных пейзажей. Все изображения были приведены к единому квадратному формату 512×512 пикселей с сохранением исходного качества.
[3] Описание процесса
Для создания текстовых описаний к изображениям была использовала модель BLIP, которая автоматически генерировала содержательные подписи. К полученным описаниям были добавлены тематические префиксы: для космических снимков — «cosmic space, stars, galaxy…», для северных — «northern nature, snow, ice…».
Это научило модель четко разделять два концепта и в дальнейшем эффективно их комбинировать. Процесс дообучения был реализован через методику DreamBooth в сочетании с LoRA.
[4] Серия готовый работ
При первых попытках обучения модели, я использовала простые описательные промпты. Полученные из них изображения соответствовали тематике, но выглядели достаточно реалистично, практически как обычные северные пейзажи с добавлением звездного неба или северного сияния. Технически, это было смешение вселенных, о котором я просила, но необходимо было получить более впечатляющий и невообразимый результат.
пример промптов: «glowing stars over snow covered mountains, cosmic winter wonderland, celestial north» «aurora borealis and nebulae together, space and arctic mix, ethereal landscape»
серия по первым промптам
Для достижения более выразительных и фантазийных результатов промпты были переработаны в сторону сюрреалистичности и визуальной метафоричности. В описания было добавлены такие слова: «surreal», «fantasy», «ethereal», «magical», «cosmic energy». Последующие формулировки стали описывать взаимодействие миров: «галактика, стекающая по заснеженным склонам», «северное сияние, переходящее в космическую туманность», «звездная пыль на ледяных равнинах».
Такой подход позволил получить результаты выходящие за рамки буквальной интерпретации и начать создавать уникальные гибридные образы севера и космоса.
Промпты для результирующей серии работ:
Галактика в горах — surreal cosmic north, entire galaxy flowing like river through frozen mountains, planets in aurora sky, magical, ethereal, fantasy landscape, highly detailed, artstation
Космическая энергия — «northern lights made of pure cosmic energy and stardust, surreal frozen lake reflecting multiple galaxies, fantasy arctic, dreamlike, mystical, vibrant colors, concept art»
Планеты над снегами — giant colorful planets hovering over snowy arctic landscape, surreal cosmic winter, stars forming magical patterns, ethereal, fantasy, highly detailed, digital painting
Магический вихрь — cosmic vortex in arctic sky, swirling galaxy and aurora together, magical energy flowing over ice, surreal fantasy landscape, ethereal, mystical, artstation trending
Звездный водопад — «waterfall of stars and cosmic dust flowing down frozen mountains, surreal northern lights, fantasy arctic with nebula colors, dreamlike, magical, highly detailed concept art
[5] Визуальный анализ изображения
Галактика в горах
«Галактика в горах» — Розово-фиолетовая туманность встроена в северный пейзаж, стирает границу между мирами — Светящаяся линия на земле выглядит как «космическая река», заменяющая собой природные элементы — В результате возникает ощущение, что север это не часть Земли, а поверхность другой планеты
Космическая энергия
«Космическая энергия» — Основой служит реалистичный северный пейзаж, но северное сияние гиперболизируется и превращается в космическую энергию — Лёд и вода работают как зеркала, усиливая космический эффект и создавая ощущение бесконечного пространства
Планеты над снегами
«Планеты над снегами» — Северный пейзаж используется как «чистый лист» для размещения космических объектов — Планеты внедрены в пространство, получается гибрид в котором небо опустилось на землю и космос стал частью ландшафта
Магический вихрь
«Магический вихрь» — Холодная палитра формирует ощущение космической глубины — Поверхность внизу похожа на ледяную равнину, что добавляет северного контекста — Центральный вихрь визуально напоминает одновременно и шторм, и галактическую спираль — Светящиеся облака также подчеркивают смешение структур
Звездный водопад
«Звездный водопад» — Зеленые световые потоки отсылают к северному сиянию, но сила и масштаб их указывает на внеземное происхождение — Горный водопад добавляет фантастичности реальному пейзажу
[6] Анализ проекта
Анализируя проект, можно сказать, что он успешно демонстрирует симбиоз космической и северной экосистем. Модель усвоила ключевые принципы гибридизации двух масштабных миров:
Цветовая интеграция: Холодные лазурные и фиолетовые оттенки севера органично сочетаются с глубокими черными и синими тонами космического пространства.
Текстуральное слияние: Мерцающая текстура звездного неба и зернистость космической пыли перенесена на ледяные поверхности арктических ландшафтов
Структурная адаптация: Галактические формы, спирали, туманности, планеты, россыпи звезд, все естественно вписаны в пейзажи севера
Световая динамика: Свечение северного сияния, звездный свет и космические тела, все объединяется и создает новый тип освещения
[7] Процесс обучения
Базовая модель: Stable Diffusion XL 1.0
Метод адаптации: DreamBooth с использованием LoRA
Размер датасета: 20 изображений (10 космос + 10 северные пейзажи)
Количество шагов обучения: 800
Разрешение изображений: 512×512 пикселей
Оптимизатор: AdamW с 8-битной версией
Скорость обучения: 1e-4
Размер батча: 4
[8] Описание применения генеративной модели
Обученная LoRA позволяет генерировать изображения на стыке космоса и северной природы. Достаточно задать текстовый промпт (например, «северное сияние, переходящее в галактическую туманность»), и модель создает изображение, опираясь на выученные концепты.
Использованные модели ИИ:
Stable Diffusion XL 1.0 Цель: Базовая архитектура для генерации изображений
BLIP Цель: Автоматическая аннотация изображений
DreamBooth + LoRA Цель: Персонализация модели под концепты (космос + север)
VAE Цель: Оптимизация памяти и качества кодирования
