Идея
Цель проекта — обучение нейросети Stable Diffusion генерации изображений в стиле художника Дэвида Хокни.
Для анализа я предоставила искусственному интеллекту датасет из 15 изображений, которые самостоятельно нашла в интернете и собрала в папку. Нейросеть должна исследовать композиции, характер мазков, колористику, формы, пластику, тектонику и другие характеристики картин художника. Основываясь на изученном материале, искусственный интеллект, должен научиться генерировать изображения в искомом стиле.
Ниже представлены некоторые картины Дэвида Хокни из составленной мной базы данных, на которой должна обучаться нейросеть.
Дэвид Хокни, «Американские коллекционеры», 1968
Дэвид Хокни, «Красные горшки в саду», 2000
Процесс обучения нейросети для генерации изображений:
— Сбор изображений и форматирование их под одинаковый формат с сохранением пропорций; — Загрузка BLIP; — Формирование списка файлов; — Создание файла метаданных; — Удаление модели из памяти; — Конфигурация модели акселерейт; — Тренировка модели; — Создание изображений на базе обученной модели LoRA; — Визуальная оценка качества созданных изображений; — Эксперименты с промптами.
Результирующая серия изображений
Промпт: «photo collage in HOCKNEY style, full-length painting of a man»
В итоговой серии из десяти изображений представлены пейзажи и портреты, созданные нейросетью в стиле художника. С первой генерации виден особый характер, фактура растительности, светотеневая моделировка, стройная композиция и некоторая отстранённая действительность, которые на самом деле напоминают картины Дэвида Хокни.
Промпт: «photo collage in HOCKNEY style, road in village»
Получившиеся пейзажи отражают фактуру и крупность мазков кисти художника, контрастность пятен, форм и линий, а также передают насыщенность цветов произведений Дэвида Хокни.
Промпт: «photo collage in HOCKNEY style, sunny day»
Промпт: «photo collage in HOCKNEY style, autumn forest»
Промпт: «photo collage in HOCKNEY style, a terrace overlooking a clearing with a lake»
Промпт: «photo collage in HOCKNEY style, two people are in a spring forest»
Интересно наблюдать за тем, как нейросеть изображает людей. Искусственный интеллект считывает и имитирует позу, узнаваемый наклон человека, который часто создаёт Дэвид Хокни. Даже такие детали учтены в сгенерированных изображениях.
Промпт: «photo collage in HOCKNEY style, a swimming pool among green hills»
Важно обратить внимание ракурсы и фактуры в полученной серии изображений. Особая компоновка пространства, передача текстур воды и растений — всё очень похоже на стиль в работах Дэвида Хокни.
Промпт: «photo collage in HOCKNEY style, people are walking in nature under a clear sky front view»
Промпт: «photo collage in HOCKNEY style, full-length painting of a woman with clear sky on the background»
Промпт: «photo collage in HOCKNEY style, full-length painting of women and man with clear sky on the background»
Подводя итоги, необходимо отметить, что искусственному интеллекту удалось научиться имитировать стиль Дэвида Хокни, отражая: — характерную фактуру растительности, воды и грунта пейзажей; — узнаваемую отстранённость композиций; — колористику; — особую пластику форм и линий объектов и персонажей.
Однако, в работе нейросети есть точки роста: уточнения требуют фрагменты с изображением лиц людей, а также участки, в которых некоторые объекты теряют внятные контуры, сливаются, образуя неясные переходы. Усовершенствовать получаемые результаты можно расширением объёма исходного датасета для обучения модели.
Описание применения генеративной модели
Для уточнения деталей и исправления ошибок в работе кода я использовала DeepSeek.
