«Паломничество в Сан-Исидро». Франсиско Гойя. 1820–1823
Франсиско Хосе де Гойя-и-Лусьентес
Франсиско Гойя — испанский художник XVIII века. Начало его творчества охватывает веселые и легкие настроения, яркие цвета и сюжеты, но с течением времени тягостные и трагические ощущения стали преобладать в произведениях мастера. Картины позднего периода отличаются мрачностью и созданием тревожного чувства от их созерцания. Уникальный стиль Франсиско Гойи послужил развитию романтизма и реализма, а также вдохновлял своими работами художников-импрессионистов.
«Два старика вкушают суп». Франсиско Гойя. ок. 1820-1823.
Идея проекта
Особые чувства вызывают портреты: люди на его картинах искажены гримасами боли и отчаяния. В них прорывается что-то нечеловеческое, ужасающее. Такие же эмоции я чаще всего испытываю, смотря на ненамеренно пугающие генерации искусственного интеллекта. Исходя из этого, мне показалось даже немного ироничным использовать недостатки в виде искаженных лиц как преимущество и характерные особенности стиля.
слева: «Тио Пакете». Франсиско Гойя. 1820. справа: «Монах, разговаривающий со старухой». Франсиско Гойя. 1824-1825.
В особенности позднее творчество Гойи изобилует устрашающими гримасами на лицах людей. В обучении я старалась повторить этот характерный период. Также мне было важно сохранить не только манеру изображения людей, но и добиться стилистического сходства масляной живописи: легкие мазки, создающие мягкую дымку вокруг портрета, заметные следы от кисти, артефакты, передающие ощущение старины.
слева: «Две женщины и один мужчина». Франсиско Гойя. ок. 1820-1823. справа: «Два старика». Франсиско Гойя. ок. 1820-1823.
Обучение модели LoRA
Для более полного понимания нейросетью стиля художника в качестве датасета были использованы произведения Франсиско Гойи разных периодов. Преимущественно были взяты картины с изображением людей, поскольку именно портреты мне хотелось получить в итоговом результате. Обучения модели LoRA происходило на базе Stable Diffusion XL.
«Шабаш ведьм». Франсиско Гойя. ок. 1820-1823.
Основным фокусом внимания в обучении я хотела сделать на повторение общего настроения художника, поэтому был предоставлен датасет из 80-ти картин. Для лучшего понимания визуального стиля к каждому изображению было приложено текстовое описание:
Image in the style of the Spanish school of painting, late period of Francisco José de Goya. Academic drawing in dark and gloomy tones. Sharp contrast of dirty yellow light and black shadow. Execution technique: oil, free brush, visible brushstrokes. Depth perspective. Central composition.
поэтапное обучение модели
Поначалу нейросеть Stable Diffusion-1.5 выдавала не совсем подходящие изображения, с отсутствующими телами или конечностями, но уже близкое к духу Франсиско Гойи. Получилось это за счет передачи масляной техники художника, характерных мягких мазков и узнаваемой цветовой гаммы.
При создании проекта я использовала приложение Cursor AI с автоподбором нейросетей для оптимизации работы и минимизирования ошибок с моей стороны. Благодаря этому удалось задать правильный вектор обучения и вовремя исправить неточности кода. Для улучшения качества генераций был использован Topaz Gigapixel AI.
Финал
В результате нейросеть научилась повторять характерные особенности стиля Франсиско Гойи:
• Используется мрачная, приглушенная палитра, с большим количеством черного и сепии.
• Лица людей изображаются с дефектами, вызывая дискомфорт и эффект зловещей долины.
• Воспроизведены мазки кисти, создающие мягкую дымку вокруг персонажа, делая изображение нечетким, похожим на видение из сна.
слева: StableDiffusion-1.5 справа: «Женщина с веером». Франсиско Гойя. 1807.
слева: StableDiffusion-1.5 справа: «Майя и Селестина». Франсиско Гойя. 1824-1825.
Думаю, человек, погруженный либо в классическое, либо в нейросетевое искусство, сразу определит применение искусственного интеллекта. Однако неподготовленный зритель действительно может перепутать генерации с картинами великого художника.
StableDiffusion-1.5
StableDiffusion-1.5
В заключение могу сказать, что теперь искаженные и уродливые лица людей, созданные искусственным интеллектом, — это не артефакт машинного обучения, а стилистическая особенность, продолжающая философию Франсиско Хосе де Гойи-и-Лусьентеса.
Ссылки
•Stable Diffusion 1.5 https://huggingface.co/stable-diffusion-v1-5/stable-diffusion-v1-5
•Topaz Gigapixel AI: https://www.topazlabs.com/gigapixel
•Cursor AI: https://cursor.com/
