Концепция
Недавно я открыл для себя мир графических романов Хуанхо Гуарнидо и был поражён его мастерством. Его культовая серия «Blacksad» (где он выступает в роли художника) — это не просто детектив с антропоморфными персонажами, а настоящий визуальный шедевр, где каждая линия, каждый контур, каждая игра света и тени создают неповторимую атмосферу нуара и драмы. Меня захватила эта эстетика — резкие контрасты, выразительные персонажи, глубокая эмоциональность в каждой сцене.
Но что, если бы его стиль ожил в генеративном искусстве? Этот вопрос стал отправной точкой моего проекта.
Используя возможности нейросети, я обучаю LoRA-модель воспроизводить уникальный стиль Хуанхо Гуарнидо, чтобы создавать новые иллюстрации, сохраняя дух его графических романов.
Цели проекта:
Исследовать, как визуальный стиль Хуанхо Гуарнидо — с его выразительной линией, драматичной светотенью и нуарной эстетикой — может быть адаптирован для генеративных нейросетей.
Проверить, сможет ли модель на основе Stable Diffusion XL с обученной LoRA воспроизводить характерные черты стиля Гуарнидо: антропоморфных персонажей, детализированные фоны, эмоциональные сцены.
Создать рабочую модель, способную генерировать иллюстрации в стиле Гуарнидо по текстовым описаниям, и опубликовать её для общего доступа.
Работа с кодом
Первым шагом я проверил доступность GPU и установил все необходимые библиотеки: bitsandbytes для оптимизации памяти, transformers для работы с моделями, accelerate для распределённого обучения, peft для LoRA и diffusers для работы с диффузионными моделями.
Создал папку для датасета, куда загрузил работы Хуанхо Гуарнидо. Важно было собрать разнообразные примеры, охватывающие разные аспекты его стиля: портреты, сцены, детали.
Для визуальной проверки я отобразил первые 5 изображений сеткой. Это помогло убедиться в качестве и однородности датасета.
Чтобы модель понимала содержание изображений, я использовал BLIP (Bootstrapping Language-Image Pre-training) для автоматической генерации текстовых описаний.
Каждому изображению была сгенерирована подпись, к которой я добавил префикс, указывающий на стиль Гуарнидо. Это создавало связь между визуальным контентом и текстовым описанием, необходимую для обучения.
После генерации подписей я очистил память от модели BLIP, чтобы освободить ресурсы для обучения LoRA.
Возникла техническая сложность: скрипт обучения пытался открыть файл metadata.jsonl как изображение. Я решил эту проблему, переместив файл с метаданными из папки с изображениями.
После настроил accelerate для оптимального использования GPU и авторизовался в Hugging Face для последующей загрузки модели. Само же обучение в итоге заняло 1 час 14 минут.
После обучения я загрузил модель на Hugging Face, чтобы сделать её доступной для других.
Серия полученных изображений
illustration in Juanjo Guarnido style, anthropomorphic panther detective in trench coat standing under street lamp in heavy rain at night, neon signs reflected in puddles, noir atmosphere, detailed in
illustration in Juanjo Guarnido style, 1950s jazz club interior, anthropomorphic animal musicians on stage playing saxophone and double bass, smoke-filled air, dramatic stage lighting, audience silhou
illustration in Juanjo Guarnido style, close-up portrait of anthropomorphic fox femme fatale, cigarette smoke curling around face, mysterious smile, dramatic chiaroscuro lighting, detailed fur texture
illustration in Juanjo Guarnido style, crime scene investigation in luxury apartment, anthropomorphic animal detectives examining evidence, police tape, scattered documents, dramatic lighting from sin
Полученные результаты демонстрируют эффективность LoRA для стилевого переноса: модель успешно воспроизвела ключевые элементы визуального языка Хуанхо Гуарнидо. Хотя сгенерированные изображения сохраняют общую стилистику, им не хватает композиционной смелости и эмоциональной насыщенности оригиналов. Это подчеркивает принципиальное различие между техническим воспроизведением стиля и подлинным художественным высказыванием.
Тем не менее, проект подтвердил, что нейросетевые технологии открывают новые возможности для творческих экспериментов, позволяя «оживлять» и развивать художественные стили в цифровой среде.
