Концепция проекта
Для своего творческого вдохновения я решила обучить генеративную модель своему стилю рисования.
Для датасета я взяла папку с моими рисунками, которые я заранее отредактировала под формат нейромодели.
Мои рисунки
Сгенерированные рисунки
Для генеративной модели мой стиль стал настоящим испытанием на прочность. Ей было очень сложно обучаться, поэтому итоговые изображения не совсем совпадают с моими рисунками.
two cute fluffy kittens with angel wings, sitting together, pastel rainbow colors, big glossy eyes, soft fur, wearing floral crowns with hearts, stars and moon decorations, gold jewelry chains, bows a
1)two identical elegant women with a shared body 2)unicorn with human face, butterfly wings, decorative chains across body, floral decorations, ribbons on legs, stylized fantasy fashion illustration
cute fantasy fluffy cat unicorn hybrid with wings, pastel rainbow colors, big expressive eyes, detailed fur, wearing gold jewelry chains with hearts and stars, magical aesthetic, soft watercolor penci
Однако стоит отметить карандашную основу рисунков, которые в целом являются одним из аспектов моих работ.
Сравнение
1)triple giraffe heads, ballet pose, decorative bodice with logo, flower accessories, delicate ornaments, stylized fashion illustration 2)fantasy unicorn shoe, photo in flntstyle style
Интересно посмотреть в сравнении. Чем точнее был промт, тем менее нейромодель делала похоже.
При этом краткий промт про единорогообвуь она выполнила достаточно приближенно.
Таким образом, можно сказать, что нейросеть лишь частично справилась с поставленной задачей. Ей очень сложно было понять, что изображено на фотокарточках, поэтому распознавание шло очень медленно и сложно. Вывод один — меня вряд-ли заменит нейросеть.
Описание кода
Обучение модели проходило в Гугл колаб. Используемая нейросеть Stable Diffusion на методе LoRA.
процесс обучения модели
процесс генерации изображений
Описание применения генеративных моделей
Для всех генераций я собирала промты через Gemini.
