Мне нравится делать быстрые зарисовки — скетчи. И я решила, что хочу чтобы нейросеть тоже умела рисовать в этом стиле.К тому же я, к сожалению, совершенно не умею рисовать людей, и даже в этом жанре, который прощает много, у меня они не получаются. Если я не могу этого сделать, то пусть это сделает хотя бы нейросеть.
Процесс обучения
Специально для того, чтобы обучить нейросеть, я сделала 30 быстрых зарисовок случайных картинок из моей галереи.Посмотреть их можно тут
Само обучение проходило согласно предоставленному нам примеру.
При обучении было сделано 1000 итераций с одним промежуточным результатом через 500 шагов обучения.
Итоги обучения
Для генерации изображений использовалась библиотека diffusers с подключением обученного LoRA-адаптера
Прежде чем переходить к самому интересному для меня — генерации изображения человека, я решила посмотреть, как прошло обучение на генерации изображений, которые были в обучающем датасете.Масштаб классификатора (guidance_scale) я выставила 5, чтобы дать нейросети больше свободы для действия, в кодах для генерации изображения, которых не было в датасете, я подняла этот параметр до 7.
мой скетч/результат ии по промту «duck swimming in a pond, a drawing in the style of son_style»
Среди всех обучающих рисунков была только одна уточка поэтому нейросеть практически точно ее повторила, а вот котов было несколько и мне кажется это заметно по результатупромт: cute kitty, a drawing in the style of son_style
Я постепенно отдалялась от того, что было конкретно в датасете, поэтому далее попросила сгенерировать дом в стиле конструктивизма и букет роз. Среди моих скетчей были и здания, и цветы, но конкретно этих не было.
a building in the constructivist style/ a bouquet of roses in a glass vase a drawing in the style of son_style
Наконец, я попросила сгенерировать изображения людей, и надо сказать, результат меня порадовал
A girl in a dress and a man are standing next to each other in full height, a drawing in the style of son_style
a man at a table in a cafe/a street musician playing a guitar a drawing in the style of son_style
Мне кажется, что, исходя из показанных выше картинок, можно сделать вывод, что обучение прошло успешно
Результирующая серия
В качестве результирующей серии мне захотелось сгенерировать небольшой комикс.
В качестве основы для сюжета я взяла анекдот, который по моей просьбе рассказал DeepSeek.
— Как называется дизайнер, который сделал макет с первого раза и клиент его утвердил без правок?
— Вымысел.
Для разрешения конфликтов версий библиотек и настройки совместимости окружения, а также для помощи в генерации идеи и формулировании текста промта была использована нейросеть DeepSeek
