Обучение генеративной модели под мой художественный стиль
Идея проекта
Я решила натренировать нейросеть на создание иллюстраций в моем стиле, чтобы в дальнейшем их можно было бы использовать для рефернсов. Это позволит мне не только ускорить процесс творчества, но и экспериментировать с новыми идеями и концепциями. Созданные изображения будут служить источником вдохновения и помогут мне развивать свой стиль, находя свежие решения и визуальные акценты для моих будущих проектов.
Исходные изображения
Процесс обучения
Я использовала 1000 шагов обучения с промежуточными результатами каждые 500 шагов. Это заняло у меня примерно 2 часа.
Промежуточные изображения
Checkpooint был после 500 шагов обучения. Я использовала промпт: «dark forest landscape», чтобы получить данные изображения. Можно заметить, что нейросеть уже научилась генерировать иллюстрации в моем стиле, но персонажи выглядят очень деформированными.
Итоговые изображения
После 1000 шагов я снова ввела тот же промпт («dark forest landscape»), и уже видно разницу: деревья стали более четкими, а персонажи приобрели узнаваемые очертания.
Далее я попросила нейросеть изобразить городские пейзажи, которые можно будет в дальнейшем использовать, как рефернсы для моих работ.
И я считаю, что модель неплохо с этим справилась. Нейросеть смогла передать цветовую гамму и освещение, а также особенности текстур.
На изображениях выше представлены различные персонажи, которых изобразила нейросеть в моем стиле. Несмотря на то, что люди выглядят несколько деформировано, их дизайн можно использовать, как идеи для моих будущих проектов.
Примеры промтов, которые я использовала: «dark forest with creatures landscape», «abandoned town landscape», «village in sunshine» и другие.
Ссылка на код и hugging face
Ссылка на код: https://colab.research.google.com/drive/1j3eHx1llqo9r-rQF-KPebwOntbY2UZF4?usp=sharing
Ссылка на hugging face: https://huggingface.co/ershmash/my_style1_LoRA
Описание применения генеративной модели
Искусственный интеллект применялся для создания изображений, основанных на моем стиле. Использовалась модель Stable Diffusion.
Ссылка на модель: https://stability.ai/
