Тейват — мир популярной фэнтезийной игры Genshin Impact, известный своей необычной и разнообразной кухней. Еда не только очень аппетитно нарисована, но и продумана до мелочей. Так, например в двух разных регионах представлены абсолютно разные кухни, в одном схожая с европейской, а во втором с азиатской.

В игре уже существует еда, вдохновленная дизайнами персонажей, поэтому в рамках проекта было решено пофантазировать и обучить нейросеть создавать собственные варианты такой стилизованной еды.

Примечание:

Данный проект является учебным и выполнен в некоммерческих целях. Все персонажи, элементы вселенной и стилистика Genshin Impact принадлежат компании HoYoverse. Сгенерированные изображения используются исключительно в образовательных и исследовательских целях.

Я собрала датасет из квадратных изображений с едой из игры, стараясь выбирать более разнообразные варианты блюд, для более точного обучения. Датасет составил около 30 изображений.

После сбора датасета были установлены необходимые библиотеки для работы со Stable Diffusion XL. Для генерации подписей к изображениям использовалась модель BLIP. Обучение проводилось с использованием технологии DreamBooth LoRA и специального токена для запоминания стиля.

В результате обучения, при первой попытке генерации изображений с менее подробным промптом, получилась еда похожая на ту что из игры, но с лишними деталями и фоном.

«a delicious food from Genshin Impact, dish representing wind element, swirling shapes, light green glow, abstract food design anime style, simple background» / «a delicious food from Genshin Impact, broken dessert revealing glowing core inside, dramatic reveal, high contrast, anime style, simple background»

Понемногу я редактировала промпт, пробуя создавать более фэнтезийные и необычные дизайны, больше приблизить их к еде из игры.

«a delicious food from Genshin Impact, potion-like soup boiling in a glass bowl, magical symbols, anime style, glowing runes, simple background» / «a delicious food from Genshin Impact, panda-shaped rice ball, bamboo leaves decoration, adorable style, anime style, simple background»

В итоге мне удалось приблизиться к нужному мне результату, в меру детальному, с необычными дизайнами и простым фоном, так чтобы картинки максимально напоминали исходные изображения.

«a delicious food from Genshin Impact, drink inspired by Kokomi, clear liquid with bubbles and tiny fish inside, soft blue tones, magical ocean vibe, anime style, high detail, centered composition, simple background, solid color background» / «a delicious food from Genshin Impact, slime-shaped jelly dessert, translucent, colorful, glowing inside, anime style, simple background»

В промпты итоговой серии я, помимо визуального описания блюда добавляла подсказки ввиде имен персонажей, чьим дизайном должно быть вдохновлено блюдо. В итоге получилось довольно похоже, в обычной еде сохранялась палитра или небольшие элементы, напоминающие персонажей и позволяющие ассоциировать блюда с ними.

«a delicious food from Genshin Impact, dish inspired by Raiden Shogun, purple lightning effects, elegant dish, anime style, simple background»

«a delicious food from Genshin Impact, marshmallow ghost dessert inspired by Hu Tao, cute ghost shape, soft white texture, red flowers around, playful but slightly spooky, warm glow, anime style, high detail, centered composition, simple background, solid color background»