Загрузка 0
ГЛАВНОЕ МЕНЮ
Связаться со мной
ПОДЕЛИТЬСЯ
© bagrov.by 2023 - 2026 / Все права защищены.

Мой блог

Листай вниз

Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей

Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Теги :
Просмотров: 0

Создание 3D-персонажей из 2D-артов: рабочий пайплайн на базе ИИ

Процесс разработки игровых ассетов сегодня стремительно меняется благодаря искусственному интеллекту. Я решил протестировать современный пайплайн создания трехмерных персонажей в стилистике low-poly. Задача состоит в том, чтобы сначала сгенерировать двухмерные концепт-арты, а затем перенести их в объемное 3D-пространство с помощью специализированных нейросетей.

В качестве тестовых генераторов 2D-картинок я выбрал три популярные системы: Nano Banana Pro, Krea 2 и Microsoft MAI-Image-2.5. Для последующей конвертации 2D-рисунков в трехмерную геометрию я задействовал сервисы Neural4D и Meshy.

Сравнение стилистики Krea 2 и Nano Banana Pro для персонажа гоблина
Различие в трактовке стилистики low-poly между Krea 2 и Nano Banana Pro.
Низкополигональный гоблин-торговец от Nano Banana Pro
Наиболее удачный 2D-концепт low-poly гоблина, полученный в Nano Banana Pro.
3D-модель гоблина в Neural4D без текстур вид спереди
Трехмерная полигональная модель гоблина, сформированная сервисом Neural4D.
3D-сетка гоблина в Neural4D сбоку
Оценка геометрии и формы 3D-модели гоблина сбоку в Neural4D.

В качестве темы я взял классические архетипы средневекового фэнтези: гоблин-торговец, тёмный рыцарь, кот-арбалетчик, минотавр и странствующая волшебница. Учитывая лимиты бесплатных генераций в 3D-сервисах и ограничение на скачивание исходников без платной подписки, трехмерить результаты мы будем выборочно, оценивая ключевые особенности геометрии и текстурирования.

Реклама
Вид сзади 3D-модели гоблина Neural4D
Вид сзади на полигональную сетку гоблина, сгенерированную в Neural4D.
Перспективный ракурс 3D-модели гоблина в Neural4D
Ракурс в три четверти для проверки пропорций 3D-меша в Neural4D.
Рендер 3D-модели гоблина в Neural4D
Финальный просмотр базовой 3D-модели гоблина в сервисе Neural4D.
Цветная 3D-модель гоблина в Meshy вид спереди
Результат 3D-конвертации Nano Banana Pro в Meshy с сохранением цвета.
Текстурированная модель гоблина в Meshy сбоку
Проверка перенесения текстурной карты на 3D-объект в Meshy.

Гоблин-торговец

Первый эксперимент я решил провести на классическом персонаже — гоблине-продавце. Во всех трех нейросетях я использовал единый универсальный промпт с четким указанием стилистики low-poly.

Задний план 3D-модели гоблина в Meshy
Спина персонажа и корректность достройки текстуры сзади в Meshy.
Угловой ракурс 3D-модели гоблина в Meshy
Объемный рендер гоблина с оригинальной цветовой палитрой референса.
Финальный рендер 3D-модели гоблина в Meshy
Итоговая 3D-модель гоблина-торговца, готовая к экспорту из Meshy.
Сравнение 2D генераций тёмного рыцаря в нейросетях
Варианты визуализации тёмного рыцаря в MS MAI, Krea 2 и Nano Banana Pro.

Результаты 2D-генераторов разделились следующе:

Сравнение рыцаря от Krea 2 и Nano Banana Pro
Различие деталей доспехов у тёмного рыцаря в генерациях Krea 2 и Nano Banana.
2D рендер тёмного рыцаря от MS MAI
Исходный 2D-ассет тёмного рыцаря, сгенерированный в MS MAI-Image-2.5.
2D рендер тёмного рыцаря от Krea 2
Двухмерный концепт тёмного рыцаря, сделанный в нейросети Krea 2.
2D арт тёмного рыцаря от Nano Banana Pro
Вариант тёмного рыцаря в исполнении нейросети Nano Banana Pro.
Сравнение 3D-моделей рыцаря в Neural4D и Meshy
Сравнение результатов конвертации 2D-артов рыцаря в Neural4D и Meshy.
  • Nano Banana Pro: По моему мнению, справилась лучше всех. Изображение точно передает нужную геометрическую структуру low-poly и отлично подходит для использования в качестве исходного референса.
  • Krea 2: Выдала весьма своеобразный результат. Персонаж получился интересным, но скорее подходит для пародийного или психоделического инди-квеста, чем для традиционной фэнтезийной игры.
  • Microsoft MAI-Image-2.5: Сгенерировала немного прилизанную модель, в которой угадывается сглаживание вместо характерных четких граней.

Далее я отправил полученный 2D-концепт от Microsoft MAI в генератор Neural4D. Нейросеть обработала запрос быстро — процесс занял около 2–3 минут. Однако на бесплатном тарифе Neural4D выдает исключительно нераскрашенную полигональную сетку (белую геометрию без текстурной карты).

Цветная 3D-модель тёмного рыцаря в Meshy
Готовая раскрашенная low-poly модель тёмного рыцаря в сервисе Meshy.
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей

Изображение от Nano Banana Pro я конвертировал через Meshy. Этот сервис продемонстрировал главное преимущество — он автоматически создает раскрашенную 3D-модель, с высокой точностью сохраняя исходную цветовой палитру и детализацию референса.

Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей

Тёмный рыцарь

Следующим персонажем стал тёмный рыцарь. Несмотря на идентичный текстовый запрос, все три 2D-нейросети сгенерировали абсолютно разные концепции визуализаций.

Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей

При перечислении 3D-конвертаций выявились следующие особенности:

Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
  • Microsoft MAI в Neural4D: Сервис сформировал аккуратный объемный меш с правильной анатомией доспехов, но, как и в прошлом тесте, модель осталась монохромной.
  • Nano Banana Pro в Meshy: Позволила мгновенно получить полноценный трёхмерный ассет. Модель сразу снабжена цветной текстурной картой, повторяющей оригинальный арт.

Кот-арбалетчик

Третьим героем стал антропоморфный кот с арбалетом. При генерации плоских изображений наибольшее попадание в характер персонажа продемонстрировала Krea 2. Однако нейросеть оформила его в броской графике GenZ: картинка получилась чрезмерно пестрой и насыщенной по цветам.

Реклама
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей
Как превратить 2D-ассеты в 3D-модели персонажей с помощью нейросетей

При переносе в объём:

  • Обработка концепта Microsoft MAI в Meshy дала приемлемую 3D-модель с яркими цветами и корректно сформированным телом персонажа.
  • Арт от Nano Banana Pro, обработанный в Neural4D, снова показал хорошую геометрию формы, но остался бесцветным ввиду ограничений бесплатного тарифа.

Минотавр

Четвертый запуск — массивный минотавр. В этом раунде Microsoft MAI-Image-2.5 неожиданно отклонилась от low-poly канона, выдав более сглаженную модель. Nano Banana Pro в свою очередь потеряла единый стилистический контекст прошлых генераций. А вот Krea 2 выдала невероятно гиперболизированный вариант, который вряд ли подошел бы для серьезной мрачной игры, но выглядит крайне эффектно.

В процессе 3D-конвертации модель от MS MAI была преобразована в Neural4D, а концепт Nano Banana Pro прошел обработку через Meshy с последующей генерацией цветных текстур.

Странствующая волшебница

Финольным персонажем стала странствующая чародейка. Здесь проявились сильные различия в алгоритмах 2D-генерации:

  • Microsoft MAI выставила высокую детализацию, практически уйдя от полигонального стиля.
  • Nano Banana Pro не удержала стиль предыдущих персонажей.
  • Krea 2 выдала очень специфическую подачу, которую сложно применить в классическом сеттинге средневекового фэнтези.

Так как бесплатный лимит токенов в сервисах подходил к концу, мне удалось построить 3D-модель волшебницы только для ассета Nano Banana Pro с использованием Neural4D.

Выводы и практические рекомендации

Подводя итоги моего эксперимента, можно констатировать: современные ИИ-инструменты уже вполне пригодны для первичного прототипирования 3D-персонажей. Сформированная геометрия выстраивается без критических артефактов и шероховатостей.

Для практического применения в игровой индустрии полученные модели можно доработать следующим образом:

  1. Импортировать полученный OBJ/FBX файл в 3D-редактор.
  2. Выполнить риггинг (добавить скелетную анимацию).
  3. Наложить дополнительные карты текстур, скорректировать материалы и доработать цвета.

В дальнейшем я планирую протестировать альтернативную связку: генерацию трехмерных объектов с помощью Claude Opus 5 в комбинации с редактором Blender.

Источник: habr.com

01.