7 нейросетей для создания 3D‑моделей

Чтобы создать 3D-модель для игрового мира или 3D-печати, необязательно моделировать её с нуля. Нейросети позволяют получить объект по текстовому описанию или фото, а затем доработать результат в 3D-редакторе.

Такие сервисы различаются не только качеством генерации. В одних есть бесплатные инструменты для работы с сеткой и текстурами, в других можно подготовить модель к анимации или 3D-печати, а некоторые позволяют работать сразу со всей трёхмерной сценой.

В этой статье мы рассмотрим семь нейросетей для моделирования 3D-объектов, разберём их возможности и определим, для каких задач подходит каждый онлайн-сервис.

Содержание

• Что умеют нейросети для создания 3D-моделей
• Нейросети для создания 3D-моделей

• Tripo 3D
• Meshy
• Trellis.2
• Hi3D
• Rodin
• Sloyd
• Hunyuan 3D

• Итог: какую нейросеть выбрать

Что умеют нейросети для создания 3D‑моделей

Нейросети создают 3D-модели по текстовому описанию или фото. Основных режима для моделирования два — Text-to-3D и Image-to-3D:

• в Text-to-3D пользователь описывает объект в промпте, а нейросеть создаёт его форму и полигональную сетку;
• в Image-to-3D пользователь загружает изображение, а нейросеть воссоздаёт объект в объёме.

Некоторые сервисы также поддерживают Multi-image-to-3D или Multi-view-to-3D. В этих режимах можно загрузить несколько изображений одного объекта с разных ракурсов. Так нейросеть получает больше информации о его форме и пропорциях.

Полученную модель не всегда можно сразу использовать в проекте. В ней могут быть лишние полигоны, неровная сетка или ошибки в деталях. При генерации по одному изображению нейросеть также может неправильно восстановить части объекта, которых не видно на исходной картинке.

Поэтому во многих ИИ-сервисах есть инструменты для доработки модели. С их помощью можно упростить или перестроить полигональную сетку, разделить меш на части, изменить текстуры, подготовить объект к 3D-печати или добавить риг для анимации.

Готовую модель можно экспортировать в распространённые 3D-форматы и продолжить работу с ней в Blender, Maya, 3ds Max или другом редакторе. Доступные форматы и инструменты зависят от конкретного сервиса.

Читайте также:

Всё о 3D-печати: большой гайд для новичков

Нейросети для создания 3D-моделей

Мы выбрали семь популярных ИИ-сервисов для моделирования 3D-объектов. Чтобы сравнить результаты, протестируем каждый из них на двух объектах — револьвере и коте.

Револьвер относится к объектам hard surface — то есть к моделям предметов с твёрдой поверхностью. Для них важна точная форма, симметрия, повторяющиеся элементы и мелкие детали. Поэтому такой объект хорошо показывает, насколько нейросеть справляется со сложной геометрией.

Для генерации револьвера в режиме Text-to-3D используем такой промпт:

Кот — пример органической модели. Для таких объектов важны плавные формы, естественные пропорции и анатомия. В этом тесте посмотрим, насколько точно нейросеть передаст силуэт, позу и строение тела. Используем следующий промпт:

Качество 3D-модели не всегда можно оценить по одному числу или формальному критерию. Поэтому для каждого сервиса мы покажем скриншоты результатов и разберём, насколько хорошо он справился с обоими объектами.

Tripo 3D

Tripo 3D делает ставку на возможности доработки моделей после генерации. В сервисе можно перестроить полигональную сетку и разделить объект на отдельные части, чтобы с ними было проще работать.

Tripo 3D поддерживает работу с Blender, Maya, Mixamo, Roblox и другими программами и игровыми движками. Но на бесплатном тарифе экспорт моделей недоступен.

Проверим Tripo 3D на генерации объекта сложной формы. Для теста создадим модель револьвера по текстовому описанию.

ИИ-сервис создал модель со смешанной топологией: рукоять преимущественно состоит из квадов, а остальные элементы — из треугольников. При этом в геометрии заметны ошибки. Барабан получился неровным, ствол сместился относительно центральной оси, а на отдельных участках появились дефекты, например лишние углубления.

Генерация по фото точнее передала форму объекта. Большая часть артефактов исчезла.

Теперь проверим, как Tripo 3D справляется с органической формой — моделью кота. В промпте для Text-to-3D мы указали реалистичные пропорции, однако сервис сгенерировал стилизованную модель: лапы короткие и располагаются под туловищем, корпус округлый, а хвост расположен сбоку.

В режиме моделирования по фото результат оказался ближе к исходному изображению. Нейросеть восстановила форму кота и достроила детали, которых не было видно в кадре. Но есть и дефекты. Например, часть усов слева исчезла — вероятно, сервис не смог отделить их от белого фона.

Meshy

Meshy — сервис с упором на управляемую генерацию и последующую доработку 3D-моделей. В нём можно выбирать между несколькими моделями разной сложности и отдельно настраивать геометрию, текстуры и подготовку объекта к анимации.

Для работы с полигональной сеткой есть инструмент Smart Topology. Он перестраивает топологию модели и помогает получить более аккуратную сетку для дальнейшего редактирования или 3D-печати. Кроме того, в Meshy можно генерировать и заменять текстуры, настраивать риг и создавать анимации.

Проверим, как Meshy справится со сложным техническим объектом. Для этого сгенерируем револьвер по текстовому описанию и используем Smart Topology.

В результате получился меш револьвера с плотной сеткой и заметно сглаженными очертаниями, которые больше подходят органическим моделям. Если посмотреть внимательно, то в некоторых местах элементы объекта обрываются, а отдельные детали получились асимметричными.

Генерация по изображению дала более удачный результат. У модели появились чёткие очертания, поэтому она стала похожа на технический объект.

При внимательном осмотре заметны небольшие дефекты: в отдельных местах части геометрии перекрывают друг друга, а некоторые детали всё ещё переданы неточно.

При генерации животного по текстовому описанию нейросеть не только проигнорировала заданную позу, но и фактически добавила к туловищу второго кота.

В генерации по фото Meshy удалось воссоздать требуемую позу, но не без изъянов. Форма левого уха напрямую перенесена с исходного изображения, а в нижней части модели образовалось отверстие.

Trellis.2

Trellis.2 — бесплатная локальная ИИ-модель от Microsoft. Для её запуска потребуется видеокарта NVIDIA как минимум с 24 ГБ видеопамяти. При этом модель можно бесплатно протестировать через демоверсию на Hugging Face Spaces.

Trellis.2 работает только в режиме Image-to-3D. Моделирование по текстовому запросу недоступно. После загрузки изображения модель автоматически определяет контур объекта. Затем пользователь может настроить разрешение текстур и степень упрощения геометрии.

Проверим Trellis.2 на том же изображении револьвера. Нейросеть хорошо сохранила общую форму и основные детали объекта, но допустила ошибку в области под стволом: шток она интерпретировала как второе отверстие.

Общий силуэт кота получился удачнее, чем у предыдущих нейросетей. Поза сохранена, форма левого уха передана корректно.

Hi3D

Hi3D — онлайн-сервис для генерации 3D-моделей по фото с дополнительными инструментами для редактирования и подготовки объектов к печати. Помимо обычных 3D-ассетов, в нём можно создавать более специализированные модели — например, портреты и рельефы.

В актуальной версии Hi3D 3.0 можно повысить детализацию модели и настроить плотность сетки — от 100 тысяч до 5 миллионов полигонов. Для дальнейшей доработки есть отдельный веб-редактор Hi3D Studio.

Проверим, насколько точно сервис генерирует объекты по изображениям. Как и в предыдущих тестах, загрузим фотографии револьвера и кота, а затем оценим форму моделей, детализацию и качество геометрии.

Rodin

Rodin — онлайн-сервис компании Hyper3D для генерации 3D-моделей по текстовому описанию и фото. В нём можно не только генерировать объекты, но и оптимизировать их геометрию.

Отдельно Hyper3D предлагает WorldGen — инструмент для создания 3D-сцен по одному изображению. Он выделяет крупные объекты, превращает их в отдельные редактируемые меши, а окружение восстанавливает с помощью 3D Gaussian Splatting.

Одна из особенностей Rodin — предварительный этап генерации, который не расходует кредиты. При создании модели по текстовому описанию сервис сначала создаёт изображение по промпту и только после подтверждения использует его как основу для 3D-модели. Это позволяет заранее оценить, правильно ли нейросеть поняла запрос.

Проверим этот режим. Уже на этапе предварительной генерации стало видно, что сервис интерпретировал запрос неудачно: предложенные изображения заметно отличались от того, что мы ожидали получить.

В режиме Image-to-3D нейросеть справилась лучше, полученные в нём модели похожи на то, что мы планировали получить.

Sloyd

Sloyd сочетает генерацию 3D-моделей с помощью ИИ и работу с готовыми параметрическими шаблонами. Если шаблоны не планируется использовать, то в сервисе доступен режим Astra, который позволяет создавать модели только по текстовому описанию.

Проверим качество генерации на наших примерах.

Для генерации модели кота попробуем подключить опцию улучшения изображения (Enhance Image).

Hunyuan 3D

Hunyuan 3D — онлайн-сервис Tencent для генерации 3D-моделей с плотной полигональной сеткой. Такая сетка позволяет точнее передавать мелкие детали и сложную форму объекта, но делает модель тяжелее для дальнейшей обработки.

Текстовый промпт ограничен 150 символами, поэтому наши исходные запросы пришлось сократить.

Несмотря на ограничение, сервис предложил по четыре варианта модели для каждого из двух промптов. Результаты различались по форме и стилю, поэтому уже на первом этапе можно было выбрать наиболее подходящий вариант для дальнейшей генерации и оценки.

В режиме Image-to-3D с органической моделью Hunyuan 3D показал один из самых удачных результатов. Нейросеть сохранила позу кота с фото и довольно точно восстановила анатомию: усы остались с обеих сторон, а лапы и хвост — поджатыми под туловище. Основные неточности заметны в области задних лап.

Итог: какую нейросеть выбрать

Выбор нейросети для моделирования зависит от исходных данных, типа объекта и того, как вы собираетесь использовать готовую модель.

• Если требуется простая генерация с последующей доработкой, подойдут Tripo 3D и Meshy. В обоих сервисах есть инструменты для работы с сеткой, текстурами и отдельными элементами модели.
• Для генерации моделей по изображению можно попробовать Trellis.2 и Hunyuan 3D. В наших тестах они неплохо сохранили общую форму исходного объекта, но могли ошибаться в деталях, которых не видно на изображении.
• Если модель нужна для 3D-печати, обратите внимание на Hi3D и Rodin. Hi3D позволяет настраивать плотность сетки и экспортировать результат в распространённых 3D-форматах. В Rodin вы сначала получаете изображение будущей модели, которое можно проверить до начала генерации.

Перед выбором уточните ограничения бесплатного тарифа, доступные форматы экспорта и условия коммерческого использования. А если важен именно результат, лучше протестировать несколько сервисов на одном исходнике: одна и та же модель у них может получиться заметно по-разному.