Нейросеть для 3D моделей: 4 продвинутых сервиса

Нейросети для 3D-моделей создают объект по тексту, фото и даже видео. Пользователь пишет запрос, загружает изображение и через пару минут получает персонажа, предмет в нужном формате. 

Но при этом нейросеть не знает, как выглядит конкретный объект, а строит вероятную модель, которую уже «видела» в данных, поэтому результат иногда требует доработки. Однако это все равно быстрее, чем создавать объект с нуля.

Форматы для генерации 3D-моделей

Одна и та же нейросеть может работать по разным видам промптов для генерации 3D-моделей. Как ИИ-сервисы создают объекты:

• через текстовое описание (подходит для мебели, игрушек, простых персонажей);
• на основе изображения (ИИ восстанавливает объем);
• через видео (нейросеть создает анимацию).

Сложные формы при генерации через текст часто выглядят средне по качеству, поскольку ИИ заполняет пробелы по вероятности. Нейросеть «догадывается», что находится позади модели и на основе этого создает окружение. Вариант генерации по тексту подходит для прототипов, черновиков.

Создание по фото хорошо подходит для 3D-печати, воссоздания реальных объектов, а по видео нейросеть неплохо анимирует готовую модель для игр, но требует качественного изображения.

Нейросети для 3D-моделей: топ продвинутых

ИИ-сервис стоит выбирать в зависимости от задачи, желаемой детализации. Собрали три продвинутых нейросети, в которых можно создать 3D-модель бесплатно.

Tripo AI

Tripo AI — сервис от Stability AI. Работает на ИИ-модели TripoSR, которая подходит для игровых проектов, дизайна, 3D-печати.

Нейросеть может создать объект на основе текста, изображения. Понимает русский, английский, китайский языки. После регистрации нейросеть начисляет 300 монет. Этого хватает примерно на 25 AI-моделей.

Промпт лучше вводить на английском, поскольку нейросеть обучена преимущественно на англоязычных данных.

Лучше всего у Tripo AI получается генерация людей, хотя по отзывам с лицами все еще бывают проблемы. Создание модели занимает около минуты, загружать фото-референсы можно размером до 4 МБ.

Meshy

Нейросеть поддерживает text-to-3D и image-to-3D, начисляет 200 кредитов в месяц бесплатно. Генерация модели по тексту в среднем тратит 15 кредитов, по изображению — 20.

У нейронки есть 3 варианта генерации: из фото, по текстовому описанию и создание видео из 3D-объекта.

ИИ-сервис имеет простой интерфейс. В панели слева можно выбрать нужные настройки, загрузить файл и создать объект.

В панели внизу можно добавить к AI-объекту текстуры, напечатать, либо скачать. Скачивание доступно только для владельцев платной версии нейросети.

Нейронка неплохо справляется с наложением текстур на объекты по фото.

Можно задавать в запросе параметры, которых не должно быть у объекта, анимировать антропоморфных существ. Качество 3D-модели получается выше среднего с хорошей детализацией, но иногда появляются ошибки (трещины, потеря мелких элементов у сложных элементов).

Meshy AI подходит, когда нужен функциональный ИИ-сервис с гибкими настройками.

Sloyd AI

Sloyd в основном используют, чтобы создать мебель, здания, любые неодушевленные объекты. Людей и животных нейросеть не делает.

Работать в ИИ-сервисе можно без регистрации. Ввести запрос можно прямо в область посередине главной страницы.

Затем нейросеть отправит вас на другую страницу, где промпт нужно подтвердить. После этого Sloyd AI создаст объект. Справа внизу модель можно превратить в видео, либо экспортировать в нужный формат и скачать. Но обе эти функции доступны только для владельцев платных аккаунтов в AI.

3D-модели получается простые, но этого хватает, чтобы уменьшить количество рутины у геймдизайнера. Нейросеть хорошо подходит для быстрого прототипирования.

DeepMotion

DeepMotion это ИИ для 3D-анимации, то есть сам объект вы должны подготовить заранее, чтобы сделать из него видео в сервисе.

В целом все просто. Вы загружаете видео, нейросеть строит основу, делает анимацию.

Нейронка делает 3D-анимацию движения для объекта в двух вариантах. Посмотреть каждый из них и выбрать лучший можно в панели внизу.

У DeepMotion получаются довольно естественные движения, поэтому нейросеть подходит, чтобы создать игру, VR.

Перспективы создания 3D-моделей с нейросетями

Нейросети производят революцию в геймдизайне. Попробовать сделать первую 3D-модель онлайн, а иногда даже без регистрации могут даже люди, которые не имеют опыта в этой области.

GPT-модели и даже чат-боты также ускоряют рутину профессиональных художников, но эта технология пока не идеальна. 3D-модели от нейросетей все же требуют ручной доработки, контроля за результатом.

Многие инди-студии все чаще используют ИИ-объекты для своих проектов для текстур и ассетов. Вопрос лишь в том, как быстро получится доверить искусственному интеллекту более серьезные задачи, а не только отдельные элементы.

Рекомендации по промптам и требования к фото-референсам

Нейросети для генерации 3D-моделей работают по той же схеме, что и другие ИИ. Запрос должен быть максимально подробным, если создаете объект из текста. В промпте для AI можно указать материал, мимику, позу, стиль изображения, размер глаз и другие детали.

Рекомендации для фото-референсов:

• минимум элементов на изображении (лучше обрезать, если нужен конкретный предмет, а не писать это текстом);
• крупный план объекта, анфас;
• белый или нейтральный фон.

Загружайте изображения высокого качества для генерации, в этом случае нейронка распознает больше элементов и точнее создаст модель. Можно также поучиться составлять запросы на примерах промптов для Stable Diffusion и других ИИ, работающих с любыми изображениями (не обязательно рассматривать только нейросети для 3D, принцип запросов в целом похожий у разных моделей).

Какую в итоге нейросеть выбрать, чтобы создать 3D-модель

Для начала сформулируйте промпт и проверьте, как он сработает на 2-3 нейронках. Главные преимущества, ограничения ИИ-сервисов также можно посмотреть здесь:

Из перечисленных сервисов больше всего для геймдева подходят Meshy, Sloyd AI и DeepMotion. В первых двух можно создать объект, а в последнем анимировать. С быстрыми концептами, прототипами для 3D-печати хорошо справляется Tripo AI.

FAQ