Команда Byte's Seed Team выпускает Seed3D 2.0, улучшая геометрическую точность и систему генерации материалов

Согласно мониторингу Dongcha Beating, команда Seed компании ByteDance выпустила Seed3D 2.0 — модель, которая генерирует 3D-активы с материалами из одного изображения. Этот апгрейд сосредоточен на геометрической точности и реалистичности материалов, при этом API теперь доступен на Volcano Ark. Геометрическая генерация использует двухэтапную стратегию от грубого к точному: сначала создается грубая топология с помощью DiT с большими параметрами, затем восстанавливаются острые края и тонкие поверхности. В области материалов применяется архитектура MoE для повышения детализации в высоком разрешении, вводятся приоритеты VLM для улучшения стабильности разложения материалов при неизвестных условиях освещения, выводя полные текстуры PBR, которые можно напрямую интегрировать в стандартные рендеринговые пайплайны. Шестьдесят оценщиков с опытом 3D-моделирования провели слепые оценки примерно 200 тестовых случаев, сравнивая Seed3D 2.0 с Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0 и предыдущий Seed3D 1.0. Уровень предпочтения геометрической генерации варьировался от 65,1% до 98,3%, а уровень предпочтения 3D-активов с материалами превысил 69%. В части downstream-задач Seed3D 2.0 может разлагать 3D-активы на независимые компоненты по функциональности и добавлять информацию о соединениях, выводя в формате URDF, совместимом с симуляторами, такими как Isaac Sim, что подходит для сценариев динамического взаимодействия, например, для захвата роботами. На уровне сцены он поддерживает ввод текста, изображений с нескольких видов или видео, объединяя несколько активов для генерации полноценных сцен.