Coin3D оптимизирует обучение и оценку для высококачественного 3D-построения

Coin3D обучается на подмножестве LVIS из Objaverse с рендерингом из 16 точек зрения и прокси-вокселизацией. Оценки включают в себя оценки CLIP, ImageReward и GPTEvals3D. Исследования пользователей сравнивают его вывод с существующими методами. Модель обучается с помощью двойного 3D UNet и потери volume-SDS на Nvidia A100-80G, что позволяет достичь высококачественной 3D реконструкции всего за несколько минут, оптимизируя как качество, так и эффективность.