Исследователи Meta* выпустили VFusion3D — нейросеть для генерации 3D-моделей по фотографииИсследовательская группа компании Meta* разработала уникальную нейросеть VFusion3D для генерации трёхмерных моделей с высоким разрешением и минимальным количеством артефактов.
Основным достижением является возможность создания 3D-объектов на основе одной фотографии, что стало возможным благодаря созданию собственных синтетических данных с использованием видеодиффузии, поскольку получение обучающих данных для 3D-моделей традиционно сложно.
VFusion3D показывает преимущества перед конкурентами, такими как LGM и OpenLRM, в передаче деталей.
В будущем планируется расширение модели и датасета, что может позволить генерацию 3D-объектов на основе текстовых описаний.
Результаты исследований опубликованы на arXive, код доступен на GitHub, а тестовое приложение можно попробовать на Hugging Face.
==============
Meta* признана в РФ экстремистской
@black_triangle_tg