«Полароид будущего»: на что способна нейросеть NVIDIA для моментального создания 3D-объектов по снимкам

В марте NVIDIA представила нейросетевую модель NVIDIA Instant NeRF, которая способна за несколько секунд превращать фотографии в трёхмерные объекты. Её уже прозвали «полароидом будущего».

На вход модели подаётся серия снимков, сделанных с разных ракурсов. Чем больше фотографий, тем больше деталей сохраняется в результате. В NVIDIA рассказывали, что ранние версии нейросети могли отрисовывать трёхмерные сцены за несколько минут, а на обучение модели требовались часы. Этот процесс удалось ускорить. Лучше всего модель работает при использовании нескольких видеокарт с тензорными ядрами.

Инженеры поделились несколькими ролика, демонстрирующими работу NVIDIA Instant NeRF: