NVIDIA представила новую модель ИИ под названием Нейраланджело которые могут создавать 3D-копии объектов из 2D-видео, будь то классические скульптуры или заурядные грузовики и здания. Neuralangelo работает, выбирая несколько кадров, показывающих объект под разными углами в 2D-видео, чтобы получить четкое представление о его глубине, размере и форме. Затем он создает грубое 3D-представление объекта, прежде чем оптимизировать его, чтобы имитировать детали реального объекта.
По словам компании, новая модель переняла технологию своей старой, Instant NeRF, чтобы иметь возможность точно фиксировать мельчайшие детали того, что пользователь хочет воссоздать в 3D. К ним относятся его текстура, узоры и цветовые вариации. NVIDIA заявляет, что способность Neuralangelo захватывать сложные текстуры, такие как шероховатость черепицы и гладкость мрамора, «значительно превосходит предыдущие методы». По-видимому, этого даже достаточно, чтобы создавать полезные виртуальные объекты из видеороликов, снятых на смартфоны, что может дать создателям простой способ создания 3D-воспроизведения для своих проектов. Это также быстрое решение: специалисты NVIDIA Research сообщили нам, что инструмент может создавать 3D-сцены в течение двух часов.
Минг-Ю Лю, соавтор статьи о Neuralangelo, сказал, что это «в конечном итоге позволит разработчикам импортировать детализированные объекты — будь то небольшие статуи или массивные здания — в виртуальную среду для видеоигр или промышленных цифровых двойников». В приведенном ниже видеоролике, демонстрирующем возможности этой технологии, NVIDIA заявила, что может создавать крупномасштабные виды из кадров с дронов, что облегчает разработчикам воссоздание реальных локаций в своих играх. У него есть много других потенциальных применений, в том числе в робототехнике, виртуальной реальности, архитектуре и, конечно же, искусстве.
Исследовательское подразделение компании представит Neuralangelo на конференции по компьютерному зрению и распознаванию образов, которая пройдет с 18 по 22 июня в Ванкувере.
Нажмите здесь, чтобы узнать больше новостей