Новият инструмент на NVIDIA може да създава редактируеми 3D обекти от снимки

Изследователите на NVIDIA имат създаде нов инструмент който може лесно да превърне снимките в 3D обекти. Наречена NVIDIA 3D MoMa, компанията казва, че може да позволи на архитекти, дизайнери, концептуални художници и разработчици на игри бързо да импортират обекти в графичен двигател за цифрова манипулация.

Технологията работи чрез това, което е известно като обратно изобразяване, което е техника, която може да реконструира серия от неподвижни снимки в 3D модел на обект или сцена.

Дейвид Лубке, вицепрезидент по графични изследвания в NVIDA, описва тази идея като своеобразен „свещен граал“ за компютърно зрение и компютърна графика

„Чрез формулирането на всяка част от проблема с обратното изобразяване като GPU-ускорен диференцируем компонент, тръбопроводът за изобразяване на NVIDIA 3D MoMa използва машината на съвременния AI и суровите изчислителни мощности на графичните процесори на NVIDIA за бързо производство на 3D обекти, които създателите могат да импортират, редактират и разширяване без ограничение в съществуващите инструменти “, казва той.

3D MoMa прави серия от снимки и ги използва за създаване на 3D рендиране на обекта, който е оформен с триъгълна мрежа с текстурирани материали, които NVIDIA описва като общ език, използван от 3D инструменти в различни индустрии.

3D MoMa работи със стандартни за индустрията инструменти

Студиата за игри, например, обикновено създават 3D обекти като този със сложни фотограметрични техники, за които NVIDIA казва, че отнема значително време и ръчни усилия. По-рано тази година NVIDIA показа начин, по който успя превърнете набор от снимки в 3D сцени за броени секунди и макар да е мощен, той не създаде тази триъгълна мрежа, която би направила тези снимки лесно редактирани.

3D MoMA на NVIDIA променя това и генерира триъгълни мрежови модели в рамките на един час NVIDIA Tensor Core GPU. Компанията казва, че продукцията е директно съвместима с 3D графичните двигатели и инструментите за моделиране, които създателите в редица индустрии вече използват.

Триъгълните мрежи са основните рамки, използвани за дефиниране на форми в 3D графика и моделиране.

„Реконструкцията на тръбопровода включва три функции: 3D мрежов модел, материали и осветление. Мрежата е като хартиено-маше модел с 3D форма, изградена от триъгълници“, казват от NVIDIA. „С него разработчиците могат да модифицират обект, за да отговарят на тяхната творческа визия. Материалите са 2D текстури, насложени върху 3D мрежите като кожа. А оценката на NVIDIA 3D MoMa за това как е осветена сцената позволява на създателите по-късно да променят осветлението на обектите.

Изследователите са показали инструмента с набор от джаз инструменти във видеото по-горе. Екипът на NVIDIA първо засне около 100 изображения на всеки от петте инструмента на джаз бенд от различни ъгли и след това подаде тази информация в 3D MoMa системата. От този вход той успя да генерира необходимите 3D модели, които могат да бъдат импортирани в 3D редактор.

NVIDIA казва, че тези инверсно изобразени обекти могат да се използват като градивни елементи за сложна анимирана сцена и позволяват да бъдат създадени за малка част от времето.

NVIDIA има публикува статия за 3D MoMa системата което е една от 38-те статии, които авторите на NVIDIA ще представят на конференцията по компютърно зрение и разпознаване на образи (CVPR) тази седмица.