得心應(yīng)手的AI：NVIDIA Research助力內(nèi)容創(chuàng)作者使用3D物體進(jìn)行即興創(chuàng)作
可逆渲染流程 NVIDIA 3D MoMa 將于本周在新奧爾良舉行的計(jì)算機(jī)視覺和模式識(shí)別會(huì)議 CVPR上亮相。
爵士樂的精髓在于即興演奏， NVIDIA 正在通過 AI 研究向這一流派致敬。也許有一天，圖形創(chuàng)作者可以使用快速創(chuàng)建出的 3D 物體，來一場(chǎng)即興表演。
這個(gè)被稱為“NVIDIA 3D MoMa”的方法可以讓建筑師、設(shè)計(jì)師、概念藝術(shù)家和游戲開發(fā)者迅速將物體導(dǎo)入圖形引擎，并開始對(duì)其進(jìn)行處理——修改比例、改變材質(zhì)或嘗試不同的照明效果。
NVIDIA Research 在慶祝爵士樂及其發(fā)源地新奧爾良的視頻中展示了這項(xiàng)技術(shù)。本周，關(guān)于 3D MoMa 的論文將在 CVPR 上發(fā)表。
基于 2D 圖像創(chuàng)建 3D 物體
逆渲染是將一系列靜態(tài)照片重建為 3D 物體或場(chǎng)景模型的技術(shù)。 NVIDIA 圖形學(xué)研究副總裁 David Luebke 表示： “該技術(shù)長期以來一直是統(tǒng)一計(jì)算機(jī)視覺和計(jì)算機(jī)圖形學(xué)的關(guān)鍵?！?br />
他表示：“NVIDIA 3D MoMa 渲染流水線可以將逆渲染問題的每個(gè)部分表示為 GPU 加速的可微分組件，然后使用現(xiàn)代 AI 機(jī)器和 NVIDIA GPU 的原始算力快速生成 3D 物體，且創(chuàng)作者可以在現(xiàn)有工具中自由地導(dǎo)入、編輯和擴(kuò)展這些物體?！?br />
為了使藝術(shù)家或工程師能夠充分利用 3D 物體，其形式應(yīng)能夠?qū)胗螒蛞妗?3D 建模器和電影渲染器等各種被廣泛使用的工具。帶有紋理、材質(zhì)的三角網(wǎng)格形式，就是此類 3D 工具使用的通用語言。
三角網(wǎng)格是用于定義 3D 圖形和建模形狀的基本框架
游戲工作室和其他創(chuàng)作者習(xí)慣于使用復(fù)雜的攝影測(cè)量技術(shù)來創(chuàng)建 3D 物體，這需要耗費(fèi)大量的時(shí)間和精力。近期的神經(jīng)輻射場(chǎng)（Neural Radiance Fields）研究可以快速生成物體或場(chǎng)景的 3D 模型，但并不是使用易于編輯的三角網(wǎng)格形式。
當(dāng)在單個(gè) NVIDIA Tensor Core GPU 上運(yùn)行時(shí)， NVIDIA 3D MoMa 能在一個(gè)小時(shí)內(nèi)生成三角網(wǎng)格模型。該流水線的輸出結(jié)果與創(chuàng)作者現(xiàn)在使用的 3D 圖形引擎和建模工具直接兼容。
流水線的重建功能包括 3D 網(wǎng)格模型、材質(zhì)和照明。網(wǎng)格就像由三角形構(gòu)建的 3D 形狀混凝紙漿模型。有了它，開發(fā)者就可以依照自己的創(chuàng)意對(duì)物體進(jìn)行修改。材質(zhì)是疊加在 3D 網(wǎng)格上的 2D 紋理，就像人的皮膚一樣。 NVIDIA 3D MoMa 通過對(duì)場(chǎng)景光線進(jìn)行估算，使創(chuàng)作者能夠在日后修改物體上的照明。
為虛擬爵士樂隊(duì)調(diào)校樂器
為了展示 NVIDIA 3D MoMa 的功能， NVIDIA 的研究和創(chuàng)意團(tuán)隊(duì)首先從不同角度收集了五種爵士樂隊(duì)樂器（小號(hào)、長號(hào)、薩克斯、架子鼓和單簧管）的約 100 張圖片。
NVIDIA 3D MoMa 將 2D 圖像重建為每種樂器的 3D 表示，并以網(wǎng)格形式呈現(xiàn)。然后， NVIDIA 團(tuán)隊(duì)將這些樂器從原始場(chǎng)景中取出，并將其導(dǎo)入 NVIDIA Omniverse 3D 模擬平臺(tái)中進(jìn)行編輯。
在任何傳統(tǒng)圖形引擎中，創(chuàng)作者都可以輕松為形狀調(diào)換由 NVIDIA 3D MoMa 生成的材質(zhì)，就像給網(wǎng)格穿上不同的衣服一樣。例如該團(tuán)隊(duì)對(duì)小號(hào)模型采取了這種做法，將原來的塑料材質(zhì)快速更換成黃金、大理石、木材或軟木。
然后，創(chuàng)作者可以將新編輯的物體放入任何虛擬場(chǎng)景中。 NVIDIA 團(tuán)隊(duì)將這些樂器放入了經(jīng)典的圖形渲染質(zhì)量測(cè)試康奈爾盒中。他們證明了虛擬樂器對(duì)光線的反應(yīng)與在物理世界中完全一樣：閃亮的銅管樂器反射出亮光，啞光的鼓皮則會(huì)吸收光線。
這些通過逆渲染生成的新物體可以作為復(fù)雜動(dòng)畫場(chǎng)景的構(gòu)成要素。視頻的最后展示了虛擬爵士樂隊(duì)。
關(guān)于NVIDIA 3D MoMa的論文已于北京時(shí)間 6 月 23 日凌晨 2:30 分 CVPR 的分會(huì)場(chǎng)上發(fā)表。這是NVIDIA作者在本次會(huì)議上發(fā)表的38篇論文之一。進(jìn)一步了解 NVIDIA Research 在 CVPR 上發(fā)布的內(nèi)容。
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用，如有內(nèi)容侵權(quán)或者其他違規(guī)問題，請(qǐng)聯(lián)系本站處理。
舉報(bào)投訴
-
NVIDIA
+關(guān)注
關(guān)注
14文章
5696瀏覽量
110139 -
AI
+關(guān)注
關(guān)注
91文章
41315瀏覽量
302691 -
3D物體識(shí)別
+關(guān)注
關(guān)注
0文章
3瀏覽量
6421
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
熱點(diǎn)推薦
SeaVerse發(fā)布全球首個(gè)AI Native平臺(tái)，“All in AI Native”引領(lǐng)AI創(chuàng)作前瞻革命
SeaVerse強(qiáng)調(diào)的"All in AI Native"對(duì)于既存的AI創(chuàng)作者和創(chuàng)作團(tuán)隊(duì)來說注定是場(chǎng)"前瞻革命"。
榜樣領(lǐng)航，共赴新章——2025年度電子發(fā)燒友社區(qū)表彰
能創(chuàng)新，讓分享連接你我。
2025年的斐然成績，離不開每一位生態(tài)伙伴的深耕細(xì)作與每一位創(chuàng)作者的熱忱賦能。為此我們特別表彰一批行業(yè)領(lǐng)軍專家、卓越版主、社區(qū)先鋒、評(píng)測(cè)達(dá)人、創(chuàng)作者及標(biāo)桿企業(yè)，感謝他們以原創(chuàng)
發(fā)表于 01-12 15:21
Vyking: 數(shù)字孿生與AI正在重塑現(xiàn)代產(chǎn)品內(nèi)容的生產(chǎn)流程
/ --?Vyking推出全新AI制作工作室（AI Production Studio），這項(xiàng)專業(yè)制作服務(wù)可基于現(xiàn)有2D攝影素材及可選3D捕捉技術(shù)，生成
索尼與MIIIX幕象科技達(dá)成3D內(nèi)容合作
索尼與MIIIX幕象科技工作室文旅行業(yè)創(chuàng)新內(nèi)容共創(chuàng) 近日，索尼與MIIIX幕象科技工作室(以下簡(jiǎn)稱：MIIIX)正式宣布達(dá)成3D內(nèi)容合作：雙方將依托索尼空間現(xiàn)實(shí)顯示屏的裸眼3D技術(shù)與M
專為內(nèi)容創(chuàng)作、AI應(yīng)用打造的存儲(chǔ)設(shè)備來了！閃迪媒體分享會(huì)展示新款SN5100 SSD
近期在閃迪召開的媒體分享會(huì)上，閃迪為參會(huì)媒體介紹了其最新產(chǎn)品WD Blue SN5100 NVMe SSD的主要技術(shù)特性。這是一款專門為內(nèi)容創(chuàng)作者和各種生產(chǎn)力套件的專業(yè)人士打造的一款產(chǎn)品，因?yàn)楫?dāng)前
全球首個(gè)動(dòng)漫專屬AI視頻生成平臺(tái)Animon，國內(nèi)版"萌動(dòng)AI"正式發(fā)布
生成平臺(tái)Animon正式推出國內(nèi)版產(chǎn)品——"萌動(dòng)AI"，為數(shù)億創(chuàng)作者帶來視覺革命。該平臺(tái)由專業(yè)的動(dòng)漫制作團(tuán)隊(duì)和頂尖的AI技術(shù)團(tuán)隊(duì)聯(lián)合打造，并將專為專業(yè)創(chuàng)作團(tuán)隊(duì)和個(gè)人工作室設(shè)計(jì)的Anim
iTOF技術(shù)，多樣化的3D視覺應(yīng)用
。
◆ 應(yīng)用2—機(jī)艙內(nèi)的 3D 傳感
應(yīng)用3—自主移動(dòng)機(jī)器人 （AMR）
在室外（~150,000 勒克斯）和黑暗環(huán)境中進(jìn)行障礙物檢測(cè)。
高分辨率能力，可準(zhǔn)確檢測(cè)細(xì)長物體，例如椅
發(fā)表于 09-05 07:24
索尼與VAST達(dá)成3D業(yè)務(wù)合作
與Tripo AI的高精度3D生成能力，打造從內(nèi)容創(chuàng)作到沉浸式展示的全鏈路解決方案。此次合作將推動(dòng)3D技術(shù)在展覽、零售、教育等場(chǎng)景的普惠化應(yīng)
NVIDIA桌面GPU系列擴(kuò)展新產(chǎn)品
NVIDIA 桌面 GPU 系列擴(kuò)展，推出 NVIDIA RTX PRO 4000 SFF Edition GPU 和 RTX PRO 2000 Blackwell GPU，可提高工程、內(nèi)容創(chuàng)
NVIDIA研究中心亮相SIGGRAPH 2025大會(huì)
AI 與圖形學(xué)在神經(jīng)渲染、3D 生成和世界仿真方面的研究突破，正在推動(dòng)機(jī)器人、自動(dòng)駕駛汽車和內(nèi)容創(chuàng)作的發(fā)展。
全球知名品牌借助NVIDIA技術(shù)規(guī)?；桓秱€(gè)性化廣告
營銷領(lǐng)先者正借助使用 OpenUSD、NVIDIA Omniverse 和代理式 AI 技術(shù)開發(fā)的解決方案，加速內(nèi)容創(chuàng)作管線。
手持云臺(tái)馬達(dá)驅(qū)動(dòng)：提升影像質(zhì)量與創(chuàng)作自由
在當(dāng)今數(shù)字化時(shí)代，影像創(chuàng)作已經(jīng)成為了大眾表達(dá)自我、記錄生活的重要方式。從社交媒體上的短視頻分享，到專業(yè)影視制作，人們對(duì)于影像質(zhì)量和創(chuàng)作自由度的要求越來越高。而手持云臺(tái)馬達(dá)驅(qū)動(dòng)技術(shù)的出現(xiàn)，為影像創(chuàng)作帶來了革命性的變化，極大地提升了
“出發(fā)吧！新疆”AIGC宣傳片創(chuàng)作大賽全球征片中
升級(jí)的創(chuàng)新突破。 「出發(fā)吧！新疆」2025新疆文旅AIGC宣傳片創(chuàng)作大賽線下沙龍會(huì)。 ? 7月6日當(dāng)天，在北京舉辦了一場(chǎng)AIGC宣傳片創(chuàng)作大賽線下沙龍，大賽評(píng)審團(tuán)專家、資深A(yù)IGC創(chuàng)作者陳家偉表示：“
炬力芯片方案：專業(yè)視頻信號(hào)轉(zhuǎn)換UVC轉(zhuǎn)HDMI解決方案，支持大疆Pocket3
· 直播監(jiān)視：助力創(chuàng)作者實(shí)時(shí)查看拍攝畫面，及時(shí)調(diào)整內(nèi)容· 工業(yè)攝像監(jiān)控：保障監(jiān)控畫面清晰傳輸，滿足工業(yè)場(chǎng)景監(jiān)控需求三、升級(jí)特性與高端應(yīng)用炬力 AM8271D 芯片方案新增 USB 3.
發(fā)表于 07-04 17:08
英倫科技10.1英寸裸眼3D數(shù)碼相框升級(jí)了，玩轉(zhuǎn)AI文生圖太cool了！
此次升級(jí)將AI內(nèi)容生成與裸眼3D顯示深度結(jié)合，解決了傳統(tǒng)3D內(nèi)容制作成本高的痛點(diǎn)，使普通用戶也能輕松創(chuàng)作
評(píng)論