0
本文作者: 我在思考中 | 2021-08-12 15:06 |
作者 | 冉啟行
編輯 | 陳彩嫻
在今年的 SIGGRAPH 上,英偉達(dá)大顯身手!
近日,在非盈利國際化會員組織 ACM SIGGRAPH 舉辦的 SIGGRAPH 2021 線上會議中,英偉達(dá)展示了 NVIDIA RTX 技術(shù)能為 3D 開發(fā)者和行業(yè)愛好者帶來的獨(dú)家優(yōu)勢。
當(dāng)?shù)貢r間 8 月 10 日,NVIDIA 宣布推出 Omniverse ——它是全球首個為元宇宙建立的基礎(chǔ)模擬平臺,它可以讓用戶身臨其境地連接到虛擬世界中,用戶在這里可以創(chuàng)建獨(dú)一無二的數(shù)字場景、完美的 3D 模型、設(shè)計精美的建筑等。
為了滿足 3D 開發(fā)者、愛好者強(qiáng)大的硬件性能需求,NVIDIA 同時推出了 RTX A2000 顯卡。在 Omniverse 和 RTX 硬件的雙重配合下,英偉達(dá)還拿到了 SIGGRAPH 最佳展示獎!
Omniverse 應(yīng)用生態(tài)正在迅速成長
為了簡化 3D 建模,Omniverse 平臺正在不斷擴(kuò)張其應(yīng)用生態(tài)系統(tǒng)。
目前,Omniverse 已支持世界頂尖動畫制作工作室 Pixar 推出的 USD(通用場景描述) Blender 3.0版本,創(chuàng)作者們能夠在 Omniverse 平臺中使用該應(yīng)用。
NVIDIA 還推出了一個實驗性的 Blender alpha 3.0 USD 分支插件,其中包括更高版本的 USD 和素材支持,并將很快面向世界各地的 Blender 用戶。
此外,英偉達(dá)和 Adobe 正在合作開發(fā)一個新的 Substance 3D 插件,該插件將使 Omniverse支持 Substance Material。
使用該插件,用戶可以在 Omniverse 中直接調(diào)整在 Adobe Substance 3D 中創(chuàng)建或?qū)氲牟牧?/span>,這種方式可以有效節(jié)省時間,而不需要用戶二次打開軟件操作。
另外,在 Omniverse 上,英偉達(dá)還增加了一個名為 GANverse 3D – Image2Car 的拓展程序,它可以利用 AI 機(jī)制,使 3D 建模變得更容易。
GANverse3D 建立在一個在 2D 照片上訓(xùn)練的生成對抗網(wǎng)絡(luò)上,合成數(shù)千個對象的多個視圖來預(yù)測 3D 幾何、紋理和零件分割標(biāo)簽。這個過程可以將汽車的單張照片變成可以在虛擬場景中行駛的 3D 模型,并配有逼真的前燈、閃光燈和車輪。
GANverse3D 是基于 2D 照片訓(xùn)練的深度學(xué)習(xí)引擎,它可以根據(jù)標(biāo)準(zhǔn)的 2D 圖像來創(chuàng)建 3D 模型。例如,它可以將一張汽車照片轉(zhuǎn)換為 3D 模型,該模型甚至可以在虛擬場景中行駛,并配有逼真的前燈、尾燈和車輪。
GANverse3D 是包含在 Omniverse AI Toy Box 的擴(kuò)展集合中的第一個程序。AI Toy Box (人工智能玩具盒)的應(yīng)用擴(kuò)展允許沒有經(jīng)驗的 3D 創(chuàng)作者輕松創(chuàng)建場景,且為經(jīng)驗豐富的用戶提供多應(yīng)用程序一體化的體驗。
這是 GANverse3D 與 Omniverse 連接工作流程的實際應(yīng)用,其中包括 Omniverse Create、Reallusion Character Creator 3 和 Adobe Photoshop。
RTX A2000 提供 3D 性能支持
NVIDIA RTX A2000 目前已成為面向 3D 創(chuàng)作者最的強(qiáng)大工具,這款 GPU 采用了 NVIDIA Ampere 架構(gòu)中的最新 RTX 技術(shù),主要包括:
第二代 RT 核心,主要用于實時光線追蹤,相比前一代,性能最大提升約 500%。
第三代 Tensor Cores,它為 AI 創(chuàng)造功能提供動力和加速支持。
2 個 PCIe Gen 4 和 6GB GPU ECC內(nèi)存,將進(jìn)一步提升 3D 渲染和導(dǎo)出文件速度。
NVIDIA RTX A2000 工作站顯卡,桌面版將在 10 月發(fā)售。
對于忙碌的開發(fā)者來說,擁有 NVIDIA RTX A2000 GPU 的筆記本電腦的確是最高效且最專業(yè)的,它為輕薄的 PC 產(chǎn)品帶來了光線追蹤和 AI 支持。
NVIDIA RTX A2000 GPU 支持多種創(chuàng)造性的工作,包括 3D 建模和 Omniverse,無論是在臺式機(jī)還是筆記本電腦上,它都可以輕松運(yùn)行。
NVIDIA 已集成入最新軟件更新
最近,一些頂尖的創(chuàng)意應(yīng)用程序進(jìn)行了更新,已發(fā)布的 NVIDIA Studio 已將其更新內(nèi)容全部納入到了驅(qū)動程序中,主要包括對于以下三個軟件的支持。
Topaz 銳化 AI v3.2 改進(jìn)了 RTX GPU 和 Tensor Cores 加速的 AI 模型,增加了 1.5 倍的運(yùn)動模糊的功能,進(jìn)一步減少了偽影。通過實時處理蒙版筆劃和覆蓋顯示的自定義控件,應(yīng)用內(nèi)蒙版也得到了改進(jìn)。
Reallusion Character Creator v3.43 是第一個集成 Audio2Face 的第三方應(yīng)用程序,它現(xiàn)在允許創(chuàng)作者將角色從 Character Creator 導(dǎo)出到 Omniverse 中,作為具有 Audio2Face 兼容性的 USD 文件。
它允許面部和唇部動畫完全由人工智能驅(qū)動,不管語音效果如何,但它的確簡化了 3D 角色動畫的創(chuàng)作過程。
Capture One 21 v14.3.0 添加了一個新的 Magic Brush 工具,它可以根據(jù)圖像內(nèi)容瞬間創(chuàng)建復(fù)雜的蒙版,以用于圖層編輯。此過程是需要硬件加速的,與 CPU 相比,使用 GPU 時速度最多可提高 3 倍。
軟件生態(tài)的持續(xù)更新,將為 3D 開發(fā)者和藝術(shù)家們,提供更高效、高質(zhì)量的創(chuàng)作環(huán)境,也將給予 Omniverse 平臺更加長久的生命力。
軟硬結(jié)合,英偉達(dá)或“最佳展示獎”
最后,值得一提的是,英偉達(dá)還憑借數(shù)字化身(虛擬人物)的演示,在 SIGGRAPH 上獲得了“最佳展示獎”。
NVIDIA 研究團(tuán)隊在硅谷總部進(jìn)行現(xiàn)場直播時,展示了一系列 AI 模型,這些模型可以在高速網(wǎng)絡(luò)下,為視頻會議和講故事等項目創(chuàng)建栩栩如生的虛擬角色。
在演示中,一名 NVIDIA 研究員扮演了面試官,面試者則是英偉達(dá)的數(shù)字化身。NVIDIA研究人員使用的是 RTX 筆記本電腦,另一位數(shù)字化身則由 RTX A6000 GPU 臺式工作站驅(qū)動。
在通話過程中,英偉達(dá)展示了人工智能驅(qū)動的數(shù)字化虛擬人物技術(shù)與采訪者溝通交流能力。
該演示的特色在于從單張照片生成數(shù)字化身,并使用自然的 3D 面部運(yùn)動為化身制作動畫,最后將文本轉(zhuǎn)換為語音進(jìn)行輸出對話。
NVIDIA 應(yīng)用深度學(xué)習(xí)研究副總裁 Bryan Catanzaro 在演講中表示:
“眾所周知,制作數(shù)字化虛擬人物是一個的困難、乏味和昂貴的過程,但是有了 AI 工具后,就有了一種簡單的方法,它可以為真人以及卡通人物創(chuàng)建數(shù)字化身,可用于視頻會議、講故事、虛擬助手和許多其他應(yīng)用程序。”
小結(jié)
目前,Omniverse 仍處于公測階段,它對 NVIDIA RTX 和 GeForce RTX GPU 用戶免費(fèi)開放。用戶在安裝完 NVIDIA Studio 驅(qū)動程序后,即可獲得更新支持。
英偉達(dá)在 Siggraph 上的一系列重磅更新,可謂震驚四座。不過,它能否為元宇宙、 3D 行業(yè)真正帶來了真正革命性的改變,且讓子彈再飛一會兒。
原文鏈接:
1.https://blogs.nvidia.com/blog/2021/08/10/omniverse-connector-extension-plugin-siggraph/
2.https://blogs.nvidia.com/blog/2021/08/10/siggraph-real-time-live-demo/
雷峰網(wǎng)特約稿件,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。