NVIDIA ACE for Games 和 Kairos 演示在 COMPUTEX 展會(huì)上首次亮相,本期“NVIDIA Studio 創(chuàng)意加速”欄目將詳細(xì)介紹相關(guān)內(nèi)容。

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

編輯注:本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分,該系列旨在介紹一些特邀藝術(shù)家、提供創(chuàng)意提示和技巧,并展示 NVIDIA Studio 技術(shù)如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術(shù)和資源,以及它們將如何顯著加速內(nèi)容創(chuàng)作。

作為亞洲最大的年度科技貿(mào)易展覽會(huì),COMPUTEX 展會(huì)釋出大量最新資訊,向創(chuàng)作者介紹了大量的 AI 功能,以及來自 NVIDIA Studio 平臺(tái)的全新工具和性能提升。

新款 14 英寸 NVIDIA Studio 設(shè)計(jì)本配備 GeForce RTX 40 系列筆記本電腦 GPU,與上一代產(chǎn)品相比,性能和便攜性大幅提升,助力創(chuàng)作者加速靈感呈現(xiàn)。AI 專用硬件 Tensor Core 可使 Davinci Resolve 等熱門應(yīng)用中的任務(wù)省時(shí)高效。RT Core 與我們的神經(jīng)渲染技術(shù) DLSS 3 結(jié)合,可提升 D5渲染器和 NVIDIA Omniverse 等實(shí)時(shí) 3D 渲染應(yīng)用的性能。

NVIDIA 還推出了一種加速視頻編碼的新方法。并行場(chǎng)景編碼可將獨(dú)立的幀組或場(chǎng)景組發(fā)送到每個(gè) NVIDIA 編碼器。通過充分利用多個(gè) NVIDIA 編碼器,可以在不影響圖像質(zhì)量的情況下,顯著縮減視頻導(dǎo)出時(shí)間。首個(gè)集成該技術(shù)的軟件是熱門視頻編輯應(yīng)用剪映專業(yè)版和CapCut桌面端。

5 月版 Studio 驅(qū)動(dòng)目前可供下載。此版本支持更新 MAGIX VEGAS Pro、D5渲染器、VLC 媒體播放器。并且除了支持剪映專業(yè)版和CapCut桌面端之外,該版本還支持針對(duì)熱門應(yīng)用的 AI 模型優(yōu)化。

全新 NVIDIA Avatar Cloud Engine (ACE) for Games 平臺(tái)借助 AI 驅(qū)動(dòng)的自然語(yǔ)言交互,使游戲內(nèi)的非玩家角色 (NPC) 變得智能。

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

https://images.nvidia.cn/cn/youtube-replicates/5R8xZb6J3r0.mp4

Kairos 演示是由 NVIDIA 創(chuàng)意總監(jiān) Gabriele Leone 與 Convai 聯(lián)合開展的項(xiàng)目。在本周的“NVIDIA Studio 創(chuàng)意加速”欄目中將介紹如何將單個(gè)模型轉(zhuǎn)變?yōu)轷r活逼真、栩栩如生的角色。

 

超便攜、高性能

NVIDIA Studio 設(shè)計(jì)本采用 NVIDIA Ada Lovelace 架構(gòu),既可助您高效創(chuàng)作,也可助您暢快游戲。

這是 GeForce RTX 性能首次應(yīng)用于 14 英寸設(shè)備。在此過程中,NVIDIA Studio 設(shè)計(jì)本憑借性能和便攜性的完美結(jié)合,改變了超便攜筆記本市場(chǎng)。

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

華碩靈耀Pro 14最高可選配 GeForce RTX 4070 筆記本電腦 GPU。

這些專為創(chuàng)作者打造的生產(chǎn)力工具性能出眾。NVIDIA Studio 平臺(tái)可為超過 110 款創(chuàng)意應(yīng)用提供強(qiáng)力支持,并且在 NVIDIA Studio 驅(qū)動(dòng)的協(xié)助下為這些應(yīng)用提供持久的穩(wěn)定性。此外,該平臺(tái)包含一套由 AI 驅(qū)動(dòng)且功能強(qiáng)大的 Studio 軟件,例如 NVIDIA Omniverse、Canvas 和 Broadcast。

第五代 Max-Q 技術(shù)是一套先進(jìn)的 AI 驅(qū)動(dòng)型技術(shù),可優(yōu)化筆記本電腦的性能、功耗和噪音,以實(shí)現(xiàn)峰值效率。電池續(xù)航時(shí)間最多可延長(zhǎng) 70%。DLSS 現(xiàn)已針對(duì)筆記本電腦進(jìn)行優(yōu)化: DLSS 3 光學(xué)多幀生成和超分辨率技術(shù)可在 Omniverse 和 D5渲染器以及熱門游戲(例如“賽博朋克 2077 (Cyberpunk 2077)”)中為創(chuàng)作者提供令人驚嘆的 3D 渲染性能。

隨著超便攜筆記本市場(chǎng)的升溫,PC 筆記本電腦制造商為創(chuàng)作者提供了比以往更多的選擇。近期發(fā)布以及更多即將發(fā)布的機(jī)型包括:宏碁 非凡X 14、華碩靈耀Pro 14、 聯(lián)想YOGA Pro14s至尊版和微星 絕影14 Studio。

 

并行場(chǎng)景編碼

近期發(fā)布的 Video Codec SDK 12.1 版本增加了對(duì)多編碼器的支持,可將視頻導(dǎo)出時(shí)間減半。我們之前發(fā)布的切分編碼方法(切分幀畫面,然后將每個(gè)子畫面單獨(dú)發(fā)送給一個(gè)編碼器)現(xiàn)在具有一個(gè)可由應(yīng)用開發(fā)者提供給終端用戶的 API。之前,系統(tǒng)會(huì)自動(dòng)啟用切分編碼來處理 4K 或更高分辨率的視頻,帶來更快的導(dǎo)出預(yù)設(shè)。在此次更新中,開發(fā)者可為用戶提供一個(gè)輕松切換編碼方法的選項(xiàng)。

此外,Video Codec SDK 12.1 版本還引入了一種新的編碼方法,即并行場(chǎng)景編碼。在圖片或場(chǎng)景發(fā)送到渲染工作流后,視頻應(yīng)用可以將其分割為多個(gè)組。然后,每組均可被獨(dú)立渲染,并在最終輸出時(shí)以適當(dāng)?shù)捻樞蚺帕小?/p>

結(jié)果顯示,編碼速度可獲得顯著提高,雙編碼器的速度可提高將近 80%,在兩個(gè)以上的 NVIDIA 編碼器場(chǎng)景下還可以進(jìn)一步提升編碼速度(例如 NVIDIA RTX 6000 Ada 架構(gòu)專業(yè) GPU)。與現(xiàn)有的切分編碼方法相比,圖像質(zhì)量也有所提高。

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

https://images.nvidia.cn/cn/youtube-replicates/7RvQ7tlxClU.mp4

剪映:全能易剪的視頻創(chuàng)作工具,讓人人都能參與創(chuàng)作,輕松記錄美好生活。經(jīng)過4年的迭代發(fā)展,剪映已推出移動(dòng)端、Pad版、專業(yè)版、網(wǎng)頁(yè)版多個(gè)產(chǎn)品版本,實(shí)現(xiàn)了多端互通,為更多場(chǎng)景下的自由創(chuàng)作創(chuàng)造了可能。

剪映專業(yè)版4.2.0和CapCut桌面端2.2.0的Beta版已于今天發(fā)布。經(jīng)測(cè)試,視頻導(dǎo)出速度可提升高達(dá)67%。用戶可率先在配備兩個(gè)或更多編碼器的 RTX GPU 上體驗(yàn)此優(yōu)勢(shì)。

 

5 月版 Studio 驅(qū)動(dòng)推出重大更新

5 月版 Studio 驅(qū)動(dòng)的功能得到顯著的升級(jí)和優(yōu)化。

MAGIX 已與 NVIDIA 合作將其 VEGAS Pro AI 模型系列遷移到 WinML,使視頻編輯者能夠更快地應(yīng)用 AI 特效。

此驅(qū)動(dòng)還為在 WinML 上運(yùn)行的應(yīng)用優(yōu)化了 AI 功能,包括 Adobe Photoshop、Lightroom、MAGIX Vegas Pro、ON1 和 DxO 等應(yīng)用。

實(shí)時(shí)光線追蹤渲染器 D5渲染器也添加了 NVIDIA DLSS 3 技術(shù),可為用戶提供更流暢的視窗體驗(yàn),讓他們?cè)跒g覽場(chǎng)景時(shí)感受超流暢的動(dòng)態(tài)效果。建筑師、設(shè)計(jì)師、室內(nèi)設(shè)計(jì)師以及所有專業(yè) 3D 藝術(shù)家均可從中受益。

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

D5渲染器與 DLSS 3 強(qiáng)強(qiáng)聯(lián)合,可打造逼真的圖像。

NVIDIA RTX 視頻超分辨率功能(使用 AI 和 RTX Tensor Core 提升視頻質(zhì)量的視頻升采樣技術(shù))現(xiàn)已完全集成到 VLC 媒體播放器中,您無(wú)需再單獨(dú)下載。了解詳情。

下載 GeForce Experience 或 NVIDIA RTX Experience 是您升級(jí)驅(qū)動(dòng),獲悉其最新版本的最簡(jiǎn)單方法。

 

游戲界的王牌

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 COMPUTEX 展會(huì)上 發(fā)表了主題演講,介紹了可借助 AI 驅(qū)動(dòng)的自然語(yǔ)言交互讓游戲 NPC 更智能的全新構(gòu)建服務(wù) NVIDIA ACE for Games。

游戲開發(fā)者和工作室可以使用 ACE for Games 在其軟件和游戲中構(gòu)建和部署自定義的語(yǔ)音、對(duì)話和動(dòng)畫 AI 模型。這項(xiàng) AI 技術(shù)可以改變整個(gè)游戲世界,為單個(gè)角色、群體角色或整個(gè)城鎮(zhèn)的角色注入新的生命。此技術(shù)的未來無(wú)可限量。

ACE for Games 基于 NVIDIA Omniverse 中的技術(shù)構(gòu)建而成。 NVIDIA Omniverse 是一個(gè)用于構(gòu)建和運(yùn)行元宇宙應(yīng)用的開放式開發(fā)平臺(tái),包含針對(duì)語(yǔ)音、對(duì)話和角色動(dòng)畫而進(jìn)行優(yōu)化的 AI 基礎(chǔ)模型。

其中包括 NVIDIA NeMo(可針對(duì)游戲角色進(jìn)行微調(diào)的對(duì)話式 AI)、NVIDIA Riva(具有自動(dòng)語(yǔ)音識(shí)別和文字轉(zhuǎn)語(yǔ)音功能),以及 Omniverse Audio2Face(可即時(shí)為游戲角色創(chuàng)建生動(dòng)的面部表情動(dòng)畫,以匹配任何語(yǔ)音)。Audio2Face 可配合 Omniverse 的虛幻引擎5連接器,開發(fā)者可以直接向 MetaHuman 角色添加面部動(dòng)畫。

 

眼見為實(shí):Kairos 演示

在名為 Kairos 的演示中,黃仁勛先生向 COMPUTEX 與會(huì)者展示了 ACE for Games,并讓觀眾一窺游戲的未來。

Convai是一家獲得 NVIDIA 初創(chuàng)加速計(jì)劃支持的初創(chuàng)公司,專注于為虛擬游戲世界開發(fā)先進(jìn)的對(duì)話式 AI。NVIDIA Lightspeed Studios 由創(chuàng)意總監(jiān)兼 3D 藝術(shù)家 Gabriele Leone 領(lǐng)導(dǎo),打造出非常真實(shí)的場(chǎng)景。二者強(qiáng)強(qiáng)聯(lián)合,展示了開發(fā)者可如何使用 NVIDIA ACE for Games 構(gòu)建 NPC。

在演示中,玩家與一家拉面店的老板 Jin 互動(dòng)。這個(gè)照片級(jí)真實(shí)的店鋪基于在 NVIDIA Omniverse 中預(yù)先構(gòu)建的虛擬拉面店。

為此,一位 NVIDIA 藝術(shù)家前往東京的一家正宗拉面餐廳,收集了 2,000 多份高分辨率參考圖像和視頻。這些素材的內(nèi)容包含烹飪區(qū)、清潔區(qū)、食物準(zhǔn)備去和儲(chǔ)存去等不同廚房區(qū)域的各個(gè)角落。Leone 說:“我們使用了大約 70% 的現(xiàn)有模型、30% 的新模型以及 80% 的紋理重建。”

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

Kairos:在 Autodesk Maya、Blender、UE 5 和 NVIDIA Omniverse 中進(jìn)行精美渲染。

在數(shù)字拉面店中,物體在 Autodesk 3ds Max 和 Blender 中進(jìn)行建模,前者采用 RTX 加速的 AI 降噪技術(shù),后者則利用 RTX 加速的 OptiX 光線追蹤技術(shù)在視窗中實(shí)現(xiàn)流暢的交互式創(chuàng)作。以上均由該團(tuán)隊(duì)大量 GeForce RTX 40 系列 GPU 提供支持。

創(chuàng)作者在紋理創(chuàng)作階段使用Adobe Substance 3D Painter, 將 NVIDIA Iray 渲染技術(shù)與 RTX 加速的光線和環(huán)境光遮蔽結(jié)合,用戶只需片刻即可烘焙出大型素材。

“說實(shí)話,在缺少 GeForce RTX GPU 和 Omniverse 的

情況下,完成此項(xiàng)目必然要花費(fèi)大量時(shí)間。”

— Gabriele Leone

接下來,借助 UE 5 連接器,該團(tuán)隊(duì)可使用 Omniverse 和 Audio2Face 應(yīng)用直接為拉面店 NPC 添加面部動(dòng)畫和音頻。

盡管 Jin 是一名 NPC,但他能夠?qū)ψ匀徽Z(yǔ)言給予真實(shí)的回復(fù),并且答復(fù)內(nèi)容與敘事背景故事一致。而這一切都得益于生成式 AI 的幫助。

此外,光照和動(dòng)畫在 UE 5 中完成,并由 NVIDIA DLSS 技術(shù)提供助力。該技術(shù)借助 AI 對(duì)以較低分辨率渲染的幀進(jìn)行升采樣,同時(shí)仍保留高保真細(xì)節(jié),進(jìn)一步為制作團(tuán)隊(duì)提升視窗的交互性。

NVIDIA RTX 帶來革命性的 14 英寸筆記本電腦,并行場(chǎng)景編碼和 5 月版 Studio 驅(qū)動(dòng)現(xiàn)已推出

將您的拉面訂單交給 NPC - 這個(gè)交互式、可對(duì)話角色。

突然之間,NPC 變得更具吸引力。亦可大放異彩。

請(qǐng)?jiān)谖⒉?、嗶哩嗶哩,以及微信上關(guān)注 NVIDIA Studio 的官方帳號(hào),您還可以在抖音上觀看教程并通過訂閱 NVIDIA Studio 新聞通訊從收件箱中了解最新資訊。

標(biāo)簽:NVIDIA

隨機(jī)推薦