NVIDIA 介紹 ACE for Games 新服務 在遊戲中打造客製化的語音、對話和動畫人工智慧模型

 

　　新款 14 吋 NVIDIA Studio 筆記型電腦搭載 GeForce RTX 40 系列筆記型電腦 GPU，讓創作者更容易攜帶，效能顯著優於前一代產品。人工智慧專用的 Tensor 核心，讓人們在使用 Davinci Resolve 這類熱門的應用程式來執行創意工作時，可以省下不少時間。光線追蹤核心加上神經渲染技術 DLSS 3，提升了 D5 Render 及 NVIDIA Omniverse 等即時 3D 渲染應用程式的運行表現。

 

　　NVIDIA 還推出了全新加速影片編碼技術。同步場景編碼（Simultaneous Scene Encoding）將一組一組的畫格或場景送到每個 NVIDIA 編碼器（NVENC）。在徹底發揮多個 NVENC 編碼實力的情況下，大幅減少了影片輸出時間，亦不會犧牲影像品質。熱門的影片剪輯應用程式 CapCut 是第一款整合這項技術的軟體。

 

　　五月號 Studio 驅動程式同樣也已開放下載；本月版本包括用於 MAGIX VEGAS Pro、D5 Render、CapCut 及 VLC Media Player 的更新內容，加上用於熱門應用程式的人工智慧模型最佳化內容。

 

　　NVIDIA 在亞洲最大規模的年度科技展 COMPUTEX 中公布多項更新內容，為創作者帶來了 NVIDIA Studio 平台的新工具和絕佳效能，以及無比強大的人工智慧能量。NVIDIA 創辦人暨執行長黃仁勳在 COMPUTEX 2023 大會開幕主題演講中，介紹 NVIDIA Avatar Cloud Engine (ACE) for Games 這項用於遊戲開發的全新生成式人工智慧技術。該平台運用人工智慧自然語言互動技術，替遊戲中的非玩家角色（NPC）加入智慧。

 

• NVIDIA Avatar Cloud Engine (ACE) for Games 全新生成式人工智慧技術，替遊戲中的非玩家角色（NPC）加入智慧

　　在本週的《In the NVIDIA Studio》特輯中，將介紹在 NVIDIA 創意總監 Gabriele Leone 的帶領下，與 Convai 合力製作出名為「Kairos」演示內容，可以看到一個模型怎麼變成一個活靈活現、栩栩如生的角色。

 

 

　　採用 NVIDIA Ada Lovelace 架構的 NVIDIA Studio 筆記型電腦，是世界上用於創作和遊戲的筆記型電腦中速度最快的產品，也是 14 吋筆記型電腦首次擁有 GeForce RTX 的極致效能。它顛覆了超輕型筆電市場，讓裝置兼具極致效能與易攜帶性。

 

• 華碩 Zenbook Pro 14 最高搭載 GeForce RTX 4070 筆記型電腦 GPU

 

　　這些專為創意而生的筆記型電腦，擁有強大能力來執行各項創意作業。NVIDIA Studio 能夠以絕佳效能來運行 110 多個創意應用程式，並且透過 NVIDIA Studio 驅動程式穩定運行。同時另有提供強大的人工智慧 Studio 軟體，包括 NVIDIA Omniverse、Canvas、Broadcast。

 

　　第五代 Max-Q 技術帶來了一套先進的人工智慧技術，可以將筆記型電腦的運作效能、用電情況及音效播放表現提升到最佳程度，以呈現最高效率，電池壽命亦提高了 70%。DLSS 現已針對筆記型電腦進行了最佳化調整，透過 DLSS 3 光學多畫格生成及超解析度技術，讓創作者在使用 Omniverse 和 D5 Render，以及玩家們在玩《電馭叛客 2077（Cyberpunk 2077）》等熱門遊戲時，可以享受到絕佳的 3D 渲染表現。

 

　　隨著超輕型裝置市場的蓬勃發展，筆記型電腦製造商為創作者提供比過去更多的選擇。日前多家廠商已經推出這類機型，包括宏碁（Acer）的 Swift X 14、華碩（ASUS）的 Zenbook Pro 14、技嘉（GIGABYTE）的 Aero 14、Lenovo 的 Slim Pro 9i 14 及微星（MSI）的 Stealth 14，還有更多機型即將問世。前往 GeForce 網站，瞭解最新搭載 GeForce RTX 技術的 NVIDIA Studio 系統，以及探索多款高效能 Studio 產品。

 

 

　　最新推出的 Video Codec SDK 12.1 新增支援多編碼器，能夠減少一半的匯出時間。先前宣布推出的分割編碼方法，也就是分割一個畫格，並且把每個部分送到一個編碼器的作法，現在又推出了 API，應用程式開發人員可以提供給他們的最終用戶。過去會針對 4K 或以上畫質的影片及更快的匯出預設值自動加入分割編碼技術。在推出這個更新後，開發人員便能簡單得讓使用者切換為使用這個選項。

 

　　Video Codec SDK 12.1 還採用新的編碼方法：同步場景編碼。影片剪輯應用程式可以在把圖片或場景送入渲染佇列時，將它們拆成一組一組。可以獨立對每一組進行渲染，最終輸出時再恢復成正確的順序。

 

　　如此一來大幅提高了編碼速度，雙編碼器的速度提高了約 80%。如果像專業級 NVIDIA RTX 6000 Ada 世代 GPU 這種有兩個以上 NVENC 的 GPU，速度還會變得更快。與目前的分割編碼方法相比，也改善了影像品質，這種方法會將獨立畫格送到每個編碼器，最終輸出時再把它們拼接在一起。CapCut 用戶將率先從最新軟體版本開始，在有著兩個以上編碼器的 RTX GPU 上體驗到這項優點，最新軟體版本現已開放下載。

 

 

　　五月號的 Studio 驅動程式帶來多項升級及最佳化項目。MAGIX 與 NVIDIA 將旗下的 VEGAS Pro 人工智慧模型搬到 WinML 上，讓影片剪輯師能夠更快套用各種人工智慧效果。這一版的驅動程式還為在 WinML 上運行的應用程式，調整出最佳的人工智慧功能，當中包括 Adobe Photoshop、Lightroom、MAGIX Vegas Pro、ON1 和 DxO 等。

 

　　即時光線追蹤渲染器 D5 Render 也躋身支援 NVIDIA DLSS 3 的行列，讓用戶在使用視埠更為平順，以超級流暢的運動方式瀏覽場景，使得建築師、設計師、室內設計師與所有專業 3D 藝術家大受裨益。

 

• D5 Render 與 DLSS 3 合作創作出逼真場景畫面

　　VLC Media Player 現已完全整合利用人工智慧與 RTX Tensor 核心升頻影片品質的 NVIDIA RTX Video Super Resolution 視訊升頻技術，無需再另外下載。瞭解更多資訊。下載 GeForce Experience 或 NVIDIA RTX Experience，以獲得最新驅動程式版本發布資訊。

 

 

　　在 NVIDIA 創辦人暨執行長黃仁勳的 COMPUTEX 主題演講中，介紹了 NVIDIA ACE for Games 全新代工服務，運用人工智慧自然語言互動技術，替遊戲中的 NPC 加入智慧。

 

　　遊戲開發商及工作室現在可以利用 ACE for Games，在軟體和遊戲中打造與部署客製化的語音、對話和動畫人工智慧模型。人工智慧技術可以改變整個世界，替個人、一群人或是整個城鎮的角色注入新的生命力。

 

　　ACE for Games 建立在 NVIDIA Omniverse（這是一個用於建立及運行元宇宙應用程式的開放式開發平台） 的技術之上，這些技術包括用於語音、對話和角色動畫的最佳化人工智慧基礎模型。

 

　　這包括用於微調遊戲角色的對話式人工智慧技術 NVIDIA NeMo、用於自動語音辨識和文字轉語音的 NVIDIA Riva，以及用於即時配合音軌，對遊戲角色臉部建立表情豐富生動動畫的 Omniverse Audio2Face。Audio2Face 具有適用於 Unreal Engine 5 的 Omniverse Connector，開發人員可以直接將臉部動畫加在 MetaHuman 角色身上。

 

 

　　黃仁勳透過名為「Kairos」的展示內容，向 COMPUTEX 的與會嘉賓展示了 ACE for Games 引擎，一窺未來的遊戲發展方向。身為 NVIDIA Inception 新創公司計畫一員的 Convai，運用先進的對話式人工智慧技術來打造虛擬遊戲世界。NVIDIA Lightspeed Studios 在創意總監及 3D 藝術家 Gabriele Leone 的領軍下，建造出如此寫實的場景及展示內容。雙方合力展現出開發人員使用 NVIDIA ACE for Games 來製作 NPC 的無窮潛力。

 

　　玩家在「Kairos」展示內容中跟拉麵店老闆 Jin 進行互動。製作團隊使用在 NVIDIA Omniverse 中製作出的虛擬拉麵店為模型，打造出這間栩栩如生的拉麵店。NVIDIA 的一名藝術家為此前往東京，拜訪一家真正的拉麵店，收集了超過兩千張高解析度參考圖片和影片，在廚房的不同區域一一拍下煮麵、清潔、準備食材及存放收納各個方面的畫面。「我們大概使用了七成的現有模型、三成的新模型，還有八成重新貼圖。」Leone 說。

 

• 「Kairos」：在 Autodesk Maya、Blender、Unreal Engine 5 及 NVIDIA Omniverse 中精美渲染出的拉麵店場景

　　在 Autodesk 3ds Max 中使用帶有 RTX 加速的人工智慧降噪功能，替這間數位拉麵店裡的物體建立模型，Blender 則受益於 RTX 加速的 OptiX 光線追蹤技術，在視埠中操作時能以互動方式滑順移動物體，這一切都是在 GeForce RTX 40 系列 GPU 支援下進行。

 

　　在 Adobe Substance 3D Painter 中使用 NVIDIA Iray 渲染技術進行貼圖，還用上了 RTX 加速光線及環境光遮蔽技術，在短短的時間內烘焙出大型資產。Gabriele Leone 表示：「可以說，要是少了 GeForce RTX GPU 和 Omniverse，我們就得花費更多時間才能完成這個案子」

 

　　接著透過 Unreal Engine 5 Connector，使用 Omniverse 及 Audio2Face 應用程式，直接對拉麵店的 NPC 加上臉部動畫和說話的聲音。就算 Jin 只是一個 NPC，但在生成式人工智慧的幫助下，也能夠配合敘述的背景故事以用逼真一致的方式回答自然語言。

 

　　製作團隊使用 Unreal Engine 5 來製作照明和動畫，在 NVIDIA DLSS 的幫助下，使用人工智慧來升頻以較低解析度的渲染畫格，同時保有栩栩如生的細節，再次提高了製作團隊使用視埠時的互動性。

 

• Convai 運用先進的對話式人工智慧技術來打造虛擬遊戲世界，讓遊戲玩家可與 NPC 自在互動