在SIGGRAPH大會上宣布的最新消息包括ChatRTX更新項目及Llama支援 3,以強化創作 AI內容、提高生產力和開發能力
NVIDIA 在年度繪圖與 AI 領域盛會 SIGGRAPH 大會上,重點展示最新搭載 NVIDIA RTX 技術的工具及應用程式。

這些 AI 技術提供先進的光線追蹤與渲染技術,可在遊戲、虛擬實境、動畫與電影特效中製作出極為逼真的繪圖畫面與身臨其境的體驗。RTX AI PC 和工作站有助於推動發展互動式數位媒體、內容創作、生產力和開發的未來。
ACE的AI魔法
NVIDIA 創辦人暨執行長黃仁勳在 SIGGRAPH 大會的爐邊對談活動中,介紹了以 NVIDIA NIM 微服務打造的互動式數位人類「James」,展現運用 AI 技術進行客戶互動的發展潛力。
採用 NVIDIA ACE 技術,以顧客服務工作流程為基礎所創作出的 James,是一個可以運用情感、幽默感和準確的情境反映能力與人們建立關係的虛擬助理。不久之後,使用者就可以在 ai.nvidia.com 上即時與 James 進行互動。

NVIDIA 還介紹了用於遠端呈現的 NVIDIA Maxine AI 平台的最新進展,以及採用 NVIDIA ACE 的公司,NVIDIA ACE 是一套運用生成式AI 技術製作出栩栩如生數位人的技術。這些技術可透過用於製作語音與翻譯、視覺、智慧、逼真動畫與行為,以及極具真實感的外觀等 AI 模型,以協助開發數位人。
Maxine 採用 Maxine3D 和 Audio2Face-2D 兩項 AI 技術,能夠在遠端呈現的場景中製作出更優秀的數位人使用體驗。
開發者可以利用 Maxine 與 ACE 技術,在客戶服務、遊戲與其他互動體驗中,藉由數位介面為使用者提供更吸引人且更自然的互動。
NVIDIA ACE 技術運用先進的 AI 技術,讓開發者能夠設計出富有逼真寫實的動畫、語言和情緒,可以即時回應使用者的數位化身。RTX GPU 可提供必要的運算能力及繪圖的逼真度,以十分細膩的細節與流暢感來呈現 ACE 數位化身。
隨著技術不斷進步及採用者日益增加,ACE 為建立虛擬世界樹立了新基準,激發各行各業進行創新。開發者利用 ACE 加上 RTX GPU 的強大功能,能夠建立出更具有臨場感的應用程式,以及先進的 AI 互動式數位媒體體驗。
RTX更新項目協助創作者運用AI釋放無限創意
NVIDIA GeForce RTX PC 及 NVIDIA RTX 工作站將透過 GPU 加速技術進行升級,為使用者提供更棒的 AI 內容創作體驗。
影片剪輯者現在可以透過 Wondershare Filmora 和 DaVinci Resolve 使用 RTX Video HDR。有了這項技術,使用者可以將任何內容轉換成有著高動態範圍的影片,在明暗場景中都能呈現更豐富的色彩和更多的細節,使其成為製作遊戲影片、旅遊影片或活動影片的理想選擇。將 RTX Video HDR 加上 RTX超高影片解析度,可消除編碼瑕疵和增強細節,進一步提高視覺品質。
RTX Video HDR 需要將 RTXGPU 連接至相容 HDR10 的顯示器或電視。擁有搭載 RTX GPU 電腦的使用者,可以將檔案傳送至 Filmora 桌面應用程式,使用本機端的 RTX 加速技術繼續剪輯影片,且在 GeForce RTX 4070 Ti 或更高規格的 GPU 上使用雙編碼器,匯出速度可提高一倍。熱門的媒體播放器 VLC 在六月時開始支援 RTX超高影片解析度和 RTX Video HDR,加入 AI 增強的視訊播放功能。
3D 藝術家還能取得更多可簡化並強化工作流程的 AI 應用程式和工具,包括 Replikant、Adobe、Topaz 和 Getty Images。
AI 輔助 3D 動畫平台 Replikant 整合 ACE 技術裡的 NVIDIA Audio2Face,能夠製作出更精良的對嘴及臉部動畫效果。使用者利用 NVIDIA 加速生成模型的優勢,可以享受透過 RTX 和 NVIDIA DLSS 技術增強的即時視覺效果。Replikant 現已可在 Steam 平台上使用。
Adobe Substance 3D Modeler 加入由 AI 驅動的 Search Asset Library by Shape 功能,其目的在於簡化使用現有 3D 模型更換和增強複雜形狀的流程。這項新功能能夠大幅加快製作原型的速度,以及強化設計工作流程。
Adobe Substance 3D 裡新的 AI 功能納入先進的生成式 AI 功能,讓應用程式裡的紋理和材質創作工具變得更加強大。Adobe 首次將 Firefly 生成 AI 功能與 Substance 3D 的 Sampler 和 Stager 進行整合,讓工業設計師、遊戲開發者和視覺特效專業人員製作 3D 效果時可以更順暢,有著更高的生產力。
Substance 3D 使用者可以透過文字到紋理的生成和提示說明等工作,產生出畫面逼真或別具風格的紋理。這些紋理可直接套用至 3D 模型。全新的文字到紋理(Text to Texture)和生成式背景(Generative Background)等功能可大幅加快過去耗時又複雜的 3D 紋理製作以及畫面中人物和場景的配置等工作。
在 NVIDIA RTX Tensor 核心的支援下,Substance 3D 可以大幅加快運算速度,讓設計流程變得更直覺,讓人更容易發揮創意。Adobe 在 Substance 3D 工作流程中加入由 Firefly 驅動的 Creative Cloud 升級項目,而這個創新舉動推動了這項發展。
Topaz AI 已在多 GPU 工作流程中加入 NVIDIA TensorRT 加速功能,可在多個 GPU 間平行處理工作,以獲得更快的渲染速度。使用兩個 GPU 可比單一 GPU 系統的速度快上兩倍,還能隨著加入更多 GPU 而進一步擴充。
Getty Images 已更新其 Generative AI by iStock 服務,加入新功能以提升生成圖片的速度與品質。在 NVIDIA Edify 模型的支援下,最新的增強功能帶來引領業界的圖片生成速度,約六秒鐘可生成四張圖片,比舊模型的效能高出一倍,。經改良後的 Text-2-Image 與 Image-2-Image 功能可產生出更高品質的圖片,還更能按照使用者的提示來生成圖片。
Generative AI by iStock 的使用者現在還能指定相機的設定值,例如焦距(窄、標準或寬)和景深(近或遠)。改良後的生成式 AI 超解析度技術可使用 AI 來創造新的像素,以提升影像品質,在不會讓影像過度銳利的情況下大幅提升解析度。
連接LLM的AI
連接 Meta 的 Llama 等這一類大型語言模型(LLM)與使用者資料的技術展示內容 ChatRTX,可快速查詢筆記、文件或圖片。此項展示將獲得全新打造的使用者介面(UI),可提供更乾淨精緻的使用體驗。
ChatRTX 也是一個開源參考項目,向開發者展示如何透過 RTX 加速技術建立功能強大的本機端檢索增強應用程式(RAG)應用程式。

本次發表的最新版本 ChatRTX 採用 Electron+MaterialUI 框架,讓開發者可以更輕鬆地加入自己的 UI 元素或擴充技術的功能。此次更新還加入一個新的架構,可以讓整合不同 UI 一事變得更簡單,並且在 ChatRTX 後端應用程式介面上簡化建立新的聊天和 RAG 應用程式的作業。
終端使用者可以從 ChatRTX網頁下載最新版本的 ChatRTX。開發者可在 ChatRTX Git Hub套件庫裡找到新版本的原始程式碼。
Meta Llama 3.1-8B模型現在已針對 NVIDIA GeForce RTX PC 和 NVIDIA RTX 工作站上的推論作業進行最佳化。這些模型本身即有支援 NVIDIA TensorRT-LLM,這款開源軟體可加速 LLM 執行推論的表現。
戴爾的AI聊天機器人:利用RTX大力推動發展
戴爾(Dell)展示企業如何透過使用 NVIDIA AI Work bench 與適用 Llama 3 的 NVIDIA NIM 微服務,創造出最佳的 RAG 聊天機器人來促進 AI 發展。戴爾使用 NVIDIA AI Work bench Hybrid RAG計畫,展示如何透過聊天機器人及內嵌於本機端向量資料庫中的企業資料進行對話,並以三種方式的其中一種進行推論:
- 在本機端的 Hugging Face TGI 伺服器上執行
- 在雲端使用 NVIDIA 推論端點
- 在自行託管的 NVIDIA NIM 微服務上進行
HP AI Studio:利用CUDA-X和Galileo加速創新
HP在SIGGRAPH 大會將展示集中式資料科學平台 Zby HP AI Studio。HP 現已使用最新的 NVIDIA CUDA-X 函式庫,再加上該公司日前與生成式 AI 信賴層公司 Galileo 合作來增強於 2023 年 10 月發表的 AI Studio。其主要優點有:
- 更快部署專案:快速設定、連線及共用本機端及遠端的專案。
- 輕鬆協作:輕鬆存取及分享資料、範本和實驗。
- 按照您的方式運作:輕鬆選擇在哪裡處理資料,在線上與離線模式之間切換。
開發 AI Studio 的目的在於提高生產力並簡化 AI 開發作業,讓資料科學團隊能夠專注於創新。歡迎蒞 HP 的501 號展位,瞭解 AI Studio 搭配 RAPIDS cuDF 如何提升預先處理資料的能力,加速 AI 作業管道。申請搶先試用AI Studio。
RTX提高Stable Diffusion的執行速度
Stable Diffusion 3.0 是 Stability AI 的最新模型,在經過使用 TensorRT 調整至最佳狀態後,速度提升了 60%。
ai.nvidia.com 上已推出適用於 Stable Diffusion 3 且有著最佳效能表現的 NIM 微服務預覽版。