領AI高速發展:剖析NVIDIA搭載RTX技術的最新工具與應用程式,如何協助開發者在PC與工作站上加速AI運作

在 SIGGRAPH 大會上宣布的最新消息包括ChatRTX 更新項目及Llama支援 3,以強化創作 AI 內容、提高生產力和開發能力
作者 Jesse Clayton

NVIDIA在年度繪圖與AI領域盛會 SIGGRAPH大會上重點展示最新搭載NVIDIA RTX技術的工具及應用程式。  

這些AI技術提供先進的光線追蹤與渲染技術可在遊戲、虛擬實境、動畫與電影特效中製作出極為逼真的繪圖畫面與身臨其境的體驗。RTX AI PC和工作站有助於推動發展互動式數位媒體、內容創作、生產力和開發的未來。 

ACEAI魔法 

NVIDIA創辦人暨執行長黃仁勳在SIGGRAPH大會的爐邊對談活動中介紹了以NVIDIA NIM微服務打造的互動式數位人類「James」,展現運用AI技術進行客戶互動的發展潛力。 

採用NVIDIA ACE技術以顧客服務工作流程為基礎所創作出的James,是一個可以運用情感、幽默感和準確的情境反映能力與人們建立關係的虛擬助理。不久之後使用者就可以在ai.nvidia.com上即時與James進行互動。 

James 是NVIDIA ACE中的虛擬助理。 

NVIDIA還介紹了用於遠端呈現的NVIDIA Maxine AI平台的最新進展以及採用NVIDIA ACE的公司NVIDIA ACE是一套運用生成式AI技術製作出栩栩如生數位人的技術。這些技術可透過用於製作語音與翻譯、視覺、智慧、逼真動畫與行為以及極具真實感的外觀等AI模型以協助開發數位人 

Maxine採用Maxine3DAudio2Face-2D兩項AI技術能夠在遠端呈現的場景中製作出更優秀的數位人使用體驗。 

開發者可以利用MaxineACE技術在客戶服務、遊戲與其他互動體驗中藉由數位介面為使用者提供更吸引人且更自然的互動。 

NVIDIA ACE技術運用先進的AI技術讓開發者能夠設計出富有逼真寫實的動畫、語言和情緒可以即時回應使用者的數位化身。RTX GPU可提供必要的運算能力及製作出極具真實感的圖形繪圖的逼真度以十分細膩的細節與流暢感來呈現ACE數位化身。 

隨著技術不斷進步及採用採用者日益增加的業者日益增加,ACE為建立虛擬世界樹立了新基準激發各行各業進行創新。開發者利用ACE加上RTX GPU的強大功能能夠建立出更具有臨場感的應用程式以及先進的AI互動式數位媒體體驗。 

RTX更新項目協助創作者運用AI釋放無限創意 

NVIDIA GeForce RTX PCNVIDIA RTX工作站將透過GPU加速技術進行升級為使用者提供更棒的AI內容創作體驗。 

影片剪輯者現在可透過Wondershare FilmoraDaVinci Resolve使用RTX Video HDR有了這項技術使用者可以將任何內容轉換成有著高動態範圍的影片在明暗場景中都能呈現更豐富的色彩和更多的細節使其成為製作遊戲影片、旅遊影片或活動影片的理想選擇。將RTX Video HDR加上RTX超高影片解析度可消除編碼瑕疵和增強細節進一步提高視覺品質。 

RTX Video HDR需要將RTXGPU連接至相容HDR10的顯示器或電視。擁有搭載RTX GPU電腦的使用者可以將檔案傳送至Filmora桌面應用程式使用本機端的RTX加速技術繼續剪輯影片,且GeForce RTX 4070 Ti或更高規格的GPU上使用雙編碼器匯出速度提高一倍。熱門的媒體播放器VLC在六月時開始支援RTX超高影片解析度RTX Video HDR,加入AI增強的視訊播放功能。 

閱讀這篇有關使用搭載RTX技術的工具和應用程式來剪輯影片的部落格文章還有RTX Video常見問題還有RTX Video常見問題以瞭解更多資訊。進一步瞭解Wondershare Filmora 中有著AI驅動I支援的各項功能 

3D藝術家還能取得更多可簡化強化工作流程的AI應用程式和工具包括Replikant、Adobe、TopazGetty Images。 

AI輔助3D動畫平台Replikant整合ACE技術裡的NVIDIA Audio2Face能夠製作出更精良的對嘴及臉部動畫效果。使用者利用NVIDIA加速生成模型的優勢可以享受透過RTXNVIDIA DLSS技術所製作出更出色增強的即時視覺效果。Replikant現已可在Steam平台上使用。 

Adobe Substance 3D Modeler加入由AI驅動支援Search Asset Library by Shape功能其目的在於簡化使用現有3D模型更換和增強複雜形狀的流程。這項新功能能夠大幅加快製作原型的速度以及強化設計工作流程。 

Adobe Substance 3D裡新的AI功能納入先進的生成式AI功能讓應用程式裡的紋理和材質創作工具變得更加強大。Adobe首次將Firefly生成AI功能與Substance 3DSamplerStager進行整合讓工業設計師、遊戲開發者和視覺特效專業人員製作3D效果時可以更順暢有著更高的生產力。 

Substance 3D使用者可以透過文字到紋理的生成和提示說明等工作產生出畫面逼真或別具風格的紋理。這些紋理可直接套用至3D模型。全新的文字到紋理(Text to Texture)和生成式背景(Generative Background)等功能可大幅加快過去耗時又複雜的3D紋理製作以及畫面中人物和場景的配置等工作。 

NVIDIA RTX Tensor核心的支援下,Substance 3D可以大幅加快運算速度讓設計流程變得更直覺讓人更容易發揮創意。AdobeSubstance 3D工作流程中加入由Firefly驅動支援Creative Cloud升級項目而這個創新舉動推動了這項發展。 

Topaz AI已在多GPU工作流程中加入NVIDIA TensorRT加速功能可在多個GPU間平行處理工作以獲得更快的渲染速度使用兩個GPU可比單一GPU系統的速度快上兩倍還能隨著加入更多GPU而進一步擴充。 

Getty Images已更新其Generative AI by iStock服務加入新功能以提升生成圖片的速度與品質。在NVIDIA Edify模型的支援下最新的增強功能帶來引領業界可提高圖片生成速度約六秒鐘可生成四張圖片比舊模型的效能高出一倍這個速度引領業界。經改良後的Text-2-ImageImage-2-Image功能可產生出更高品質的圖片還更能按照使用者的提示來生成圖片。 

Generative AI by iStock的使用者現在還能指定相機的設定值例如焦距(窄、標準或寬)和景深(近或遠)。改良後的生成式AI超解析度技術可使用AI來創造新的像素以提升影像品質在不會讓影像過度銳利的情況下大幅提升解析度。 

連接LLMAI 

連接MetaLlama等這一類大型語言模型(LLM)與使用者資料的技術展示示範內容ChatRTX,可快速查詢筆記、文件或圖片。此項展示正在改造將獲得全新打造的使用者介面(UI),提供更乾淨精緻的使用體驗。 

ChatRTX也是一個開源參考項目向開發者展示如何透過RTX加速技術建立功能強大的本機端檢索增強應用程式(RAG)應用程式。 

本次發表的最新版本ChatRTX採用Electron+MaterialUI框架讓開發者可以更輕鬆地加入自己的UI元素或擴充技術的功能。此次更新還加入一個新的架構可以讓整合不同UI一事變得更簡單並且在ChatRTX後端應用程式介面上簡化建立新的聊天和RAG應用程式的作業。 

終端使用者可以從ChatRTX網頁下載最新版本的ChatRTX。開發者可在ChatRTX Git Hub套件庫裡找到新版本的原始程式碼。 

Meta Llama 3.1-8B模型現在已針對NVIDIA GeForce RTX PCNVIDIA RTX工作站上的推論作業進行最佳化。這些模型本身即有支援NVIDIA TensorRT-LLM這款開源軟體可加速LLM執行推論的表現。 

戴爾的AI聊天機器人:利用RTX大力推動發展 

戴爾(Dell)展示企業如何透過使用NVIDIA AI Work bench與適用Llama 3NVIDIA NIM微服務創造出最佳的RAG聊天機器人來促進AI發展。戴爾使用NVIDIA AI Work bench Hybrid RAG計畫展示如何透過聊天機器人及內嵌於本機端向量資料庫中的企業資料進行對話並以三種方式的其中一種進行推論: 

  • 在本機端的Hugging Face TGI伺服器上執行 
  • 在雲端使用NVIDIA推論端點 
  • 在自行託管的NVIDIA NIM微服務上進行

進一步瞭解NVIDIA AI Work bench Hybrid RAG計畫的更多資訊。SIGGRAPH大會與會者可在戴爾科技的301號展位親身體驗這項技術。

HP AI Studio:利用CUDA-XGalileo加速創新
HPSIGGRAPH大會將展示集中式資料科學平台Zby HP AI Studio。HP現已使用最新的NVIDIA CUDA-X函式庫再加上該公司日前與生成式AI信賴層公司Galileo合作來增強於202310月發表的AI Studio。其主要優點有:

  • 更快部署專案:快速設定、連線及共用本機端及遠端的專案。 
  • 輕鬆協作:輕鬆存取及分享資料、範本和實驗。 
  • 按照您的方式運作:輕鬆選擇在哪裡處理資料在線上與離線模式之間切換。 

開發AI Studio的目的在於提高生產力並簡化AI開發作業讓資料科學團隊能夠專注於創新。歡迎蒞HP501號展位瞭解AI Studio搭配RAPIDS cuDF如何提升預先處理資料的能力加速AI作業管道。申請搶先試用AI Studio 

RTX提高Stable Diffusion的執行速度 

Stable Diffusion 3.0Stability AI的最新模型在經過使用TensorRT調整至最佳狀態後速度提升了60%。  ai.nvidia.com上已推出適用於Stable Diffusion 3且有著最佳效能表現的NIM微服務預覽版。