NVIDIA在年度繪圖與AI領域盛會 SIGGRAPH大會上,重點展示最新搭載NVIDIA RTX技術的工具及應用程式。
這些AI技術提供先進的光線追蹤與渲染技術,可在遊戲、虛擬實境、動畫與電影特效中製作出極為逼真的繪圖畫面與身臨其境的體驗。RTX AI PC和工作站有助於推動發展互動式數位媒體、內容創作、生產力和開發的未來。
ACE的AI魔法
NVIDIA創辦人暨執行長黃仁勳在SIGGRAPH大會的爐邊對談活動中,介紹了以NVIDIA NIM微服務打造的互動式數位人類「James」,展現運用AI技術進行客戶互動的發展潛力。
採用NVIDIA ACE技術,以顧客服務工作流程為基礎所創作出的James,是一個可以運用情感、幽默感和準確的情境反映能力與人們建立關係的虛擬助理。不久之後,使用者就可以在ai.nvidia.com上即時與James進行互動。
NVIDIA還介紹了用於遠端呈現的NVIDIA Maxine AI平台的最新進展,以及採用NVIDIA ACE的公司,NVIDIA ACE是一套運用生成式AI技術製作出栩栩如生數位人類的技術。這些技術可透過用於製作語音與翻譯、視覺、智慧、逼真動畫與行為,以及極具真實感的外觀等AI模型,以協助開發數位人類。
Maxine採用Maxine3D和Audio2Face-2D兩項AI技術,能夠在遠端呈現的場景中製作出更優秀的數位人類使用體驗。
開發者可以利用Maxine與ACE技術,在客戶服務、遊戲與其他互動體驗中,藉由數位介面為使用者提供更吸引人且更自然的互動。
NVIDIA ACE技術運用先進的AI技術,讓開發者能夠設計出富有逼真寫實的動畫、語言和情緒,可以即時回應使用者的數位化身。RTX GPU可提供必要的運算能力及製作出極具真實感的圖形繪圖的逼真度,以十分細膩的細節與流暢感來呈現ACE數位化身。
隨著技術不斷進步及採用採用者日益增加的業者日益增加,ACE為建立虛擬世界樹立了新基準,激發各行各業進行創新。開發者利用ACE加上RTX GPU的強大功能,能夠建立出更具有臨場感的應用程式,以及先進的AI互動式數位媒體體驗。
RTX更新項目協助創作者運用AI釋放無限創意
NVIDIA GeForce RTX PC及NVIDIA RTX工作站將透過GPU加速技術進行升級,為使用者提供更棒的AI內容創作體驗。
影片剪輯者現在可以透過Wondershare Filmora和DaVinci Resolve使用RTX Video HDR。有了這項技術,使用者可以將任何內容轉換成有著高動態範圍的影片,在明暗場景中都能呈現更豐富的色彩和更多的細節,使其成為製作遊戲影片、旅遊影片或活動影片的理想選擇。將RTX Video HDR加上RTX超高影片解析度,可消除編碼瑕疵和增強細節,進一步提高視覺品質。
RTX Video HDR需要將RTXGPU連接至相容HDR10的顯示器或電視。擁有搭載RTX GPU電腦的使用者,可以將檔案傳送至Filmora桌面應用程式,使用本機端的RTX加速技術繼續剪輯影片,且,在GeForce RTX 4070 Ti或更高規格的GPU上使用雙編碼器,將匯出速度可提高一倍。熱門的媒體播放器VLC在六月時開始支援RTX超高影片解析度和RTX Video HDR,加入AI增強的視訊播放功能。
閱讀這篇有關使用搭載RTX技術的工具和應用程式來剪輯影片的部落格文章,還有RTX Video常見問題,及還有RTX Video常見問題,以瞭解更多資訊。進一步瞭解Wondershare Filmora 中中有著AI驅動I支援的各項功能。
3D藝術家還能取得更多可簡化並和強化工作流程的AI應用程式和工具,包括Replikant、Adobe、Topaz和Getty Images。
AI輔助3D動畫平台Replikant整合ACE技術裡的NVIDIA Audio2Face,能夠製作出更精良的對嘴及臉部動畫效果。使用者利用NVIDIA加速生成模型的優勢,可以享受透過RTX和NVIDIA DLSS技術所製作出更出色增強的即時視覺效果。Replikant現已可在Steam平台上使用。
Adobe Substance 3D Modeler加入由AI驅動支援的Search Asset Library by Shape功能,其目的在於簡化使用現有3D模型更換和增強複雜形狀的流程。這項新功能能夠大幅加快製作原型的速度,以及強化設計工作流程。
Adobe Substance 3D裡新的AI功能納入先進的生成式AI功能,讓應用程式裡的紋理和材質創作工具變得更加強大。Adobe首次將Firefly生成AI功能與Substance 3D的Sampler和Stager進行整合,讓工業設計師、遊戲開發者和視覺特效專業人員製作3D效果時可以更順暢,有著更高的生產力。
Substance 3D使用者可以透過文字到紋理的生成和提示說明等工作,產生出畫面逼真或別具風格的紋理。這些紋理可直接套用至3D模型。全新的文字到紋理(Text to Texture)和生成式背景(Generative Background)等功能可大幅加快過去耗時又複雜的3D紋理製作以及和畫面中人物和場景的配置等工作。
在NVIDIA RTX Tensor核心的支援下,Substance 3D可以大幅加快運算速度,讓設計流程變得更直覺,讓人更容易發揮創意。Adobe在Substance 3D工作流程中加入由Firefly驅動支援的Creative Cloud升級項目,而這個創新舉動推動了這項發展。
Topaz AI已在多GPU工作流程中加入NVIDIA TensorRT加速功能,可在多個GPU間平行處理工作,以獲得更快的渲染速度。使用兩個GPU可比單一GPU系統的速度快上兩倍,還能隨著加入更多GPU而進一步擴充。
Getty Images已更新其Generative AI by iStock服務,加入新功能以提升生成圖片的速度與品質。在NVIDIA Edify模型的支援下,最新的增強功能帶來引領業界的可提高圖片生成速度,約六秒鐘可生成四張圖片,比舊模型的效能高出一倍,這個速度引領業界。經改良後的Text-2-Image與Image-2-Image功能可產生出更高品質的圖片,還更能按照使用者的提示來生成圖片。
Generative AI by iStock的使用者現在還能指定相機的設定值,例如焦距(窄、標準或寬)和景深(近或遠)。改良後的生成式AI超解析度技術可使用AI來創造新的像素,以提升影像品質,在不會讓影像過度銳利的情況下大幅提升解析度。
連接LLM的AI
連接Meta的Llama等這一類大型語言模型(LLM)與使用者資料的技術展示示範內容ChatRTX,可快速查詢筆記、文件或圖片。此項展示,正在改造將獲得全新打造的使用者介面(UI),可以提供更乾淨精緻的使用體驗。
ChatRTX也是一個開源參考項目,向開發者展示如何透過RTX加速技術建立功能強大的本機端檢索增強應用程式(RAG)應用程式。
本次發表的最新版本ChatRTX採用Electron+MaterialUI框架,讓開發者可以更輕鬆地加入自己的UI元素或擴充技術的功能。此次更新還加入一個新的架構,可以讓整合不同UI一事變得更簡單,並且在ChatRTX後端應用程式介面上簡化建立新的聊天和RAG應用程式的作業。
終端使用者可以從ChatRTX網頁下載最新版本的ChatRTX。開發者可在ChatRTX Git Hub套件庫裡找到新版本的原始程式碼。
Meta Llama 3.1-8B模型現在已針對NVIDIA GeForce RTX PC和NVIDIA RTX工作站上的推論作業進行最佳化。這些模型本身即有支援NVIDIA TensorRT-LLM,這款開源軟體可加速LLM執行推論的表現。
戴爾的AI聊天機器人:利用RTX大力推動發展
戴爾(Dell)展示企業如何透過使用NVIDIA AI Work bench與適用Llama 3的NVIDIA NIM微服務,創造出最佳的RAG聊天機器人來促進AI發展。戴爾使用NVIDIA AI Work bench Hybrid RAG計畫,展示如何透過聊天機器人及內嵌於本機端向量資料庫中的企業資料進行對話,並以三種方式的其中一種進行推論:
- 在本機端的Hugging Face TGI伺服器上執行
- 在雲端使用NVIDIA推論端點
- 在自行託管的NVIDIA NIM微服務上進行
進一步瞭解NVIDIA AI Work bench Hybrid RAG計畫的更多資訊。SIGGRAPH大會與會者可在戴爾科技的301號展位親身體驗這項技術。
HP AI Studio:利用CUDA-X和Galileo加速創新
HP在SIGGRAPH大會將展示集中式資料科學平台Zby HP AI Studio。HP現已使用最新的NVIDIA CUDA-X函式庫,再加上該公司日前與生成式AI信賴層公司Galileo合作來增強於2023年10月發表的AI Studio。其主要優點有:
- 更快部署專案:快速設定、連線及共用本機端及遠端的專案。
- 輕鬆協作:輕鬆存取及分享資料、範本和實驗。
- 按照您的方式運作:輕鬆選擇在哪裡處理資料,在線上與離線模式之間切換。
開發AI Studio的目的在於提高生產力並簡化AI開發作業,讓資料科學團隊能夠專注於創新。歡迎蒞HP的501號展位,瞭解AI Studio搭配RAPIDS cuDF如何提升預先處理資料的能力,加速AI作業管道。申請搶先試用AI Studio。
RTX提高Stable Diffusion的執行速度
Stable Diffusion 3.0是Stability AI的最新模型,在經過使用TensorRT調整至最佳狀態後,速度提升了60%。 ai.nvidia.com上已推出適用於Stable Diffusion 3且有著最佳效能表現的NIM微服務預覽版。