SIGGRAPH 大會特別演講:NVIDIA 執行長將生成式人工智慧帶到洛杉磯大會現場

黃仁勳在這場向數千名開發人員及繪圖領域專家進行的特別主題演講中,宣布推出最新版本的 GH200 Grace Hopper Superchip、NVIDIA AI Workbench,以及最新版本的 NVIDIA Omniverse 與生成式人工智慧。
作者 NVIDIA Corporation

隨著生成式人工智慧不斷席捲日益數位化及連結程度日漸加深的世界,NVIDIA 創辦人暨執行長黃仁勳在全球首屈一指的電腦繪圖領域 SIGGRAPH 大會上,以雷霆萬鈞之勢再度亮相。

黃仁勳週二在洛杉磯舉行的 SIGGRAPH 大會特別主題演講中,對數千名聽眾說:「生成式人工智慧時代已經來臨,你可以把它視為 iPhone 的時刻。」

新聞亮點包括新一代 GH200 Grace Hopper Superchip 平台、可在 NVIDIA 人工智慧平台上簡化調整和部署模型的全新統一工具套件 NVIDIA AI Workbench,以及加入支援生成式人工智慧和 OpenUSD 的 NVIDIA Omniverse 重大升級項目

他所宣布的事情,將 NVIDIA 在過去十年的人工智慧、虛擬世界、加速、模擬、協作等所有創新全都結合在一起。

「繪圖技術與人工智慧密不可分,繪圖技術需要用到人工智慧,人工智慧也需要用到繪圖技術。」黃仁勳解釋人工智慧將在虛擬世界中學習技能,人工智慧將幫助打造虛擬世界。

即時繪圖人工智慧的基礎

NVIDIA 五年前在 SIGGRAPH 大會上將人工智慧和即時光線追蹤技術引入 GPU,重新改造了繪圖技術。然而「在我們用人工智慧再造電腦繪圖技術之際,我們也在為人工智慧重塑 GPU。」黃仁勳說。

其結果是:諸如搭載 8 個 GPU(總計一兆個電晶體)的 NVIDIA HGX H100 這樣的系統變得更加強大,跟搭載 CPU 的系統相比,執行效能顯著加快不少。

「這正是全球資料中心紛紛迅速採用加速運算技術的原因。」黃仁勳對聽眾說。「買的越多,省的越多。」

為了延續人工智慧這股強勁的發展走勢,NVIDIA 開發出 Grace Hopper Superchip 系列產品 NVIDIA GH200,它擁有 72 個核心的 Grace CPU 搭配 Hopper GPU,並且在今年五月正式投產。

黃仁勳宣布已經投產的 NVIDIA GH200 將加入搭載最先進 HBM3e 記憶體的版本。

他接著宣布下一代 GH200 Grace Hopper Superchip 平台能夠連接多個 GPU,將提供卓越的運算表現及易於擴充的伺服器設計。

新平台專為處理世界上最複雜生成式人工智慧工作負載而打造,涵蓋大型語言模型、推薦系統和向量資料庫,其將有多種配置可供選擇。

雙配置(記憶體容量和頻寬分別是當前世代產品的 3.5 倍和 3 倍)包括一台搭載有 144 個 Arm Neoverse 核心、8 petaflops 人工智慧運算效能及 282GB 最新 HBM3e 記憶體技術的伺服器。

領先的系統製造商預計將在 2024 年第二季度推出基於這個平台的系統。

NVIDIA AI Workbench 加快推動採用自訂生成式人工智慧的腳步

黃仁勳宣布推出 NVIDIA AI Workbench,以加速推動全球企業採用自訂的生成式人工智慧。NVIDIA AI Workbench 為開發人員提供了一個統一又易用的工具套件,可在 PC 或工作站上快速建立、測試和微調生成式人工智慧模型,然後將其擴大延伸到幾乎任何資料中心、公共雲或 NVIDIA DGX Cloud 上。

AI Workbench 讓企業更輕鬆開始發展人工智慧項目。開發人只要操作在本地系統上運行的簡單介面,便能使用自訂資料微調來自 Hugging Face、GitHub 和 NGC 等熱門資源庫的模型。然後可以在多個平台上輕鬆分享這些模型。

現在雖有數十萬個預先訓練好的模型可供選擇,使用現有的許多開源工具來自訂這些模型又可能具有難度,而且要花很多時間。

「為了普及這項能力,我們必須讓它在幾乎任何地方都能運行。」黃仁勳說。

開發人員有了 AI Workbench,只要點幾下滑鼠,就能自訂和運行生成式人工智慧。AI Workbench 讓開發人員可以把所有必要的企業級模型、框架、軟體開發套件和函式庫,都放到統一的開發人員工作空間裡。

「每個人都能做到這件事。」黃仁勳說。

包括戴爾科技集團(Dell Technologies)、慧與科技(Hewlett Packard Enterprise)、惠普公司(HP Inc.)、Lambda、Lenovo 和 美超微(Supermicro)等各大主要人工智慧基礎架構供應商都採用 AI Workbench,因為它能夠將企業生成式人工智慧的強大能力帶到開發人員希望執行工作的任何地方,包括本地端的裝置。

黃仁勳還宣布 NVIDIA 將與擁有 200 萬使用者的新創公司 Hugging Face 攜手合作,為數百萬名開發人員提供生成式人工智慧超級運算技術,協助他們建立大型語言模型和其他先進的人工智慧應用項目。

開發人員將能夠使用 Hugging Face 平台中的 NVIDIA DGX Cloud AI 超級運算服務,以訓練和調整先進人工智慧模型。

「這項全新服務將全球最大的人工智慧社群,與世界上最好的訓練服務及基礎設施串連起來。」黃仁勳說。

黃仁勳透過影片展示 AI Workbench 和 ChatUSD 如何將這一切結合在一起:讓用戶在 GeForce RTX 4090 筆記型電腦上啟動一個項目,隨著項目愈來愈複雜,無縫擴展到工作站或資料中心進行處理。

使用者透過使用 Jupyter Notebook 提示模型產生一張 Toy Jensen 漫遊太空的圖片。模型提供的結果不符合要求時 – 因為它從未見過 Toy Jensen 是什麼模樣,使用者用八張 Toy Jensen 的圖片來微調模型,然後再次提示它以得到正確結果。

接著使用 AI Workbench 將新模型部署到企業應用程式中。

全新 NVIDIA Enterprise 4.0 軟體推動人工智慧部署

NVIDIA 宣布推出旗下企業軟體套件的最新版本 NVIDIA AI Enterprise 4.0,進一步加速推動企業採用生成式人工智慧。

NVIDIA AI Enterprise 為企業提供了採用生成式人工智慧所需的工具,還提供了企業進行大規模部署所需的安全性和 API 穩定性。

Omniverse 重大更新項目加入支援生成式人工智慧與 OpenUSD,以實現工業數位化

黃仁勳宣布用於跨工具與虛擬世界建立、模擬和協作的 OpenUSD 原生開發平台 NVIDIA Omniverse 推出重大更新項目,為開發人員和工業領域的企業提供新的基礎應用項目和服務,以利用 OpenUSD 框架和生成式人工智慧將其 3D 製作管道調整至最佳狀態及進行強化。

他還宣布 NVIDIA 對發展 OpenUSD 的貢獻,OpenUSD 是一個用於跨 3D 工具進行描述、模擬和協作的框架和通用交換平台。

Omniverse 平台的更新項目包括用於開發本地 OpenUSD 應用程式和擴充項目的引擎 Omniverse Kit,以及 NVIDIA Omniverse Audio2Face 基礎應用程式和空間計算功能的改進。

Cesium、Convai、Move AI、SideFX Houdini 及 Wonder Dynamics 現已透過 OpenUSD 連接到 Omniverse。

Adobe 與 NVIDIA 宣布計畫將 Adobe 的創意生成式人工智慧模型系列 Adobe Firefly,當成 Omniverse 的 API 提供給用戶,以擴大雙方在 Adobe Substance 3D、生成式人工智慧和 OpenUSD 計畫方面的合作。

Omniverse 使用者現在可以構建與其他基於 OpenUSD 之空間運算平台(例如 ARKit 和 RealityKit)相容的內容、體驗和應用程式

黃仁勳宣布將為開發人員和企業提供多項框架、資源和服務,以加快採用通用場景描述(又稱OpenUSD),包括地理空間資料模型、度量組裝和模擬就緒(SimReady)等 OpenUSD 規範。

黃仁勳還宣布四款由 NVIDIA 打造的全新 Omniverse Cloud API,以便開發人員更流暢地實施和部署 OpenUSD 管道和應用程式。

  • ChatUSD – ChatUSD 是一個大型語言模型(LLM)代理,可協助開發人員和藝術家處理 OpenUSD 資料和場景、從文字中生成 Python-USD 程式碼腳本,並且回答 USD 知識問題。
  • RunUSD – 這個雲端 API 會檢查上傳的檔案與 OpenUSD 版本之間的相容性,將 OpenUSD 檔案變成完全路徑追蹤的渲染影像,並且使用 Omniverse Cloud 產生渲染影像。
  • DeepSearch – 這個 LLM 代理可在海量未標記資產資料庫中快速進行語義搜尋。
  • USD-GDN Publisher – 企業和軟體製造商使用這項一鍵式服務,能夠從 USD Composer 這類基於 Omniverse 的應用程式,向 Omniverse Cloud 繪圖運算傳遞網路(GDN)發布基於OpenUSD、內容極為逼真的體驗內容,並且即時以串流方式將資料送到網路瀏覽器和行動裝置。

這些宣布事項是 NVIDIA 上週宣布與 Pixar、Adobe、Apple 及 Autodesk 共同成立 OpenUSD 聯盟(Alliance for OpenUSD)後的又一發展。

強大的全新桌上型系統及伺服器

黃仁勳表示 NVIDIA 與全球工作站製造商將宣布推出功能強大的全新 RTX 工作站,為生成式人工智慧和數位化時代的開發和內容創作活動提供更強大的運算能力。

這些包括來自 BOXX、戴爾科技集團、HP 和 Lenovo 的系統,均搭載 NVIDIA RTX 6000 Ada 世代 GPU,內建 NVIDIA AI Enterprise  及 NVIDIA Omniverse Enterprise 軟體。

NVIDIA 還另外發布三款全新的桌上型工作站 Ada 世代 GPU:NVIDIA RTX 5000RTX 4500RTX 4000,為全球專業人士提供最新的人工智慧、繪圖和即時渲染技術。

黃仁勳還詳細介紹了 NVIDIA 如何攜手全球資料中心系統製造商,採用搭載全新 NVIDIA L40S GPU 的新款 NVIDIA OVX(一種功能強大的通用資料中心處理器設計),繼續全力支持生成式人工智慧和工業數位化的發展。

這些功能強大的新系統將利用 NVIDIA Omniverse 平台,加速運算最為密集複雜的應用項目,包括人工智慧訓練和推論、3D 設計和視覺化、視訊處理和工業數位化。

NVIDIA Research 帶來新功能

NVIDIA Research 將帶來更多創新項目。

NVIDIA 的研究人員在 SIGGRAPH 大會的 Real Time Live Event 活動中,將展示一種生成式人工智慧工作流程,該流程可協助藝術家快速建立及反覆運算 3D 場景的材質,利用文字或圖片提示更快產生出自訂的紋理材質,更精細地控制創意發想。

NVIDIA Research 還展示人工智慧如何通過全新 3D 功能提升視訊會議的品質。NVIDIA Research 最近發表了一篇論文,當中說明人工智慧如何利用最少的擷取裝置來支援 3D 視訊會議系統。

現已可在 NVIDIA Enterprise 中取得 NVIDIA Maxine 的生產版本,讓專業人士、團隊、創作者和其他人員可以使用人工智慧的強大功能建立高品質的影音效果,甚至使用標準麥克風和網路攝影機也能做到。

歡迎在 NVIDIA 的 SIGGRAPH 活動網站觀看黃仁勳完整的主演演講內容,其中還有整個 SIGGRAPH大會期間舉行的實驗室、演講等活動的詳細資訊。