解碼AI:ChatRTX 於最新的更新項目中加入全新AI模型及功能

AI驅動的全新NVIDIA DLSS 3.5包含光線重建技術,將強化 NVIDIA RTX Remix 中含光線追蹤效果模組的表現
作者 Jesse Clayton

編者按:這篇文章屬於「解碼 AI 」系列,該系列文章會以簡單易懂的方式解碼 AI,同時展示適用於 RTX PC 和工作站使用者的全新硬體、軟體、工具和加速功能

由大型語言人工智慧(AI)模型提供支援的聊天機器人已經改變了運算方式,NVIDIA ChatRTX  讓使用者可以在有著 NVIDIA RTX  技術支援的 Windows PC和工作站上,與儲存在本地端的資料互動。三月在 GTC 大會上首次展示的全新更新項目,讓這個 RTX 加速的聊天機器人應用程式有了更多功能,並且支援新的模型。

說給AI

ChatRTX 利用檢索增強生成、NVIDIA TensorRT-LLM 軟體與 NVIDIA RTX 加速等技術,將聊天機器人功能帶至有著 RTX 技術支援的 Windows PC和工作站上。在強大大型語言模型(LLM)的支援下,使用者可以透過 ChatRTX 查詢他們的筆記和檔案,且由於ChatRTX在使用者裝置本機端運行,能夠快速生成相關回應。

最新版本加入支援其他 LLM,包括由 Google 訓練出最新的開放式、可在本地端運行的Gemma。Gemma 是Google 使用與自家 Gemini 模型相同的研究和技術,專為負責任AI開發而打造的模型。ChatRTX 現在也有支援基於通用語言模型框架的開放式中英雙語 ChatGLM3 大型語言模型。

由於有支援 OpenAI 的對比語言和影像預訓練(Contrastive Language-Image Pre-training,CLIP)技術,使用者還能與影像資料進行互動。經過訓練和細化後的 CLIP 神經網絡,從自然語言監督中學習視覺概念。也就是說,這個模型會辨識在影像集裡「看到」的東西。因ChatRTX支援 CLIP ,使用者可透過單字、術語和短語,與裝置本機端的相片和影像進行互動,無需使用複雜的詮釋資料標記。

新版本的 ChatRTX 還讓使用者可以用自己的聲音與資料進行聊天。由於有支援使用AI處理口語的自動語音識別系統 Whisper,使用者可以在應用程式上用語音進行查詢,ChatRTX 將以文字加以回應。

立即下載 ChatRTX。

運用RTX Remix

模組改裝者可以使用 RTX Remix在 NVIDIA Omniverse平台上發揮AI加速工具的長處,將經典 PC 遊戲變成 RTX 重製版。

RTX Remix 在本週推出更新內容,模組改裝者只要按幾下滑鼠,就能在自己改裝模組的過程中使用帶有光線重建技術的 DLSS 3.5。其先進的AI神經渲染技術可以製作出更逼真寫實的光線追蹤效果,也有著更快的反應速度和品質,讓 NVIDIA GeForce RTX 玩家享受到更美好的遊戲體驗。

AI還支援 Remix 工作流程的其他部分。模組改裝者可以使用生成式AI紋理工具來分析經典遊戲中的低解析度紋理,產生精準符合物理原則的材質,包括法線貼圖和粗糙度貼圖,並且將解析度提高四倍。像這樣的工具還能節省模組改裝者的時間,快速處理原本可能單調乏味的任務。

在 GeForce.com 上瞭解更多有關最新 RTX Remix 測試版更新項目的資訊。

生成式AI正在改變各種遊戲、視訊會議和互動式體驗。訂閱「解碼 AI」電子報,瞭解最新消息與未來趨勢