AI On:AI 代理程式提升團隊績效的 6 種方式以及如何衡量成效

作者 Erik Pounds

編註:本文章是 AI On 部落格系列的一部分,此系列探討代理式 AI (agentic AI)、聊天機器人和副駕駛 (copilot) 的最新技術及實際應用。此系列也聚焦於驅動先進 AI 代理程式的 NVIDIA 軟體和硬體,它們構成 AI 查詢引擎的基礎,這些引擎可收集洞見和執行任務,以改變日常體驗並重塑產業。

預計 AI 代理程式將在三年內參與大多數商業任務,而有效的人機協作可以將人類參與高價值任務的程度提高 65%

AI 代理程式可以學習、推理及根據脈絡和成果進行調整,有助於達成及超越效率目標。隨著 AI 代理程式逐漸成為商業策略的核心,領導者必須瞭解它們會影響和值得投資哪些方面。

以下是代理式 AI 提升團隊績效的六種方式,以及衡量其影響的實用技巧。

1. 利用 AI 代理程式加快軟體開發的速度

AI 代理程式可以擔任智慧副駕駛,協助自動化產生、測試和部署程式碼。

它們可以及早發現錯誤,進而提高發布品質和速度,並提供經過 AI 整理的文件資訊與脈絡,讓新進工程師更快速地進入狀況。

例如,NVIDIA ChipNeMo 是一個以客製大型語言模型 (LLM) 為基礎,使用 NVIDIA 內部晶片設計資料進行訓練的專用代理程式團隊,在短短一年內協助 5,000 位負責設計、驗證和編寫文件的 NVIDIA 工程師節省 4,000 個工程日。

自部署以來,ChipNeMo 已經:

Infographic that conveys NVIDIA ChipNeMo has: Demonstrated 85%+ response accuracy, reflecting its reliability in real-world applications. Cut time spent sourcing technical answers from hours to seconds, streamlining development and troubleshooting. Accelerated verification cycles by identifying test gaps and diagnosing failures, addressing workflows that can take 30-50% of typical development schedules.

瞭解如何透過 NVIDIA Nemotron 建立代理程式,以及如何使用 NVIDIA NeMo 代理程式工具套件改進 AI 程式碼產生

2. 推動資料輔助決策

代理程式可以協助各產業的企業,輕鬆地從複雜、具時效性的資料中獲得洞見,以做出關鍵決策,例如投資或商業策略。

BlackRock 的 Aladdin Copilot 是嵌入式 AI 助理,服務數百家金融機構的數千位使用者,讓團隊可以透過簡單的文字提問獲得投資組合洞見、評估投資研究以及監控可用現金餘額。它將研究時間從幾分鐘縮短成幾秒,同時加強了資料驅動投資決定。

VAST Data 使用代理程式迅速收集和整合來自內部與外部來源的資訊。讓銷售團隊可以更快速地取得有用及最新的客戶帳戶洞見。

3. 最佳化 IT 維運 

代理程式擅長 IT 維運,包括主動監控基礎架構以及將決策自動化。

IT 維運中的 AI 代理程式提供以下功能:

Infographic that conveys that AI agents in IT operations offer — Faster issue resolution: Self-service IT support agents can quickly resolve tickets and automate routine tasks, improving user experiences. Security automation: AI agents facilitate investigation and triage in security operations, helping teams respond to threats swiftly and with greater accuracy. Enterprise search: Agents power advanced search across organizational data, surfacing insights and maintaining institutional knowledge.

在快步調的電信環境中,代理程式可以分析即時效能指標和預測服務故障,協助管理網路。例如,Telenor Group 整合了 NVIDIA 電信網路配置藍圖,以部署智慧自主網路,滿足 5G 及未來技術的效能需求。

4. 簡化工業和製造作業

負責與現實世界互動的影像分析 AI 代理程式可以監控組裝線,以檢查品質和偵測異常。

和碩在過去四年內開發出 PEGA AI 工廠平台,將公司的 AI 代理程式開發加快了 400%。此外,該公司的數位孿生平台 PEGAVERSE 是以 NVIDIA Omniverse 平台為基礎,讓工程師可以在建造生產線之前,以虛擬方式進行模擬、測試和最佳化,將工廠的建設時間縮短 40%。

和碩也使用以 NVIDIA AI 影片搜尋和摘要藍圖為基礎的影像分析 AI 代理程式加強組裝流程,將每一條組裝線的人力成本降低 7%,將不良率降低 67%。

Siemens 將生成式 AI 導入解決方案中,由工業副駕駛利用即時工廠資料引導維護技術人員和現場操作員。維護工程師在訪談時表示,平均可以節省 25% 的被動維護時間。

鴻海科技集團使用數位孿生和 AI 代理程式最佳化生產線,將部署時間縮短 50%,並模擬機器人與即時監控品質和安全。

5. 加強客戶服務 

代理程式擅長大規模處理客戶服務,同時處理數千個查詢,以縮短客戶等待的時間。

AT&T 之員工和承包商使用稱為「Ask AT&T」的生成式 AI 解決方案,目前在正式環境中有超過 100 個解決方案和代理程式。Ask AT&T 是以 NVIDIA NeMoNIM 微服務支援的 LLM 為基礎,可以協助取得相關文件及自主解決常見查詢。

Ask AT&T 提供 24 小時的個人化支援,可以回顧電子郵件、會議和過往交易中的組織資訊,以分享與脈絡有關的建議。同時為了持續提升代理程式效能,利用了資料飛輪在系統中建立即時回饋循環。

這些自動化服務,將客服中心轉錄分析成本降低了 84%。

6. 提供個人化教育

AI 代理程式將個人化學習支援變得更容易取得、可擴充及更有效,同時讓教師有時間可以進行更深入的教學。

由於面臨班級人數增加和助教短缺的問題,促使克萊門森大學開發出以 NVIDIA 檢索增強生成 (RAG) 藍圖為基礎的 AI 助教,引導學生理解複雜的概念。

虛擬助教不是僅簡單地提供答案,而是可以逐步引導學生解決問題,鼓勵主動解決問題和批判性思考,以加深理解與維護學術誠信。

助教也會依據課程內容、作業交期和學生提交的內容,提供個人化的回饋與提示。其 24 小時運作,無論班級人數多少,都能及時為每一位學生提供量身打造的支援。

如何衡量 AI 代理程式的成功?

衡量 AI 代理程式的影響不僅是形式上的檢查,更是最大化投資價值的關鍵。使用者對成功的定義,將會直接影響這些系統創造的價值。企業在部署代理程式時,往往缺少明確的衡量框架,而導致無法證明投資報酬或找出待改進的部分。

使用者在建立評估策略時,應思考哪些指標對他們的目標而言最重要。例如:

  • 採用率和參與度:追蹤技術是否獲得採用。指標包括有多少符合條件的使用者與代理程式互動,以及互動頻率和對話的時間長度。如果參與度高,表示代理程式經常提供有效的支援。
  • 任務完成:除使用量外,也要關注成果。衡量代理程式處理了多少任務或要求,以及在沒有人為介入下可以完成哪些部分。使用者可以在軟體開發中,衡量自動化程式碼產生率,以瞭解有多少軟體是由代理程式開發。如果自動化任務的完成率高,則員工可以專注於從事具有更高價值的工作。
  • 生產力和效率提升:量化節省的時間。解決 IT 問題需要的時間、決策輔助報告產生時間、客服互動的平均處理時間等指標,皆有助於證明效率已明顯提升。
  • 業務成果:將代理程式績效與最終結果連結。可能包括支援每一次互動的成本、軟體開發的上市時間,或 IT 維運之非計畫停機時間的減少。
  • 高品質使用者體驗:確保系統可靠和有效。考量開發人員的程式碼品質分數、資料輔助決策的預測準確度,或服務情境中的客戶滿意度分數。

主要重點:衡量 AI 代理程式的成功遠不止於單一數字。採用率、效率、準確度和業務影響都同樣很重要。企業預先選擇正確的指標組合,即可驗證成功,同時不斷精進和改善代理程式創造價值的方式。

閱讀更多案例,以瞭解客戶如何採用 AI 應用程式重塑日常營運,並提高投資報酬。

訂閱 NVIDIA 新聞加入社群,並在 LinkedInInstagramXFacebook 上關注 NVIDIA AI,以掌握代理式 AI、NVIDIA Nemotron 等技術的最新資訊。此外,也可以探索自調進度影片教學和直播