英偉達又有大動作,黃仁勛換上新的「數字替身」

實時會話式 AI 是一項復雜的任務,因為它需要理解語音、文本、語言並回復,這個過程還需在非常短的時間內精準完成。

11 月 9 日,英偉達宣布推出 NVIDIA Omniverse Avatar,這是一個用於生成交互式 AI 虛擬形象的技術平台。

英偉達又有大動作,黃仁勛換上新的「數字替身」

在 NVIDIA GTC 的主題演講中,英偉達創始人兼執行長黃仁勛分享了 Omniverse Avatar 的各種示例:用於客戶支持的 Project Tokkio、用於在線車輛智能服務的 NVIDIA DRIVE Concierge 以及用於視頻會議的 Project Maxine。

在第一次 Project Tokkio 演示中,黃仁勛展示了 AI 機器人版的自己——Toy Jensen Omniverse Avatar,它具有黃仁勛的聲音、玩具的形象,和專家你來我往地討論生物學和氣候科學等深度話題。

英偉達又有大動作,黃仁勛換上新的「數字替身」

在第二次 Project Tokkio 演示中,英偉達展示了餐廳售貨亭中的客戶服務虛擬形象,它能夠看到兩位顧客,和他們實時交談,並理解他們需要訂購素食漢堡、薯條和飲料。

英偉達又有大動作,黃仁勛換上新的「數字替身」

而在車輛智能服務領域,和餐廳服務員外觀相似的數字助理現身儀錶板中央螢幕,它的職責是幫助駕駛員選擇最佳駕駛模式以准時到達目的地,並按照駕駛員要求設置汽車行駛里程低於 100 英里時的提醒。

英偉達又有大動作,黃仁勛換上新的「數字替身」

此外,英偉達展示了用於視頻會議的 Project Maxine。在嘈雜的咖啡館參加視頻會議時,一位女士可以簡單快速地去除背景噪音,而且她所說的話會被實時轉錄和翻譯成多種語言,Omniverse Avatar 則負責生成口型及語調不變的虛擬形象。

按照英偉達的說法,「智能虛擬助手的曙光已經到來」,協作機器人和虛擬助手幾乎可以為任何行業輕松定製,幫助處理數十億的日常客戶服務互動——餐廳訂單、銀行交易、個人約會等等,從而帶來更多商機。

英偉達又有大動作,黃仁勛換上新的「數字替身」

為了實現以上所有示例,Omniverse Avatar 使用了以下技術:

(1)語音識別基於 NVIDIA Riva,它可識別多種語言的語音,並通過「文本到語音」功能生成類似人類的語音響應;

(2)自然語言理解基於威震天 530B 大型語言模型,它能夠回答大量領域的問題,總結長而復雜的故事;

(3)推薦引擎由 NVIDIA Merlin ™ 提供,它允許企業構建處理大量數據的深度學習推薦系統;

(4)感知能力由 NVIDIA Metropolis 提供,這是一種用於視頻分析的計算機視覺框架;

(5)形象動畫則由 2D 和 3D 人工智慧驅動的面部動畫和渲染技術支持。

英偉達又有大動作,黃仁勛換上新的「數字替身」

可以說,英偉達展現各行各業的 AI 角色,也是為了高調而不失優雅地「炫技」。

這些技術被組合成了一個應用程式,並使用 NVIDIA 統一計算框架進行實時處理;與此同時,它們被打包為可擴展、可定製的微服務,可以通過 NVIDIA Fleet Command ™ 安全地部署、管理和編排。

英偉達又有大動作,黃仁勛換上新的「數字替身」

Omniverse Avatar 是 NVIDIA Omniverse ™ 的一部分。NVIDIA Omniverse ™ 是一個用於 3D 工作流程的虛擬世界模擬和協作平台,它還包括 Omniverse Replicator——這是一種用於訓練深度神經網絡的合成數據生成引擎,幫助開發人員創建訓練 AI 所需的大量數據。

NVIDIA Omniverse ™ 目前處於公開測試階段,擁有超過 70000 名用戶。黃仁勛表示:

藉助 Omniverse,我們現在擁有創建新 3D 世界或為我們的物理世界建模的技術。你會看到一個不變的主題——Omniverse 如何被用來模擬倉庫、工廠、物理和生物系統、5G 前沿、機器人、自動駕駛汽車以及虛擬形象的數字孿生。

英偉達又有大動作,黃仁勛換上新的「數字替身」

來源:愛范兒