ChatRTX 更新了 添加了新的 AI 模型和功能

此外,AI 賦能的全新 NVIDIA DLSS 3.5,其光線重建技術可用於 NVIDIA RTX Remix 中的Mods。

ChatRTX 更新了 添加了新的 AI 模型和功能

編者註:本文屬於《解碼AI》系列欄目,該系列的目的是讓技術更加簡單易懂,從而解密AI,同時向RTX PC用戶展示全新硬體、軟體、工具和加速特性。

基於 LLM 的聊天機器人為計算領域帶來了變革,而 NVIDIA ChatRTX 讓用戶可與自己的本地數據進行交互。由 NVIDIA RTX 提供支持的 Windows PC 和工作站可為該過程加速。ChatRTX 首次亮相於 3 月的 GTC 大會,而最近的更新則為其添加了新的模型和功能 – ChatRTX 現在更強大了!

NVIDIA RTX Remix 測試版更新將支持光線重建技術的 NVIDIA DLSS 3.5 引入了 MOD 平台,旨在實現更加令人印象深刻的實時光線追蹤效果。

ChatRTX – 無所不談

ChatRTX 更新了 添加了新的 AI 模型和功能 https://images.nvidia.cn/cn/youtube-replicates/zMROAxJQ7rk.mp4

ChatRTX 使用 RAG 技術,經由 NVIDIA TensorRT-LLM 和 NVIDIA RTX 加速,為 RTX Windows PC 和工作站帶來聊天機器人功能。ChatRTX 運行在本地,用戶可在 LLM 的支持下查詢自己的筆記和文檔,ChatRTX 將針對查詢快速生成相關回應。

ChatRTX 的最新版本增加了對更多 LLM 的支持,包括 Gemma – 由 Google 訓練的最新開源LLM。Google 在開發 Gemma 時採用了與Gemini 相同的研究和技術,並設計為“responsible AI” (Responsible AI指的是以安全、可靠和合乎道德標準的方式開發、評估和部署AI系統的方法)ChatRTX 現在還支持 ChatGLM3,這是一個基於通用語言模型框架的開源雙語 (英語和中文) LLM。

得益於 ChatRTX 對 OpenAI CLIP (Contrastive Language-Image Pre-training) 的支持,用戶還可與圖像數據進行交互。CLIP 是一種神經網絡,通過訓練和優化,利用自然語言監督學習視覺概念 – 也就是說,該模型能夠識別圖像集中它"看到"的內容。通過 ChatRTX 中的 CLIP 功能,用戶可以使用單詞、術語、短語與本地設備上的照片和圖像進行交互,而無需做復雜的元數據標記。

在新版 ChatRTX 中,用戶還可與自己的數據通過語音進行交互。得益於 ChatRTX 對 Whisper(利用 AI 來處理口述語言的自動語音識別系統)的支持,用戶可以向 ChatRTX 發送語音查詢,後者將提供文本回應。

RTX Remix – 與 AI 的碰撞

ChatRTX 更新了 添加了新的 AI 模型和功能 https://images.nvidia.cn/cn/youtube-replicates/kXNzDQTSFF8.mp4

通過 RTX Remix,Modder 可以使用 NVIDIA Omniverse 平台上的各種經 AI 加速的工具,製作經典 PC 遊戲的 RTX 重製版。

得益於本周推出的 RTX Remix 更新,Modder 現在只需動動滑鼠即可使用支持光線重建技術的 DLSS 3.5 來處理項目。其先進的 ,AI 賦能的神經網絡渲染器可提升光線追蹤效果的保真度、響應速度和質量,為 NVIDIA GeForce RTX 遊戲玩家帶來更出色的體驗。

AI 也可為 Remix 工作流的其他部分提供支持。Modder 能夠使用生成式 AI 紋理工具來分析經典遊戲中的低解析度紋理,進而生成物理上精準的材質 (包含法線貼圖和粗糙度貼圖),並提升其解析度 (最高可提升至原來的 4 倍)。此類工具還可以快速處理原本會很繁瑣的任務,節省 Modder 的時間。

請訪問 GeForce.cn,了解有關全新 RTX Remix 測試版更新的更多信息。

生成式 AI 正改變各類遊戲、視頻會議和互動體驗。請訂閱《解碼 AI》時事通訊,我們每周都會將新鮮資訊直接投遞到您的收件箱。

來源:快科技