[博客翻译]Nvidia 的 Chat with RTX 是一款在您的 PC 上本地运行的 AI 聊天机器人


原文地址:https://www.theverge.com/2024/2/13/24071645/nvidia-ai-chatbot-chat-with-rtx-tech-demo-hands-on


RTX 聊天助手:本地化AI聊天机器人初探

英伟达今日推出了RTX版聊天助手的早期版本,这是一个演示应用,允许用户在个人电脑上运行AI聊天机器人。你可以喂给它YouTube视频和自己的文档,生成摘要并根据你的数据获取相关答案。这一切都在本地PC上运行,你只需一块拥有至少8GB显存的RTX 30或40系列GPU。

过去一天,我短暂试用了RTX聊天助手,尽管该应用尚待完善,但我已经能够预见其对于记者或需要分析文档集合的任何人来说,在数据研究中的潜在价值。

视频与文档搜索利器

RTX聊天助手能处理YouTube视频,输入URL即可搜索字幕,查找特定提及或总结整个视频内容。我发现这对于检索视频播客特别有用,尤其是在近期微软新Xbox战略传闻中寻找特定讨论点时。

然而,在搜索YouTube视频方面并不总是完美无瑕。尝试搜索The Verge的一段YouTube视频时,RTX聊天助手却下载了完全不同视频的字幕,而且我之前并未查询过这个视频,显然这个早期演示版存在一些bug。

本地文档搜索表现出色

当功能正常运行时,我能在几秒钟内找到视频中的引用信息。我还创建了一个FTC诉微软文档的数据集供RTX聊天助手分析。去年报道法庭案件时,快速浏览大量文件常常令人感到压力山大,而RTX聊天助手则帮助我在PC上几乎瞬间完成查询。

例如,聊天机器人很好地概括了审判期间内部文件揭示的微软Xbox Game Pass策略:

根据提供的上下文信息,Xbox Game Pass是一个游戏订阅服务,以单一月费提供游戏库访问权限。它的愿景是打造一个让玩家随时随地玩游戏的平台,并使发行商能够触及全球玩家。服务由Project xCloud和Xbox Series X支持,旨在为发行商创造一个盈利的游戏土壤。游戏CSA的主要战略目标是扩大Xbox Game Pass的规模,认为全球有高达7.5亿的潜在订阅者机会。服务面临三大内容动态,包括需要差异化内容、超越主机平台以及有限的内容供应。

此外,我发现此工具在扫描PDF和查证数据方面也很实用。微软自家的Copilot系统在Word中处理PDF表现不佳,但Nvidia的RTX聊天助手轻松提取关键信息,响应几乎是即时的,没有使用基于云端的ChatGPT或Copilot聊天机器人时常见的延迟问题。

![5UYNJFi.webp](http://aiqianji.oss-cn-shen