NVIDIA推出新的RTX技术和AI助手

Magpie.AI 2024-06-02 08:41:00

Keywords: NVIDIA, RTX技术, AI助手, GeForce RTX, Project G-Assist, NIM推理微服务, ACE数字人平台, RTX AI Toolkit

NVIDIA宣布推出新的NVIDIA RTX™技术，用于支持新的GeForce RTX™ AI笔记本电脑上运行的AI助手和数字人。NVIDIA推出了Project G-Assist，这是一款基于RTX技术的AI助手技术演示，可为PC游戏和应用程序提供具有上下文感知的帮助。Project G-Assist技术演示首次亮相于Studio Wildcard的《ARK: Survival Ascended》。此外，NVIDIA还推出了首款基于PC的NVIDIA NIM™推理微服务，用于NVIDIA ACE数字人平台。这些技术由NVIDIA RTX AI工具包支持，这是一套新的工具和软件开发工具包，可帮助开发人员在Windows PC上优化和部署大型生成AI模型。它们加入了NVIDIA全栈RTX AI创新，加速了超过500个PC应用程序和游戏，以及来自制造商的200款笔记本设计。此外，来自华硕和微星的新款RTX AI PC笔记本电脑配备了GeForce RTX 4070 GPU，以及具有Windows 11 AI PC功能的高效系统芯片。这些Windows 11 AI PC将在可用时免费升级到Copilot+ PC体验。 NVIDIA消费者AI副总裁Jason Paul表示：“NVIDIA在2018年推出了RTX Tensor Core GPU和NVIDIA DLSS，开启了AI PC时代。现在，通过Project G-Assist和NVIDIA ACE，我们正在为超过1亿RTX AI PC用户解锁下一代AI体验。” Project G-Assist是一款GeForce AI助手，AI助手将改变游戏和应用程序体验，从提供游戏策略和分析多人回放到协助复杂的创意工作流程。 Project G-Assist是对这一未来的一瞥。PC游戏提供了广阔的探索空间和复杂的机制，即使是最专注的玩家也难以掌握，这需要耗费大量时间。 Project G-Assist旨在通过生成AI将游戏知识提供给玩家。 Project G-Assist接受玩家的语音或文本输入，以及来自游戏屏幕的上下文信息，并通过AI视觉模型对数据进行处理。这些模型增强了对上下文的认识和与游戏知识数据库相关联的大语言模型（LLM）的应用程序特定理解，然后生成一个定制的响应，以文本或语音的形式呈现。 NVIDIA与Studio Wildcard合作，在《ARK: Survival Ascended》中展示了该技术。 Project G-Assist可以帮助回答关于生物、物品、传说、目标、困难的boss等问题。由于Project G-Assist具有上下文感知性，它会根据玩家的游戏会话个性化其响应。此外，Project G-Assist可以配置玩家的游戏系统，以实现最佳性能和效率。它可以提供有关性能指标的见解，根据用户的硬件优化图形设置，应用安全的超频，甚至在保持性能目标的同时智能降低功耗。首款ACE PC NIM亮相NVIDIA ACE技术用于支持数字人，现在将与NVIDIA NIM一起应用于RTX AI PC和工作站，这些推理微服务可以使开发人员将部署时间从几周缩短到几分钟。 ACE NIM微服务在设备上提供高质量的推理，用于自然语言理解、语音合成、面部动画等。在COMPUTEX上，NVIDIA ACE NIM在PC上的游戏首秀将在与Inworld AI合作开发的Covert Protocol技术演示中展示。它现在展示了NVIDIA Audio2Face™和NVIDIA Riva自动语音识别在设备上的运行。 Windows Copilot Runtime将为本地PC SLMs增加GPU加速Microsoft和NVIDIA正在合作，帮助开发人员将新的生成AI能力带入其Windows本地和Web应用程序。这一合作将为应用程序开发人员提供易于使用的应用程序编程接口（API）访问，以GPU加速的小语言模型（SLM），这些模型在Windows Copilot Runtime的一部分作为设备上的检索增强生成（RAG）能力运行。 SLMs为Windows开发人员提供了巨大的可能性，包括内容摘要、内容生成和任务自动化。RAG功能通过使AI模型访问领域特定信息，这些信息在基本模型中没有很好地表示，来增强SLMs。 RAG API使开发人员能够利用应用程序特定的数据源，并调整SLM的行为和能力以满足应用程序的需求。这些AI功能将由NVIDIA RTX GPU以及其他硬件供应商的AI加速器加速，为用户提供跨Windows生态系统广度的快速、响应迅速的AI体验。该API将于今年晚些时候发布开发者预览。 RTX AI Toolkit使模型速度提高4倍，体积减小3倍AI生态系统已经构建了数以千计的开源模型，供应用程序开发人员利用，但大多数模型都是为通用目的进行预训练的，并且是为在数据中心运行而构建的。为了帮助开发人员构建在PC上运行的特定应用程序的AI模型，NVIDIA推出了RTX AI Toolkit，这是一套工具和SDK，用于定制、优化和部署RTX AI PC上的模型。 RTX AI Toolkit将于本月晚些时候提供更广泛的开发人员访问。开发人员可以使用开源QLoRa工具定制预训练模型。然后，他们可以使用NVIDIA TensorRT™模型优化器将模型量化，以消耗多达3倍的RAM。 NVIDIA TensorRT Cloud然后优化模型，以实现RTX GPU系列的最佳性能。结果是与预训练模型相比，性能提高了4倍。新的NVIDIA AI推理管理器SDK，现已提供早期访问，简化了ACE部署到PC上。它预先配置PC所需的AI模型、引擎和依赖项，同时在PC和云之间无缝地编排AI推理。 Adobe、Blackmagic Design和Topaz等软件合作伙伴正在将RTX AI Toolkit的组件集成到他们的热门创意应用程序中，以加速RTX PC上的AI性能。 Adobe创意云产品营销副总裁Deepa Subramaniam表示：“Adobe和NVIDIA继续合作，为所有创意工作流程提供突破性的客户体验，从视频到图像、设计、3D等等。”她说：“TensorRT 10.0在RTX PC上为创作者、设计师和开发人员提供了前所未有的性能和AI功能，为像Photoshop这样的领先创意工具开启了新的创意可能性。” RTX AI Toolkit的组件，如TensorRT-LLM，已经集成到流行的开发者框架和应用程序中，用于生成AI，包括Automatic1111、ComfyUI、Jan.AI、LangChain、LlamaIndex、Oobabooga和Sanctum.AI。 NVIDIA还将RTX AI加速集成到创作者、修改者和视频爱好者的应用程序中。去年，NVIDIA推出了使用TensorRT加速的RTX稳定扩散用户界面之一的功能。从本周开始，RTX还将加速颇受欢迎的ComfyUI，与当前版本相比，性能提高了60%，与MacBook Pro M3 Max相比，性能提高了7倍。 NVIDIA RTX Remix是一个用于重新制作经典DirectX 8和DirectX 9游戏的模拟平台，具有全射线跟踪、NVIDIA DLSS 3.5和物理精确材料。 RTX Remix包括运行时渲染器和RTX Remix Toolkit应用程序，该应用程序便于修改游戏资产和材料。去年，NVIDIA使RTX Remix Runtime开源，允许修改者扩展游戏兼容性和提高渲染功能。自RTX Remix Toolkit今年早些时候推出以来，已有2万名修改者使用它来修改经典游戏，导致RTX Remix Showcase Discord上正在开发的100多个RTX重新制作。本月，NVIDIA将使RTX Remix Toolkit开源，允许修改者简化资产替换和场景重照的流程，增加RTX Remix的资产摄入器支持的文件格式，并用新模型增强RTX Remix的AI纹理工具。此外，NVIDIA还通过REST API提供了RTX Remix Toolkit的功能，允许修改者将RTX Remix与Blender等数字内容创作工具、Hammer等修改工具以及ComfyUI等生成AI应用程序进行实时连接。 NVIDIA还提供了一个用于RTX Remix Runtime的SDK，允许修改者将RTX Remix的渲染器部署到DirectX 8和9经典游戏以外的其他应用程序和游戏中。随着RTX Remix平台的更多部分变得开源，全球各地的修改者可以创建更多令人惊叹的RTX重新制作。受支持的AI功能RTX视频现在作为SDK提供给所有开发人员，帮助他们原生集成AI进行放大、锐化、压缩伪影减少和高动态范围（HDR）转换。即将推出的视频编辑软件Blackmagic Design的DaVinci Resolve和Wondershare Filmora将使用RTX Video，使视频编辑人员能够将低质量的视频文件放大到4K分辨率，并将标准动态范围源文件转换为HDR。此外，免费媒体播放器VLC media即将在其现有的超分辨率功能基础上添加RTX Video HDR。有关NVIDIA RTX AI PC和技术的更多信息，请加入NVIDIA参加COMPUTEX。关于NVIDIA NVIDIA（纳斯达克代码：NVDA）是加速计算的世界领导者。有关更多信息，请联系：Jordan Dodge NVIDIA Corporation +1-408-566-6792 jdodge@nvidia.com 本新闻稿中的某些声明，包括但不限于关于我们的产品、服务和技术，包括NVIDIA RTX技术、GeForce RTX AI笔记本电脑、Project G-Assist、NVIDIA NIM推理微服务、NVIDIA ACE数字人平台、NVIDIA RTX AI Toolkit、GeForce RTX 4070 GPU、RTX Tensor Core GPU、DLSS、NVIDIA Audio2Face、NVIDIA Riva、NVIDIA TensorRT、NVIDIA AI推理管理器、NVIDIA RTX Remix、NVIDIA DLSS 3.5、RTX Remix Runtime和NVIDIA RTX Video的好处、影响、性能和可用性；NVIDIA与第三方的合作的好处和影响，以及其服务和产品的特性和可用性；第三方使用或采用NVIDIA的产品或技术及其好处；RAG API使开发人员能够利用应用程序特定的数据源，并调整SLM的行为和能力以满足应用程序的需求；NVIDIA解锁了超过1亿RTX AI PC用户的下一代AI体验等的声明，都是前瞻性声明，受到可能导致结果与预期有实质不同的风险和不确定性的影响。可能导致实际结果与预期有实质不同的重要因素包括：全球经济状况；我们依赖第三方制造、组装、包装和测试我们的产品；技术发展和竞争的影响；新产品和技术的开发或对现有产品和技术的改进；我们或我们合作伙伴的产品的市场接受度；设计、制造或软件缺陷；消费者偏好或需求的变化；行业标准和接口的变化；当集成到系统中时，我们的产品或技术的性能意外降低；以及其他因素，这些因素不时在NVIDIA向证券交易委员会或SEC提交的最新报告中详细说明，包括但不限于其年度报告10-K和季度报告10-Q。向SEC提交的报告的副本已发布在公司的网站上，并可免费从NVIDIA获得。这些前瞻性声明不是对未来绩效的保证，仅截至本日期，除非法律要求，NVIDIA否认有任何义务更新这些前瞻性声明以反映未来事件或情况。本新闻稿中提到的产品和功能中的许多仍处于各种阶段，将根据情况提供。上述声明并不意味着、也不应被解释为一种承诺、承诺或法律义务，而且我们产品的功能和功能的开发、发布和时间仍然完全由NVIDIA自行决定。对于未能交付或延迟交付本新闻稿中描述的任何产品、功能或功能，NVIDIA概不负责。©2024 NVIDIA公司。保留所有权利。NVIDIA、NVIDIA标志、Audio2Face、GeForce RTX、NVIDIA NIM、NVIDIA RTX和TensorRT是NVIDIA公司在美国和其他国家的商标和/或注册商标。其他公司和产品名称可能是其相关公司的商标。特性、定价、可用性和规格可能会有所变化，恕不另行通知。此公告附带的照片可在以下网址获取：https://www.globenewswire.com/NewsRoom/AttachmentNg/25d171ac-da6c-4ebb-880e-71d26b0f5f1e