NVIDIA BlueField-4数据处理器重塑新型AI原生存储基础设施

描述

新闻摘要:

NVIDIA BlueField-4 为 NVIDIA 推理上下文记忆存储平台提供支持,这是一种专为超大规模推理而设计的新型 AI 原生存储基础设施,旨在加速和扩展代理式 AI。

全新存储处理器平台专为长上下文处理的代理式 AI 系统而构建,并具备超快速的长短期记忆功能。

推理上下文记忆存储平台可扩展 AI 智能体的长期记忆,并实现了机架级 AI 系统集群之间的高带宽上下文共享,从而将每秒处理的 token 数量和能效提升高达 5 倍。

凭借 NVIDIA Spectrum-X 以太网,多轮 AI 智能体的扩展上下文记忆可提高响应速度、提高每个 GPU 的吞吐量,并支持智能体推理的高效扩展。

拉斯维加斯 —— CES —— 太平洋时间 2026 年 1 月 5 日 — NVIDIA 宣布,NVIDIA BlueField®-4 数据处理器作为全栈 NVIDIA BlueField 平台的一部分,为 NVIDIA 推理上下文记忆存储平台提供支持,这是一种新型 AI 原生存储基础设施,专为 AI 新前沿而打造。

随着 AI 模型扩展到数万亿参数和多步骤推理,它们会生成大量的上下文数据,并以键值 (KV) 缓存表示,这对准确性、用户体验和连续性至关重要。

键值 (KV) 缓存无法长期存储在 GPU 上,因为这会成为多智能体系统中实时推理的瓶颈。AI 原生应用需要一种新型的可扩展基础设施来存储和共享这些数据。

NVIDIA 推理上下文记忆存储平台通过扩展 GPU 内存容量,为上下文记忆提供基础设施,实现跨节点的高速共享,与传统存储相比,可将每秒处理的 token 数量和能效提升高达 5 倍。

NVIDIA 创始人兼首席执行官黄仁勋表示:“AI 正在彻底改变整个计算堆栈,现在,存储也加入了这场变革。AI 不再是那种单次交互的聊天机器人,而是能够理解物理世界、进行长期推理、基于事实、使用工具完成实际工作并兼具短期和长期记忆的智能协作伙伴。借助 BlueField-4,NVIDIA 及其软硬件合作伙伴正在为 AI 新前沿重塑存储堆栈。”

NVIDIA 推理上下文记忆存储平台可提升键值 (KV) 缓存容量,并加速机架级 AI 系统集群之间的上下文共享,同时为多轮 AI 智能体的上下文持久地提高响应速度和 AI 工厂吞吐量,并支持长上下文、多智能体推理的高效扩展。

基于 NVIDIA BlueField-4 提供支持的平台,主要功能包括:

NVIDIA Rubin 集群级键值 (KV) 缓存容量,可提供长上下文、多轮智能体推理所需的规模和效率。

与传统存储相比,能效提升高达 5 倍。

基于 NVIDIA DOCA™ 框架,实现了 AI 节点之间键值 (KV) 缓存的智能加速共享,并与 NVIDIA NIXL 库和 NVIDIA Dynamo 软件紧密集成,从而更大限度地提高每秒 token 处理数量,缩短首个 token 生成所需的时间,并提高多轮响应速度。

由 NVIDIA BlueField-4 管理的硬件加速键值 (KV) 缓存部署可消除元数据开销,减少数据传输,并确保从 GPU 节点进行安全隔离的访问。

NVIDIA Spectrum-X™ 以太网实现了高效的数据共享和检索,为基于 RDMA 访问的 AI 原生键值 (KV) 缓存提供了高性能网络架构。

包括 AIC、Cloudian、DDN、Dell Technologies、HPE、Hitachi Vantara、IBM、Nutanix、Pure Storage、Supermicro、VAST Data 和 WEKA 在内的存储领域创新者,已率先使用了 BlueField-4 构建新一代 AI 存储平台,并将于 2026 年下半年上市。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分