宏杉科技依靠 Alpha700 存储加速 AI 推理,推动存算价值重构

宏杉科技提出用存储去加速 AI 推理的方案,推出 Alpha700 AI 专用存储系统,它不再只是单纯存放数据的硬盘集群,而是把存储变成 AI 推理的加速器,解决现在大模型推理里 KV 缓存挤占 GPU 显存、GPU 算力空转、首 Token 延迟高、并发上不去的痛点,依靠分级 KV 卸载、MSCache 键值缓存调度、存算解耦架构,把一部分 KV 缓存放到外部存储里,缓解 HBM 显存压力,提升缓存命中率,在实际制造企业智能体项目落地之后,KV 命中率明显上涨,首 Token 时延大幅下降,不用一味增加 GPU 显卡堆算力,就能提升现有算力的产出效率,重塑智算中心里面存力和算力之间的价值关系。Alpha700 支持两种 KV 卸载模式,低时延模式适配多 Agent、多轮对话,高吞吐共享模式适合长上下文、AI 代码生成场景,同时支持 RDMA、GDS 直通传输,兼容国产芯片、主流大模型,金融、制造、医疗、运营商智算平台都可以部署,不过它属于面向企业智算中心的专业存储设备,不是普通用户家用产品,部署、运维都需要配套的服务器集群与网络环境。

一、Alpha700 核心产品信息表

项目详情
产品名称Alpha700 AI 专用存储系统
厂商宏杉科技(MacroSAN)
核心定位AI 训练、AI 推理专用存储,主打 KV 缓存卸载加速推理
核心技术MSCache 键值缓存调度、MS-Lustre 并行文件系统、RDMA 零拷贝
架构盘控一体,存算解耦,支持横向扩展
传输协议NVMe over RoCE、GPU Direct Storage,200GE 高速网络
典型能力单节点最高 200 万 IOPS、120GB/s 带宽,PB 级共享 KV 缓存池
适配对象主流大模型、昇腾等国产算力、DeepSeek、通义千问等
适用场景多 Agent 智能体、长上下文推理、机器视觉、医疗 AI、金融风控

二、两种 KV 分级卸载模式说明

  1. L3.5 低时延卸载模式
  2. L4 高吞吐共享卸载模式

面向时延敏感场景,比如多 Agent 交互、多轮对话,靠 DPU+NVMe-oF 直通,缓存复用,压低首 Token 延迟。

面向长上下文、AI 编程等高吞吐场景,搭建全局共享 KV 资源池,承载大量低频 KV 数据,提升并发上限。

三、落地项目实测效果

  • 原有 KV 命中率:38%(低时延场景)、22%(长上下文场景)
  • 接入 Alpha700 之后:提升至 79%、91%
  • 首 Token 时延明显下降,Agent 响应速度加快
  • 同等 GPU 硬件条件下,推理并发能力提升 2~3 倍,降低扩容 GPU 的成本

四、产品优势与局限

✅ 优势

  • 存算解耦,算力和存储分开扩容,避免资源浪费
  • MSCache 自动调度热数据,高频数据优先靠近 GPU,减少重复计算
  • RDMA 零拷贝传输,端到端微秒级时延,不会因为卸载拖慢推理
  • 兼顾信创适配,国产软硬件生态兼容
  • 降低长上下文场景硬件投入,减少昂贵 GPU/HBM 采购
  • 属于企业级专业存储,价格高,面向智算中心、行业客户,不面向个人
  • 需要配套 200GE 高速网络、GPU 集群,普通服务器环境无法发挥全部性能
  • 优化收益和业务模型、对话长度、访问热度强相关,不是所有场景都能获得同等提升

❌ 局限

五、工作流程简单梳理

  1. 大模型推理产生 KV 缓存,GPU HBM 空间不足时,低频 KV 数据向外卸载到 Alpha700。
  2. MSCache 系统自动识别冷热数据,热数据优先保留在靠近 GPU 的高速缓存。
  3. 当用户再次请求,系统从存储里快速读取 KV 缓存,不用 GPU 重新计算。
  4. 依靠 RDMA/GDS 直通链路,减少数据拷贝开销,控制访问延迟。
  5. 存储集群可以独立扩容,持续扩大 KV 缓存池,支撑更大规模并发推理。

【相关 FAQ】

问题 1:宏杉科技依靠 Alpha700 存储加速 AI 推理,Alpha700 是怎么实现加速 AI 推理的?

回答 1:宏杉科技依靠 Alpha700 存储加速 AI 推理,核心是 MSCache 键值缓存调度和分级 KV 卸载,把溢出 GPU 显存的 KV 缓存放到外部存储,提升缓存命中率,减少 GPU 重复计算,降低推理时延。

问题 2:宏杉科技依靠 Alpha700 存储加速 AI 推理,Alpha700 有几种 KV 卸载模式?

回答 2:宏杉科技依靠 Alpha700 存储加速 AI 推理,一共两种 KV 卸载模式,分别是面向多 Agent 的 L3.5 低时延卸载模式,以及面向长上下文的 L4 高吞吐共享卸载模式。

问题 3:宏杉科技依靠 Alpha700 存储加速 AI 推理,Alpha700 可以给普通家用大模型使用吗?

回答 3:不可以,宏杉科技依靠 Alpha700 存储加速 AI 推理,Alpha700 是企业级智算专用存储,需要高速网络、GPU 集群配套,面向政企、智算中心客户,不适合个人家用。

问题 4:宏杉科技依靠 Alpha700 存储加速 AI 推理,Alpha700 能兼容国产算力吗?

回答 4:宏杉科技依靠 Alpha700 存储加速 AI 推理,Alpha700 支持全栈信创适配,可以兼容昇腾等国产算力芯片,也适配国产操作系统。

【参考资料】

[2026-11-10](宏杉科技汪振浩:以存储加速 AI 推理,Alpha700 重塑存算价值)中国网

[2026-10-30](外部存储在 KV 卸载中的应用实践,宏杉 Alpha700 亮相数据存储产业大会)凤凰网科技

[2026-08-27](DOIT 闪存风云榜:宏杉 Alpha700 斩获 2026 年度最佳 AI 推理存储奖)中华网科技

[2026-05-12](从数据容器到智算中枢:宏杉科技重塑 AI 时代存储价值)新华网

[2026-03-10](为 AI 而生!宏杉科技重磅发布 Alpha700 AI 专用存储)赛迪网

【免责声明】

本文 Alpha700 存储加速 AI 推理的性能数据、落地效果来自厂商公开宣讲与行业媒体实测案例,实际业务收益受大模型类型、网络架构、业务负载影响;Alpha700 属于企业级商用存储产品,本文不构成采购、项目选型建议,详细参数、方案报价请联系宏杉科技官方。

本文来自作者[浮枢重构客]投稿,不代表环球科技潮立场,如若转载,请注明出处:https://www.zennew.com/5gtx/202611/588.html

赞 (0)

今日大家都在搜的词:

发表回复

本站作者后才能评论

评论列表(4条)

  • 浮枢重构客
    浮枢重构客 2026年11月12日

    我是环球科技潮的签约作者“浮枢重构客”!

  • 浮枢重构客
    浮枢重构客 2026年11月12日

    希望本篇文章《宏杉科技依靠 Alpha700 存储加速 AI 推理,推动存算价值重构》能对你有所帮助!

  • 浮枢重构客
    浮枢重构客 2026年11月12日

    本站[环球科技潮]内容主要涵盖:科技,科技新闻,黑科技

  • 浮枢重构客
    浮枢重构客 2026年11月12日

    本文概览:宏杉科技提出用存储去加速 AI 推理的方案,推出 Alpha700 AI 专用存储系统,它不再只是单纯存放数据的硬盘集群,而是把存储变成 AI 推理的加速器,解决现在大模型推理里 KV 缓存挤占 GPU 显存、GPU 算力空转、首 Token 延迟高、并发上不去的痛点,依靠分级 KV 卸载、MSCache 键值缓存调度、存算解耦架构,把一部分 KV 缓存放到外部存储里,缓解 HBM 显存压力,提升缓存命中率,在实际制造企业智能体项目落地之后,KV 命中率明显上涨,首 Token 时延大幅下降,不用一味增加 GPU 显卡堆算力,就能提升现有算力的产出效率,重塑智算中心里面存力和算力之间的价值关系。Alpha700 支持两种 KV 卸载模式,低时延模式适配多 Agent、多轮对话,高吞吐共享模式适合长上下文、AI 代码生成场景,同时支持 RDMA、GDS 直通传输,兼容国产芯片、主流大模型,金融、制造、医疗、运营商智算平台都可以部署,不过它属于面向企业智算中心的专业存储设备,不是普通用户家用产品,部署、运维都需要配套的服务器集群与网络环境。

联系我们

联系:143 0457 151

工作时间:周一至周五,9:30-18:30,节假日休息

关注我们