存储与HBM 2026-07-21 07:00

AI服务器内存告急,U盘式存储方案引发新思考

大模型训练与推理正遭遇严峻的“内存墙”瓶颈,行业关注的解决方案指向了一种看似传统的存储介质——U盘。

大模型训练与推理正遭遇严峻的“内存墙”瓶颈,行业关注的解决方案指向了一种看似传统的存储介质——U盘。据智源社区报道,有研究团队构想将大模型的内存需求,通过类似U盘的模块化存储装置来缓解,这一思路为AI服务器内存扩容提供了全新视角。这并非简单地将U盘插入服务器,而是一种针对高带宽、低延迟需求优化的新型存储架构,其核心在于利用非易失性存储技术,分担DRAM压力,从而降低大模型运行时的内存焦虑。

内存墙困境倒逼技术革新

当前,AI大模型的参数规模已从百亿级跃升至万亿级,对服务器内存的需求呈现指数级增长。根据行业背景数据,Gartner在2024年的一份报告中指出,AI服务器在数据中心资本支出中的占比已从2022年的约15%攀升至2025年的预计超过25%。然而,传统DRAM内存的容量和带宽增长远落后于模型参数的膨胀速度,导致“内存墙”问题日益突出——即处理器计算速度远快于数据从内存中读取的速度,造成性能瓶颈。 这一困局迫使产业界探索新的存储方案。本次新闻提及的“U盘式”内存,在技术上可能借鉴了NAND闪存的堆叠与接口技术,通过构建高密度、低功耗的存储池,实现近乎内存级别的高带宽访问。SEMI在2025年的行业报告中预测,全球NAND闪存设备投资将在2026-2027年间加速,部分产能可能被重新分配用于AI加速器专用存储,这间接印证了闪存向AI内存方向靠拢的趋势。

模块化存储或重塑AI服务器架构

与直接集成HBM(高带宽内存)不同,U盘式方案的潜在优势在于可扩展性与成本。HBM虽然带宽极高,但其制造工艺复杂、成本高昂(据IDC 2024年估算,一片HBM3e内存的成本是同等容量DDR5的3-5倍),且容量受限于封装尺寸。而U盘式设计可能采用类似CXL(Compute Express Link)接口的模块化单元,允许服务器按需堆叠内存模块,从而在保持带宽的同时显著降低成本。 值得关注的是,这种设计可能加速AI服务器的“存算一体”化进程。历史背景数据显示,全球AI服务器出货量在2023年已超过120万台(IDC),但其中仅有不到30%配置了足量的大容量内存。U盘式方案如果可行,将使云服务商能够在不更换主板的前提下,通过插入闪存模块来扩容,从而降低TCO(总拥有成本)。不过,当前仍需确认该方案的实际带宽是否能满足万亿级模型推理时每秒数TB的数据吞吐,这有待进一步技术验证。

对芯片与半导体产业链的潜在影响

如果U盘式内存方案获得产业认可,其影响将波及存储芯片、接口协议和服务器设计等多个领域。对于存储芯片厂商而言,NAND闪存的市场定位可能从“冷数据仓库”转向“热内存伴侣”。WSTS(世界半导体贸易统计)2025年估算,全球NAND闪存市场规模在2024年约为560亿美元,而AI相关需求若拉动NAND用于内存场景,该细分市场在2028年前可能贡献新增约80-100亿美元。 另一方面,这将对现有HBM生态形成补充而非替代。HBM目前仍是高性能计算的首选,但随着U盘式方案的成熟,中低端AI推理服务器可能更多地采用此类模块化存储,从而扩大AI硬件的普及范围。值得注意,三星、SK海力士等厂商已在CXL接口的存储模块上布局,本次新闻中的思路可能与这些技术路线形成重合或竞争关系,具体技术参数仍有待官方披露,但趋势已表明,解决内存焦虑不再局限于DRAM领域。

数据参考

  • Gartner(2024年报告):AI服务器在数据中心资本支出中的占比预计在2025年超过25%,2022年约为15%。
  • SEMI(2025年行业预测):全球NAND闪存设备投资可能在2026-2027年加速,部分产能或转向AI加速器专用存储。
  • IDC(2024年估算):一片HBM3e内存的成本是同等容量DDR5的3-5倍,具体倍数因代际和工艺而异。
  • IDC(2023年数据):全球AI服务器出货量已超过120万台,其中配置足量大容量内存的比例不足30%。
  • WSTS(2025年估算):2024年全球NAND闪存市场规模约为560亿美元,AI相关内存需求的潜在增量在2028年前可能介于80-100亿美元之间。 #AI #存储芯片 #算力 #存储与HBM