电子行业AI的进击时刻22:MRDIMM和CXL增加AI服务器内存-251026-广发证券
MRDIMM 和 CXL 增加 AI 服务器内存。 如何同时提升并平衡 AI 服务器的内存容量扩展与性能成为当前架构演 (2)不同应用与负载的内存需求差异明显,
MRDIMM 和 CXL 增加 AI 服务器内存。 如何同时提升并平衡 AI 服务器的内存容量扩展与性能成为当前架构演 (2)不同应用与负载的内存需求差异明显,
MRDIMM 和 CXL 增加 AI 服务器内存。 如何同时提升并平衡 AI 服务器的内存容量扩展与性能成为当前架构演 (2)不同应用与负载的内存需求差异明显,
MRDIMM 和 CXL 增加 AI 服务器内存。 如何同时提升并平衡 AI 服务器的内存容量扩展与性能成为当前架构演 (2)不同应用与负载的内存需求差异明显,核心数据:AI 的进击时刻 19:AI 推理驱动存储需求增长,SPD&VPD 芯片空间广阔;载至 CXL 可使 batch size 提高 30%、GPU 需求降低 87%、prefill 阶段 GPU 利用率提升 7.5 倍;;间做内存池化,将部分 KV Cache 从昂贵的 GPU 显存弹性卸载到 CXL 设备,在不增加 GPU 成本前提下扩大。
本报告由张大伟并非香港证券及期货发布,发布于 2025 年。
覆盖 2025 年,全文约 12。
本报告免费查阅,登录资料宝后即可在线获取完整内容。
适合战略规划、行业研究员等读者参考。
重点分析了大模型、LLM等议题。