华为鲲鹏内存优化突破,大数据场景需求降至75%
在华为全联接大会2026上,华为展示了其鲲鹏处理器在大数据内存优化方面的最新进展。通过精准识别冷热数据和快速压缩换出技术,鲲鹏将大数据场景内存需求降至原来的75%,同时使沙箱场景内存超分比提升30%。...
在2026年9月17日于上海举行的华为全联接大会2026上,华为计算首席战略官朱照生分享了鲲鹏处理器在大数据内存优化方面的突破性进展。这项技术通过两项关键优化措施,显著提升了内存使用效率,为AI时代的大数据处理提供了更高效的解决方案。
首先,鲲鹏处理器能够以超过99%的准确率精准识别冷热数据,这一识别准确率较其他处理器高出10个百分点,同时算力开销降低10%。其次,在识别出冷热数据后,鲲鹏采用快速压缩和换出机制,所需算力开销不到5%,而业界平均水平超过20%。这两项技术结合,使得在同等内存容量下,鲲鹏可使沙箱场景内存超分比提升30%,数据库检索性能提升15%。
以某知名股份制银行的实际应用为例,该行在大数据场景中应用鲲鹏内存多元感知技术后,在相同业务负载下,每台服务器所需内存配置从原计划的512GB降至384GB,降幅达25%。这一成果不仅降低了硬件成本,还提高了资源利用率。
朱照生表示,随着Agent爆发与内存上升周期的叠加,内存资源稀缺程度超出预期。鲲鹏的这两步优化方案无需修改应用代码,即可实现显著的性能提升和成本降低。特别是在多Agent交互场景中,鲲鹏的架构创新有效应对了超高并发弹性、低时延互联等挑战。
此外,华为还展示了其鲲鹏超节点的最新升级。该超节点依托灵衢互联构建百TB级内存池,最大支持4096节点组网,具备内存统一编址、超大带宽、超低时延三大特性。这些特性已在生成式广告推荐、证券低时延、Agent沙箱等多个场景中落地应用,取得了显著成效。
在基础软件层面,围绕操作系统、数据库、集群软件、编译器打造异构融合池化系统,纵向实现芯、硬、软协同,横向实现通、智、网、存等硬件资源融合。鲲鹏超节点在AI推理场景的Prefill阶段,通过灵衢大带宽打造超大KV Cache缓存池;Decode阶段,通过灵衢互联实现1M序列长度下NPU吞吐量提升;在Agent沙箱场景可实现10万沙箱10秒极速启动。
在安全层面,鲲鹏围绕处理器,系统和应用,打造端到端的安全防护体系,确保数据隐私和系统稳定运行。这些技术创新不仅提升了单机性能,也为大规模分布式计算提供了坚实的基础。