摘要:Pure Storage 3 月 11 日推出了 FlashBlade//EXA,这是业界性能最高的数据存储平台,专为满足AI和高性能计算(HPC)的最苛刻要求而设计的。
Pure Storage 3 月 11 日推出了 FlashBlade//EXA,这是业界性能最高的数据存储平台,专为满足AI和高性能计算(HPC)的最苛刻要求而设计的。
虽然传统的数据存储方法阻碍了AI的潜力,但FlashBlade//EXA通过基于FlashBlade的成熟架构打破了元数据瓶颈,该架构是专为高并发和大规模 AI 和 HPC 工作负载典型的大量元数据作而构建的。在初步测试中,FlashBlade//EXA 预计将在单个命名空间中提供每秒超过 10 TB 的读取性能,为业界性能最高的存储解决方案树立了新的标准。
FlashBlade//EXA 体系结构独立缩放数据和元数据;通过现成的第三方数据节点提供近乎无限的扩展,从而实现高度可扩展的多维性能;并通过使用标准协议和网络来降低部署、管理和扩展的复杂性。
推动存储模式转变
更强大的GPU提高了基础AI模型的训练速度和规模。模型大小和复杂性的爆炸式增长正在推动存储需求的范式转变,其中解决方案必须无缝跟上 AI 和 HPC 的计算强度和数量以及数据需求的多样性。
传统存储系统的设计无法满足现代 AI 要求。当应用于大规模 AI 和 HPC 时,它们面临着并行和并发读写、元数据性能、超低延迟、异步检查点以及可预测的高吞吐量等关键限制。
现代存储解决方案必须提供大规模并行、分解式架构,以大规模提供灵活性,确保存储有助于加快AI的步伐。
适用于AI和HPC工作负载的现代存储架构
传统的高性能存储架构针对传统的HPC环境进行了优化,具有更可预测和常规的工作负载,并专注于原始性能扩展。当今的 AI 工作负载复杂且多模式,包括文本、图像、视频,由数以万计的 GPU 同时处理。这种巨大的转变需要高级元数据优化以及大规模性能扩展,以有效管理各种数据类型和高并发性。
FlashBlade//EXA专为应对 AI 工作负载的挑战而构建,具有无与伦比的性能和元数据管理。其分散的大规模并行架构可实现大规模存储灵活性。企业可以适应不断发展的多模态模型,优化可靠性并消除空闲时间,以加速 AI 模型训练和推理,同时提高 GPU 利用率。此外,Pure Storage 的元数据引擎和 Purity作系统与经济高效的现成数据节点相结合,使企业能够实现无与伦比的性价比。
FlashBlade//EXA 建立在 Pure Storage 十年创新的基础上,旨在为 AI 和 HPC 环境提供变革性的存储。FlashBlade//EXA 将:
·利用 Pure Storage 经过验证的元数据功能,最大限度地提高 AI 管道效率,并最大限度地减少训练和推理工作流期间的延迟,从而大规模提供行业领先的性能。
通过大规模并行处理和可扩展的元数据 IOPS 实现多维性能,以支持高速 AI 要求。在单个命名空间中提供每秒 10+ TB 的数据,提供业界最佳性能。
·通过消除元数据瓶颈来降低管理复杂性,提供高元数据性能、可用性和弹性,无需手动调整或额外配置即可处理大量 AI 数据集。
·通过高度可配置和分解的架构加速 AI 创新,使用行业标准协议为不断发展的 AI 和 HPC 环境提供支持;整合高速 NVIDIA ConnectX NIC、Spectrum 交换机、LinkX 电缆和加速通信库。
FlashBlade//EXA 预计将于 2025 年夏季推出。
FlashBlade//EXA 提供大规模并行架构,支持数据和元数据的独立扩展,为客户提供无与伦比的性能、可扩展性和适应性,适用于世界上一些最大、要求最苛刻的数据环境。存储现在正在加快大规模 HPC 和 AI 发展的步伐,“Pure Storage 首席技术官 Rob Lee 说。
来源:小玉看科技