Pure Storage首席技术官：存储、网络及软件数据集规模上正迅速接近可扩展性的极限

Pure Storage的欧洲、中东和非洲地区（EMEA）首席技术官Alex McMullan认为，我们在存储、网络及软件数据集规模上正迅速接近可扩展性的极限。在本月伦敦的一次简报会上，McMullan阐述了Pure Storage对可扩展性问题的立场，包括其各个维度和挑战。

首先，Pure Storage即将推出更高容量的Direct Flash Modules (DFMs)，即NAND驱动器，目前75TB的产品已发货，150TB型号在拉斯维加斯的Accelerate活动上预览，并且300TB版本已在路线图上。McMullan暗示未来几个月将有更多公告。

面对存储容量的持续增长，McMullan提到三星和其他NAND供应商对于达到500层乃至1000层持乐观态度，这将使得单个驱动器达到PB级别。然而，这种更高容量的NAND驱动器需要更强大的控制器来管理数据放置、驱动器磨损和垃圾回收等任务，因为一个150TB的驱动器需要跟踪150万亿字节，即1.2千万亿位，加上额外的10-20%预留空间，这对控制器的元数据管理和处理能力提出了重大挑战。

McMullan同时提出，虽然技术上可能实现QLC向PLC（每单元5比特）的转变以增加容量，但是否应该这么做，以及由此产生的环境成本是值得考虑的。他强调，制造存储设备过程中嵌入的碳足迹是一个不容忽视的问题，一个Pure Storage阵列的碳足迹是其重量的100倍以上，其中92%来自硅片的整个生命周期，包括开采、提炼、重制、形成晶圆及蚀刻过程。

考虑到向ZB（泽字节）甚至YB（尧字节）时代迈进的预测，McMullan指出，企业和客户正认真对待减少嵌入式碳排放的问题，Pure Storage正在从硬件工程、算法优化以及供应商效率提升等方面着手解决这一问题，并计划在平台上集成更多的电源优化措施，例如设置功率上限，或利用人工智能使系统在预期使用较少电力时运行在更低功率状态。

除了存储硬件的挑战，McMullan还讨论了网络可扩展性和软件方面的限制。他提到，随着数据量的急剧增加，网络带宽、协议和标准（如InfiniBand和以太网）也需要快速发展，Pure Storage已加入Ultra Ethernet Consortium，以推动以太网技术的快速演进，以满足客户对更高带宽的需求。

软件方面，随着数据集规模的指数级增长，如何设计能够有效管理数万亿对象的文件系统成为一个巨大的挑战，这涉及到计算、内存、网络、带宽以及更深层次的软件工程问题。目前，Pure Storage正致力于算法和数据管理技术的优化，包括压缩卡的迭代升级，以应对数据规模的扩大。

总的来说，McMullan指出，未来存储领域的可扩展性挑战是多维度的，涵盖了硬件、网络、软件以及环境可持续性等多个层面。尽管面临重重挑战，但通过技术创新和策略调整，Pure Storage正积极寻找解决方案，以支持未来数据存储的爆炸性增长，同时减少对环境的影响。