我们正在存储基础架构中寻求一种全新的变革方式来处理和大数据相关的日益增长的数据容量。每一种方式的特点都不尽相同,但又互有重叠。
在对I/O敏感的高交易量事务处理中,ESG发现应用了大量可以通过增加磁盘进行纵向扩展的基础架构方式。这种系统是诸如EMC VMAX、IBM DS800以及HDS VSP等公司最传统的解决方案。
在大文件尺寸的应对方面,前沿的企业在几年之前就开始采用横向扩展的系统,配置足够的带宽来处理大文件尺寸,从而解决大数据的问题。这类系统包括DataDirect Networks、Hewlett-Packard Ibrix、Isilon(现被EMC收购)以及Panasas等。这些系统通过纵向扩展(增加磁盘数量)以及横向扩展(增加带宽和处理器能力)来满足性能所需。随着大数据尺寸的问题变得日益常见,这些系统中的一部分也在寻求更为主流的商业应用。这些更主流的环境中通常混合着I/O和吞吐量敏感的高性能要求,因此横向扩展和纵向扩展的能力都必须具备。
最后,在内容容量方面,我们正看到横向扩展、基于对象的存储基础架构系统可以在单个简易的管理系统中更轻松地扩展至数以百亿的数据对象。这类系统的优势在于其更易于管理和跟踪鲁棒的元数据,并且设计可以使用高密度、低成本的硬盘驱动器,就像Dell 的DX那样。