Western Digital将Storreduce重复数据删除添加到对象存储

Western Digital在移动中与StorreDuce联系在一起，允许它将启动的内联数据重复数据删除软件捆绑到其对象存储设备中。

硬件制造商针对的关键用例将是备份和数据保护。通过使用其存储阵列提供Storreduce的重复数据删除软件，Western Digital旨在为戴尔EMC，HPE和量子销售的人提供有吸引力的替代品。

据斯蒂芬Vervaet，战略联盟和开发总监，西方数码广告宣传，耦合Storreduce和ActiveScale的备份产品将使与传统备用电器相比平均节省45％。

很容易看出为什么Storreeduce的技术很有吸引力 - 该软件可以在物理服务器上部署在企业数据中心或在公共云中的虚拟机（VM）。

每个器具都充当服务器和对象存储目标之间的数据重复数据删除路径。设备无状态，允许在集群中进行部署，最多可达31。

服务器和设备之间的通信是通过S3协议完成的，这已成为访问后端存储的事实标准，尽管也支持Microsoft Azure和Google云平台。

通过内联重复数据删除算法将由设备摄入的数据，然后压缩以获得最高可能的数据速率。根据StorreDuce，这增加了服务器和存储之间的最多50毫秒的延迟。

对于功能，每个设备都需要一个快速闪光图层来存储重复数据删除索引和元数据。当在群集中连接多个设备时，此信息分布在集群上以防止节点故障。

完整的事务日志也被发送到对象存储，因为它们被编写以允许重建索引，以防静止影响所有节点。由于索引重建的过程需要时间，因此它也会定期快照以加速重建过程。这允许仅从最近的快照进行重建。

在群集中，摄取和数据访问性能随节点的数量而增加。一群Storreduce设备形成单个重复数据删除的全部名称空间，并且可以扩展到几百PB的数据，每个设备都有最多80pb的重复数据删除数据。

根据StorReDuce，每个设备可以在摄入和补充数据期间提供2Gbps（约7.2tb）的重复数据删除吞吐量。这使群集制作60Gbps（每小时216 TB）。对于这些要支持的处理率，您需要存储和网络能力以适应。

要比较，来自Dell EMC的数据域系列的最佳性能硬件可以管理最多50pbps的备份数据，当使用ddboost的源和31tbps在没有ddboost的31tbps进行重复数据删除工作时，声称的摄入率为68tbps。

根据Western Digital，ActiveScale / StorreDuce产品由许多备份软件提供商认证，包括Veritas NetBackup，Backup Exec，CommVault Simpana，Veeam和EMC NetWorker。

Western Digital指向其几个客户，这些客户已经使用StorReDuce与其ActiveScale硬件用于接近的数据或作为Hadoop集群中的数据的后端存储。

例如，在ActiveScale存储上的重复存储日志的大量成本远低于传统存储，并且大大减少了存储占用的物理空间，对性能没有重大影响。

在其他地方，Western Digital对S3A客户端贡献了若干增强功能，允许Hadoop集群访问基于S3的对象存储系统的存储数据。该公司还与Microsoft配合使用，同时对Windows中的Hadoop集群提供相同的访问权限。

更一般地说，对Vervaet的vervaet，重复数据删除的对象存储对迄今为止使用磁带或磁盘进行大数据工作负载的客户可能有趣。

使用Storeduce在Appscescale Appliance上增加了每种千兆字节大约7美分的软件成本，这将以更大的体积减小。ActiveScale系统上的最小存储容量为480TB。