重复数据删除技术将由次级存储转移到主存储

核心提示：重复数据删除在次级存储与备份存储中得到了广泛的应用，现又逐渐发展成为主数据存储环境下的重要技术，重复数据删除技术将由次级存储转移到主存储，这种发展趋势将改变客户购买与部署存储产品的经济预算，市场发展、处理器技术的进步以及存储预算压力，包括光纤通道与iSCSI SAN存储阵列，此外，所有这些因素正在使重复数据删除技术成为

重复数据删除在次级存储与备份存储中得到了广泛的应用，现又逐渐发展成为主数据存储环境下的重要技术，这种发展趋势将改变客户购买与部署存储产品的经济预算。

市场发展、处理器技术的进步以及存储预算压力，所有这些因素正在使重复数据删除技术成为主存储环境必不可少的实用解决方案。一方面，主要数据的性质正在发生改变，更为适用重复数据删除；另一方面，能够进行实时重复数据删除且不降低I/O性能的专用处理器也已上市，且价格适中。

下面我们简要介绍一下将重复数据删除应用于主数据存储环境的关键因素：

虚拟化：

由于传统的第一层存储的冗余水平一般远低于第二层和第三层数据存储，因此一般不认为重复数据删除是第一层存储的必备技术。但是，随着服务器虚拟技术的使用不断增加，一台物理服务器上开始运行多部虚拟机，多操作系统和多应用的实例也应运而生，使昂贵的主磁盘存储器的数据冗余水平有所增加。这样，在降低主存储阵列成本方面，重复数据删除技术开始显现出优势。

实时重复数据删除：

如何对生产数据进行实时重复数据删除是将重复数据删除应用于主存储层的主要障碍之一。重复数据删除技术的备份存储版本意味着现有产品以软件为基础，仅在数据被写入磁盘后才进行后期处理和重复数据删除。作为替代产品，重复数据删除设备并不具备计算功能以实时完成需要占用处理器的散列算法，而大多数重复数据删除技术都要使用散列算法。为完成主存储环境的实时处理，我们需要一部专为重复数据删除技术而设计的专用卸载处理器。新一代重复数据删除解决方案具有硬件优势，能够实现联机实时数据删除。

大幅节约硬件成本：

通过降低对主存储容量的需求，重复数据删除能够显著降低IT成本，减少昂贵的高性能主磁盘阵列的购买数量。小型主数据存储负载带来的优势在公司的整体IT基础设施中能够得到指数级增加：较少的一级数据降低了二级存储和归档存储容量的需求，减轻了网络中枢的压力，延迟或免除了购买附加交换机、路由器和其他网络资源的需求。

补充现有数据缩减与容量优化技术：

在一级存储层使用重复数据删除技术并不意味着不再需要数据压缩等其他数据缩减技术。重复数据删除是一种补充型技术，能够与包括业界标准LZS压缩算法在内的现有数据压缩技术形成互补，以提供双重数据缩减性能。

节约能源费用：

居高不下的能源价格是全球IT经理人面临的主要问题之一，而重复数据删除在节约能源成本方面能够发挥很大作用。随着存储空间需求大幅下降，企业的存储阵列、服务器及其连接网络设备需求也随之下降。这些设备数量的减少使数据中心或机房的动力与制冷能耗也得到了减少，从而达到显著节约能源成本的目的。

Hifn的应用服务处理器（ASP）与板卡级产品为新一代重复数据删除提供提供硬件引擎，使应用于主存储层的重复数据删除成为主流技术。Hifn目前提供板卡级DR 250/255产品，经过设置后能够支持实时重复数据删除，速率达到每秒1Gbyte。板卡级解决方案使OEM和ODM能够更轻松而迅速地为他们的产品增加重复数据删除功能，以获取产品迅速投放市场的优势。Hifn的DR 250/255卡具有完全的硬件无关性（hardware agnostic），并支持光纤通道、SAS和SATA磁盘驱动，以及所有网络存储选项，包括光纤通道与iSCSI SAN存储阵列。此外，该卡还是用于主NAS存储环境的理想选择。