在线存储数据压缩技术的缺陷
2010-09-20 12:16:34 来源:WEB开发网为充分利用功能优势,用户被锁定采用NetApp存储器。
IT经理应该注意到A-SIS是ONTAP(公司存储操作系统)的NetApp Nearline组件不收费标准。
2.主机管理的离线数据压缩方案
Ocarina是主机管理数据精简技术的一种。其包括一个脱机流程——通过设备读取文件,压缩这些文件然后写回磁盘。当需要某一文件时,另一设备重组数据并将其传给应用软件。这一方法的好处在于压缩水平很高,因为这一流程是离线的,采用了更多robust算法。精简比率的合理假设是只读网络环境和最初ingest比率为3-5:1。然而,由于在数据写入时有重组需求,经典产品环境的精简比率为2-3:1。
主机管理的数据精简方案有以下五个缺陷:
方案花费并不小,这是基于购买数据压缩所需设备和服务器成本。在只读或write-light环境中,这些成本支出是必须的。
为了获得上述功能优势,所有的文件必须经过ingest处理,这一过程速度很慢。
在所有的文件被读取和修改后,再像未压缩一样重新写入磁盘。为了实现成本节约,文件必须重新压缩。这种情况下,可采用这一方法只能是只读或者write-light环境。
Ocarina当前只支持文件,不像NetApp A-SIS既支持文件也支持基于数据块的存储器。
解决方案的伸缩性不强,因为其精简流程与备份、再生相关,因此数据转移过程相当复杂。
为了平衡,类似Ocarina的解决方案适合读取密集型应用软件,且应该避免用于更新速度较快的环境(包括打印)。
3.在线数据压缩
Storewize提供了在线数据压缩技术,一个设备位于服务器和存储网络之间(详见Shopzilla的结构)。Wikibon成员指出依据经验,合理的压缩比例为1.5-2:1。
Wikibon调查显示,Storwize数据精简方式的主要优势在于响应时间很短(大约为几微秒),同时性能有提高。存储器性能得以提高,因为压缩过程是在数据进入存储网络之前进行。因此,存储网络中的所有的数据都被压缩,这意味着被发送到存储区域网络、内存、内置阵列和磁盘的数据量变少,将存储资源需求和备份窗口减少了40%甚至更多。
Storwize数据精简方式有两个主要缺陷:包括:
设备和网络重新设计以配置压缩设备的成本。Wikibon协会估计净投资收益将高于30TB。
灾难恢复过程过于复杂,对于有数据重组(re-hydration)计划的用户尤其如此。
为了平衡,Ocarina或Storwize数据精简的优势是其可用于任何基于文件的存储器(例如不同种类的设备)。NetApp和其他基于阵列的解决方案限制了用户采用其他供应商的产品。但这也有好处。比如,由于已经整合,因此配置简单。
因为其后处理/集中ingestion方式,Ocinara的精简方式最适合读取密集型环境,可获得最佳精简比率。Storewize的压缩水平最高,而企业数据中心的投资回报一般来说为30TB或更高。
在线数据精简正以很快的速度成为主流存储设备。存储系统主管应该熟悉上述精简方式和这一领域的供应商技术,继而提高对存储供应商提供容量最优化技术的要求,以控制存储成本。
原文链接:
http://wikibon.org/wiki/v/Pitfalls_of_compressing_online_storage
。
更多精彩
赞助商链接