重复数据删除技术在备份中的应用体会

核心提示： 原有备份方案的挑战熊猫电子集团需要保护的核心数据较大，主要是数据库数据和文件服务器，重复数据删除技术在备份中的应用体会(2)，未来预计有快速的增长，此前的保护措施是备份至本地磁带库，恢复数据时，数据能够自动还原，备份策略为周五晚全备份加平时每天的增量备份，熊猫电子集团的信息系统晚上一般不需

原有备份方案的挑战

熊猫电子集团需要保护的核心数据较大，主要是数据库数据和文件服务器，未来预计有快速的增长。此前的保护措施是备份至本地磁带库，备份策略为周五晚全备份加平时每天的增量备份。

熊猫电子集团的信息系统晚上一般不需要处理业务。所以每天下班后利用晚上时间备份，虽然一次全备份的时间较长，但备份窗口还够用。

不过，人无远虑，必有近忧。我们主要有两点担心：一是之前的磁带备份除了恢复时间长以外，还有一大缺点就是可靠性不够高。南京地区梅雨季节比较长，磁带受潮容易发霉。本以为数据都已经备份到磁带上，结果磁带读不出数据，那就麻烦了。二是如前面所说，整个集团的数据都在这个信息中心。如果遇到火灾、台风这类影响到整个机房的灾害，后果会很严重。所以信息中心决定做一个异地备份，多一道保障。显然，每天将备份磁带转运到异地保存是不可行的。即使不考虑每天转运的人力物力花费，也会因为费事而难以坚持。而且，即使坚持转运了也不是很可靠。

看好重复数据删除技术

熊猫电子考虑在相距5公里的地方建一个数据容灾备份系统，两地间连接的是商用IP网络，其带宽为2Mb/s。由于带宽小，可以通过的数据量非常有限，因此需要一套先进的方案，有效降低对带宽的要求，同时又能可靠地进行备份。

经过多方考察，我们发现，重复数据删除技术是一个比较理想的方案。备份数据的重复率是非常高的。例如，办公自动化系统中，文件流转、版本修订比较普遍，一个文件可能抄送给多个人，一个文件可能有多个版本，这其中有大量的重复数据。尤其是文件比较大的时候，备份时重复的存储空间占用相当可观。重复数据删除技术就能解决这个问题。所有重复的数据，系统在备份时只保留一份，在重复出现的地方，只保存一个数据地址。恢复数据时，数据能够自动还原。这正是熊猫电子需要的技术。