基于文件路径的重复数据删除集群的数据路由策略

Authors：王丽芳; 张志珂; 蒋泽军; 蔡小斌; 彭成章

Source：西北工业大学学报, 2014, (4).

DOI：10.3969/j.issn.1000-2758.2014.04.038

• 重复数据删除集群
• 无状态数据路由算法
• 文件路径
• 存储使用量

重复数据删除集群是解决不断增长的海量数据备份需求的一种有效方法。它的关键问题是数据路由策略，即如何把数据合理分配到集群内的各个节点。目前的数据路由策略利用文件或者数据段的最小数据块签名计算路由目标节点，称作MCS（ minimum chunk signature）数据路由策略。当重复数据删除集群规模较小时，这种方法的存储使用量接近单节点重复数据删除。但是，当集群规模较大时，它的存储使用量远远劣于单节点重复数据删除。为了降低重复数据删除集群的存储使用量，提出一种基于路径的重复数据删除集群的数据路由策略，称作DRSD（ data routing strategy based on di-rectories）。实验结果表明，对于各种不同的节点数量，DRSD的重复数据删除率都明显高于MCS，并且接近单节点重复数据删除。当节点数量是64时，DRSD的重复数据删除率比MCS高35％。

• Institution
  西北工业大学