一种并行重复数据删除方法和系统

新一代信息技术

本发明公开了一种并行重复数据删除方法，包括以下步骤：客

户端先对要重删的数据进行分块，然后通过哈希函数计算出每个分块

的哈希指纹，然后把哈希指纹发送到不同的重删服务器节点上进行指

纹的查重工作。如果某个指纹经过对比，确认是重复的指纹，则只用

更新查询服务器上元数据和重删服务器节点上的指纹计数器。如果某

个指纹经过对比，确认是一个新的数据块，则传输该数据块到重删服

务器并且更新指纹库和查询服务器上的元数据。本发明具重删

未应用