基于MD5算法的重复数据删除技术的研究与改进  

Research and Improvement of Data de-duplication Based on MD5 Algorithm

作　　者：廖海生[1,2] 赵跃龙[1] 

机构地区：[1]华南理工大学计算机科学与工程学院,广东广州510640 [2]罗定职业技术学院,广东罗定527200

出　　处：《计算机测量与控制》2010年第3期635-638,共4页Computer Measurement &Control

基　　金：国家自然科学基金(60573145);教育部博士点基金(200805610019);广州市科技计划项目资助(2007J1-C0401)

摘　　要：随着信息技术的快速发展,信息化已成为决定企业生存与发展的关键因素之一;然而随着企业数据信息量的不断地增加,海量数据信息的存储和不断备份已经给企业的存储空间带来了巨大的存储压力;为此,深入研究了重复数据删除技术,并针对目前重复数据删除技术中存在的数据丢失及性能低等问题以及MD5算法流程和重复数据删除策略的分析和研究,提出了一种重复数据删除技术优化模型;测试分析表明,该优化模型实现了高效和安全的重复数据删除功能,节省了企业内部存储空间的存储成本开销。With the fast development of the information technology, the informationization has already become one of the keys factors to determine enterprise＇s survival and development. However, because the enterprise data continue to be increasing, mass data storage and con- t^nuous backup data have brought great pressure on the storage space. For this reason, the authors in--depth study the data de--duplication technology and analyze shortcomings of current data de-- duplication technology to propose a data de-duplication technology optimization model in light of the analysis and study of MD5 algorithm and data de--duplication. Testing and analysis indicate that the optimization model has achieved an efficient and secure data de--duplication function, with saving the overhead storage cost of enterprise.

关 键 词：重复数据删除技术 MD5算法 哈希冲突 存储空间 

分 类 号：TP309.3[自动化与计算机技术—计算机系统结构]