移动闪存的重复数据删除技术  

Deduplication technology for the mobile flash

作　　者：贺秦禄 边根庆[1] 邵必林[2] 张维琪[1] HE Qinlu;BIAN Genqing;SHAO Bilin;ZHANG Weiqi(School of Information and Control Engineering,Xi'an Univ,of Architecture and Technology,Xi'an 710055,China;School of Management,Xi'an Univ,of Architecture and Technology,Xi'an 710055,China)

机构地区：[1]西安建筑科技大学信息与控制工程学院,陕西西安710055 [2]西安建筑科技大学管理学院,陕西西安710055

出　　处：《西安电子科技大学学报》2020年第1期128-134,共7页Journal of Xidian University

基　　金：国家自然科学基金（61872284,61672416）;陕西省教育厅专项科研（Z20180353）;陕西省自然科学基础研究基金（Z20180156）;西安建筑科技大学人才基金（RC1707）;西安建筑科技大学青年基金（QN1726）;西安建筑科技大学自然科学专项（ZR18050)

摘　　要：由于闪存在智能手机和物联网等设备上的容量和可靠性都是有限的,重复数据删除可以通过删除重复I/O来解决这些限制,但必须在设备的各种资源限制下完成。提出了一种M-Dedupe重复数据删除方法,应用内容感知聚类重复数据删除关键路径上的I/O请求,通过提高闪存垃圾回收效率来提高手机的性能和效率。通过原型系统验证的结果表明,M-Dedupe在所有选定的移动应用负载下,写数据量平均减少23.7%~42.5%,平均写响应时间减少21.2%~39.8%,平均擦除数据块减少16.8%~43.9%。该方法能够在移动闪存系统中实现高准确率的重复数据删除,提升重复数据删除的效率,节省存储空间。The performance,capacity and reliability of the flash memory on devices such as smartphones and the Internet of Things are limited.Deduplication can resolve these restrictions by removing the duplicate I/O,but must be done under various resource constraints on the device.This paper proposes the M-Dedupe deduplication,which applies content-aware deduplication I/O requests on critical paths,and improves the performance and efficiency of mobile phones by improving the efficiency of flash garbage collection.The prototype system verification results show that the M-Dedupe reduces the write data by an average of23.7%~42.5%,the average write response time by 21.2% ~39.8%,and the average erased block by16.8%~43.9%.Besides,it can achieve high-deciding duplication in the mobile flash system,improve the deduplication efficiency,and save the storage space.

关 键 词：移动存储 重复数据删除 闪存 

分 类 号：TP393.1[自动化与计算机技术—计算机应用技术]