重复数据删除

作品数:256被引量:583H指数:13
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:邓玉辉肖侬刘芳谭玉娟冯丹更多>>
相关机构:华为技术有限公司华中科技大学国防科学技术大学中国科学院更多>>
相关期刊:更多>>
相关基金:国家自然科学基金国家高技术研究发展计划中央高校基本科研业务费专项资金国家科技支撑计划更多>>
-

检索结果分析

结果分析中...
条 记 录,以下是1-10
视图:
排序:
基于重复数据删除的分层存储优化技术研究进展
《计算机科学》2025年第1期120-130,共11页姚子路 付印金 肖侬 
国家重点研发计划(2022YFB4500304);国家自然科学基金(62332021,61832020)。
随着全球数据量的爆炸式增长以及数据多样性的日益丰富,单一介质层的存储系统逐渐不能满足用户多样化的应用需求。分层存储技术可依据数据的重要性、访问频率、安全性需求等特征将数据分类存放到具有不同访问延迟、存储容量、容错能力...
关键词:重复数据删除 分层存储 存储位置选择 重复内容识别 数据迁移 
云数据安全去重技术研究综述被引量:5
《密码学报》2023年第6期1099-1117,共19页伍高飞 袁紫依 孙思贤 陈永强 孙润东 付安民 朱笑岩 张玉清 
国家重点研发计划(2023YFB3106400,2023QY1202);国家自然科学基金重点项目(U2336203,U1836210);国家自然科学基金(61941105,61772406,62072239);海南省重点研发计划(GHYF2022010);先进密码技术与系统安全四川省重点实验室开放课题(SKLACSS-202205)。
云服务器中的数据往往以密文的形式存储,而加密密钥的不同会使相同的数据生成不同的密文,因此高效的数据安全去重技术成为云存储领域的研究热点.本文首先分析了数据安全去重技术面临的主要挑战,描述了数据安全去重的系统模型以及多种安...
关键词:重复数据删除 收敛加密 所有权证明 隐私保护 数据流行度 
一种融合文件及内容分块的重复数据删除算法
《软件》2023年第12期53-59,86,共8页朱建平 黄恒 周积 陈海茂 黄利君 
重复数据删除对于文件增量同步、云存储和容灾备份等研究具有十分重要的作用和意义,能够大大地提高磁盘存储的效率。结合现有的文件级和块级去重算法的优势,并针对基于内容的分块算法CDC容易因超大块而导致块大小方差变化大的问题,提出...
关键词:内容分块 文件存储 重复数据删除 
基于DotHash模型的链接预测和文档重复数据研究
《长江信息通信》2023年第11期146-148,共3页魏鹏 
分析数据集合相似度是数据挖掘任务的核心。例如,删除Web搜索中的重复结果,常用的方法是查看页面的Jaccard指数。在社会网络分析中,另一个常见度量是adam-adar指数,在预测链接问题中被广泛使用。然而,随着要处理的数据量的增加,计算所...
关键词:DotHash Jaccard adam-adar 链接预测 重复数据删除 
采用随机块附加策略的云数据安全去重方法被引量:2
《西安电子科技大学学报》2023年第5期212-228,共17页林耿豪 周子集 唐鑫 周艺腾 钟宇琪 齐天旸 
国家自然科学基金(62102113,62172053);国际关系学院国家安全高精尖学科建设科研专项基金(2021GA08);国际关系学院中央高校基本科研业务费专项资金(3262023T30,3262023T33);国际关系学院大学生学术支持计划项目(3262022SWA01)。
源端去重技术通过返回确定性响应阻止后续用户上传相同文件,极大地节省了网络带宽和存储开销。然而这种确定性响应带来了侧信道攻击。一旦请求文件不需要后续上传,攻击者便能轻易窃取云存储中目标文件的存在性隐私。为抵抗侧信道攻击,...
关键词:云存储 重复数据删除 侧信道攻击 隐私安全 
基于有序聚类方程的数据相似性精准识别仿真
《计算机仿真》2023年第4期402-406,共5页张媛 张慧钧 
黑龙江省自然科学基金资助项目(LH2022A023)。
网络环境中海量数据具有明显复杂度,存在着大量结构化、半结构化和非结构化的数据,数据块长度与位置易产生较高相似性。当前已有的相似性数据识别属于密集任务型方法,会占用大量的内存空间。为了进一步提高数据利用率,降低数据冗余度,...
关键词:小波技术 重复数据删除技术 特征向量相似度 点云分类网络 有序聚类方程 
安卓微信中图片重删技术研究
《信息技术与信息化》2022年第11期112-115,共4页冉燕辉 李梦娇 曹锟 
针对微信社交平台使用过程中,移动设备不断存储重复图片对带宽和存储空间造成数据冗余的问题,提出一种利用数据删除技术有效删除重复图片数据的重删方法。首先,采用MD5算法计算图片指纹,对微信接收并写回磁盘的图片数据进行拦截并生成...
关键词:重复数据删除 图片指纹 安卓文件读写 文件存储 
基于民航数据特性的重删固定长度分块方法被引量:1
《中国民航大学学报》2022年第4期32-37,共6页丁建立 李慧 曹卫东 
国家自然科学基金项目(U1833114);民航安全能力建设资金项目(SA2020280)。
针对民航数据在容灾备份时存在存储数据重复的问题,提出一种基于民航数据特性的重删固定长度分块方法。该方法根据民航数据类型的一致性,结合固定长度分块与可变长度分块的优势,设计了一种分块策略索引表的数据结构,为同种类型的数据提...
关键词:民航数据 容灾备份 重复数据删除 类型一致性 分块策略 模拟重删率 
重复数据删除技术在云存储中的应用被引量:2
《科技创新与应用》2022年第19期158-161,共4页宋桂平 
云存储是一种低成本、高安全的数据存储方式,但是这些存储在云端的数据有很多是重复的,不仅占用存储空间、增加存储成本,而且严重消耗网络带宽。重复数据删除技术作为一种全局性的冗余数据消除技术,压缩比高达20∶1,对于缓解数据爆炸式...
关键词:重复数据删除技术 云存储 数据存储节点 分块算法 
基于持久性内存的民航重复数据删除方法
《现代电子技术》2022年第10期131-136,共6页丁建立 李慧 
国家自然科学基金项目(U1833114)。
针对民航数据在存储、容灾备份时存在数据量大、备份时间长的问题,文中改进基于机械硬盘的传统去重方法,提出一种基于持久性内存(PM)的民航重复数据删除方法。该方法根据民航数据长度小而数量多的特点,采用基于位置的内容比较重删法,首...
关键词:民航数据 重复数据删除 持久性内存 文件定位 重复率阈值 容灾备份 
检索报告 对象比较 聚类工具 使用帮助 返回顶部