分布式文件

作品数：670被引量：2341H指数：22
导出分析报告
相关领域：自动化与计算机技术更多>>
相关作者：苗艳超邵宗有王勇夏舰波吴朝晖更多>>
相关机构：郑州云海信息技术有限公司中国科学院苏州浪潮智能科技有限公司华中科技大学更多>>
相关期刊：更多>>
相关基金：国家自然科学基金国家高技术研究发展计划国家重点基础研究发展计划国家科技支撑计划更多>>
-
在结果中检索

检索结果分析

结果分析中...
共 条 记 录，以下是1-10
全选清除导出
参考文献引证文献引用追踪
视图：
排序：
分布式文件系统的元数据管理方案演变:整体到粒度
《小型微型计算机系统》2025年第2期305-313,共9页路垚 段红军 张利莹 王振飞 
国家大学生创新创业训练项目(202410459121)资助;国家重点研发计划课题项目(2023YFB4502704)资助。
元数据的存取性能对于分布式文件系统至关重要,近年来已成为学术界和工业界研究的热点.早期的分布式文件系统未严格区分元数据和数据管理,导致可扩展性和性能优化方面的挑战.针对此问题,主流分布式文件系统采用元数据和文件数据分离的架...
关键词：分布式文件系统 元数据管理 粒度 可扩展性 
分布式文件系统数据读取方法研究与探讨
《福建电脑》2024年第12期63-65,共3页陈佳 张冰 朱志宇 
分布式文件系统中,客户端频繁访问数据节点会导致网络开销增大。为减少客户端对地址节点的访问次数,提升数据读取效率,本文提出一种基于D-S证据理论的数据读取方法。利用D-S证据理论进行不确定信息预测,来获得下一次需访问的数据节点地...
关键词：D-S证据理论 分布式文件系统 数据读取 
基于YOLOv5的深度学习样本管理和训练自动化平台的设计与实现
《信息化研究》2024年第6期66-72,共7页刘建丰 陈烨 焦良葆 田源 周阳 谢戴鑫 成超 
国家自然科学基金(No.62302211);江苏省大学生创新创业训练计划项目(No.202311276169H)。
随着深度学习算法的迅猛发展及其在计算机视觉和工业自动化等领域的广泛应用,数据管理的复杂性和训练过程的分散性已成为制约其实际落地的关键问题。针对这一问题,本文提出一个基于YOLOv5的深度学习样本管理和训练自动化平台。该平台集...
关键词：YOLOv5 PyQt5 FastDFS分布式文件系统 目标检测 软件设计 
面向大规模工程档案的存储架构优化与技术实现
《中文科技期刊数据库（文摘版）社会科学》2024年第10期0136-0139,共4页温健 
本论文为大规模工程档案高效存储系统设计与实现。通过对分布式文件系统,关系型数据库和非关系型数据库关键技术的选择,并结合对系统进行详细的规划与实现,搭建出一种稳定可靠,性能优越的存储解决方案。该系统经严格测试和考核,证明它...
关键词：工程档案存储 分布式文件系统 系统测试 智能化管理 
基于Hadoop平台的分布式文件云存储系统设计
《软件》2024年第6期172-174,共3页袁宏涛 
数据量的激增促进了分布式文件系统的迅速发展,Hadoop作为一个开源框架,以其高效的数据存储与处理能力在分布式系统中占据重要地位。通过Hadoop Distributed File System(HDFS)实现大规模数据集的分布式存储,YARN为资源管理提供了弹性调...
关键词：HADOOP平台 分布式文件云存储系统 系统设计 
基于大数据随机样本划分的分布式观测点分类器
《计算机应用》2024年第6期1727-1733,共7页李旭 何玉林 崔来中 黄哲学 PHILIPPE Fournier-Viger 
国家自然科学基金资助项目(61972261);广东省自然科学基金资助项目(2023A1515011667);深圳市基础研究项目(JCYJ20220818100205012,JCYJ20210324093609026)。
观测点分类器(OPC)是一种试图通过将多维样本空间线性不可分问题转换成一维距离空间线性可分问题的有监督学习模型,对高维数据的分类问题尤为有效。针对OPC在处理大数据分类问题时表现的较高训练复杂度,在Spark框架下设计一款基于大数...
关键词：大数据分类 分布式文件系统 随机样本划分 观测点分类器 Spark计算框架 
内存高效的持久性分布式文件系统客户端缓存DFS-Cache被引量：1
《计算机应用》2024年第4期1172-1179,共8页倪瑞轩 蔡淼 叶保留 
国家自然科学基金资助项目(61832005);中央高校业务经费资助项目(B220202073);江苏省自然科学基金资助项目(BK20220973);中国博士后科学基金资助项目(2022M711014);江苏省博士后科研资助计划项目(2021K635C)。
为了在数据密集型工作流下有效降低缓存碎片整理开销并提高缓存命中率,提出一种持久性分布式文件系统客户端缓存DFS-Cache(Distributed File System Cache)。DFS-Cache基于非易失性内存(NVM)设计实现,能够保证数据的持久性和崩溃一致性...
关键词：非易失性内存 分布式文件系统 客户端缓存 缓存碎片整理 冷热数据分组 缓存设计 
改进一致性哈希优化存储邮政数据算法的研究被引量：1
《现代电子技术》2024年第6期43-48,共6页李泽山 
内蒙古自然科学基金项目(2020MS06029);内蒙古自然科学基金项目(2021LHMS06013);内蒙古自然科学基金项目(2020LH06009);内蒙古自治区关键技术攻关计划项目(2020GG0165)。
随着电子商务不断发展,邮政快递行业数据日益增多,传统方式对于邮政数据存储的理论与方法都已无法满足需求。基于此情况,使用一致性哈希算法来解决存储系统的横向弹性扩展,结合一致性哈希的虚拟节点与加权轮询算法优化Hadoop平台下分布...
关键词：数据存储 一致性哈希算法 加权轮询算法 分布式文件系统 负载均衡 异构集群 分配策略 
一种基于HDFS的分布式文件系统MPIFS被引量：4
《黑龙江工程学院学报》2024年第1期9-14,共6页陈卓航 陈雅琴 郭志勇 
中央高校基本科研业务费专项资金项目(2023NYXXS036)。
传统的MPI(Message Passing Interface)计算特点是数据向计算迁移,对于数据量庞大的计算任务具有先天的不足。文中提出一种支持MPI的分布式文件系统MPIFS的架构及实现。该文件系统基于HDFS(Hadoop Distributed File System),使得MPI在MP...
关键词：MPI 分布式文件系统 分布式并行计算 计算迁移 
大规模物联网数据的实时处理与存储
《通信电源技术》2024年第4期146-148,共3页石磊 李鹏 
详细探讨大规模物联网数据的实时处理与存储技术及其在智能城市交通管理等应用中的重要性。针对物联网数据的多样性、高并发、时变性以及异构性等特点,介绍流式处理、复杂事件处理(Complex Event Processing,CEP)、时序数据库以及分布...
关键词：物联网 实时处理 数据存储 流式处理 分布式文件系统 
全选清除导出
共67页<12345678910>
检索报告 对象比较 聚类工具 使用帮助 返回顶部