HDFS

作品数:573被引量:2069H指数:20
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:林文辉伍卫国魏伟刘晓洁何连跃更多>>
相关机构:北京邮电大学电子科技大学华南理工大学南京邮电大学更多>>
相关期刊:更多>>
相关基金:国家自然科学基金国家科技支撑计划国家高技术研究发展计划中央高校基本科研业务费专项资金更多>>
-

检索结果分析

结果分析中...
选择条件:
  • 期刊=软件导刊x
条 记 录,以下是1-9
视图:
排序:
静态场景下HDFS副本放置的改进策略
《软件导刊》2021年第6期96-101,共6页鲍敬源 赵宁 汪洋 
云存储系统中的副本放置策略关系到云存储的可用性和可靠性、数据负载均衡程度以及数据访问速度。在静态场景,也即数据分批次处理场景下,HDFS默认策略只对每个数据块的3个副本分别进行放置,而未综合考虑整批数据放置方案对集群负载、访...
关键词:分布式文件系统 HDFS 副本放置策略 多目标优化 云存储 
基于Hadoop的图书馆特色资源云服务关键技术研究被引量:2
《软件导刊》2018年第5期173-175,共3页赵嘉凌 
为了提升图书馆在大数据下的特色数字资源服务质量,探讨了一种更科学有效的云服务模式。采用Hadoop平台,通过对HDFS涉及的技术细节,包括体系结构、并行数据处理框架Map-reduce以及分布式数据库、HBase展开具体分析,结合广东省特色文献...
关键词:HDFS 云存储 数字资源 云服务 
基于Spark的云计算平台在实验室的应用与实现被引量:6
《软件导刊》2018年第4期191-193,共3页张恬恬 孙绍华 
西安石油大学研究生创新与实践能力培养项目(YCS17131014)
随着数据挖掘逐渐被应用到金融、娱乐、商业和医疗等多个行业,近年来涌现出各种用于处理海量数据的数据处理引擎,如MapReduce、Spark等。为了使高校实验室更深入地进行数据挖掘领域的理论研究,简要阐述分析了Spark技术及HDFS的概念与基...
关键词:SPARK HDFS 云平台 数据处理 
异构存储的HDFS副本选择策略研究被引量:1
《软件导刊》2017年第7期11-14,共4页杨姗姗 陈彩 梁毅 
大数据时代的到来,给海量数据的存储与管理带来了更为严峻的挑战。HDFS能够有效缓解飞速增长的海量数据存储需求。最初HDFS被设计用于同构的硬件环境,然而随着集群硬件的迭代更新,存储介质的硬件异构特性愈发明显。为了充分利用高性能...
关键词:大数据 异构存储 HDFS 副本选择策略 CloudSim 
基于HDFS的教学资源云存储平台设计
《软件导刊》2016年第4期118-120,共3页曹卉 
河南省科技厅科技攻关项目(152102210304);河南省教育厅项目(ZJA15172)
基于HDFS技术,设计了教学资源云存储平台。提出了平台的总体架构,对HDFS提供的平台技术支撑进行了详细分析,给出了平台基础架构,分析了基础架构各层次的实现内容,用于解决分布、异构、海量、多模式的教学资源集成、整合及共享问题。
关键词:HDFS 教学资源 云存储 
Hadoop分布式文件系统原理被引量:3
《软件导刊》2016年第3期15-17,共3页曹卉 
河南省科技厅科技攻关项目(152102210304);河南省教育厅项目(ZJA15172)
Hadoop分布式文件系统在大规模存储和访问中具有广阔的应用空间。从基本概念、基本结构、元数据管理、数据存储、文件管理、数据容错6个方面对HDFS的实现原理进行了探究,可为HDFS应用研究奠定基础。
关键词:HDFS HADOOP分布式文件系统 信息存储 
基于Hadoop/Hive的气象数据分布式处理研究被引量:7
《软件导刊》2015年第8期11-13,共3页陈效杰 张金泉 
分布全球的气象传感器每隔一段时间就会收集大量的气象数据,历史气象数据更为庞大,如何存储和处理这些数据已成为一个难题。Hadoop的出现给人们提供了存储和分析大数据的一个利器,它利用HDFS分布式文件系统进行大数据存储,用户通过编写M...
关键词:大数据 HADOOP HDFS Hive 
基于HDFS的分布式区域电子病历存储策略被引量:1
《软件导刊》2015年第6期30-32,共3页伍贵富 何葵 王益新 
深圳市科技创新委员会项目(20120618102906924)
区域医疗信息化平台的建设和推广是目前医疗信息化发展的一个重要方向和研究热点。在平台建设过程中,首先面临的问题是解决如何在基于Hadoop的云计算环境中,高效地操作和存储电子病历等小文件。针对这一问题,提出一种基于AHP方法的存储...
关键词:HDFS 云计算 电子病历 层次分析法 文件合并 
基于Hadoop的数字化校园设计与实现被引量:1
《软件导刊》2014年第10期15-17,共3页陆丽婷 
高校是进行教学与科研的场所,随着云计算技术的发展,如何管理和利用产生的海量数据已成为当前研究的热点。设计了一个基于Hadoop云计算平台的数字化校园,其由4层体系构建,对该系统从结构、功能等方面进行了设计与分析。
关键词:云计算 HADOOP HDFS MapReduce编程模型 数字化校园 
检索报告 对象比较 聚类工具 使用帮助 返回顶部