HDFS

作品数：573被引量：2069H指数：20
导出分析报告
相关领域：自动化与计算机技术更多>>
相关作者：林文辉伍卫国魏伟刘晓洁何连跃更多>>
相关机构：北京邮电大学电子科技大学华南理工大学南京邮电大学更多>>
相关期刊：更多>>
相关基金：国家自然科学基金国家科技支撑计划国家高技术研究发展计划中央高校基本科研业务费专项资金更多>>
-
在结果中检索

检索结果分析

结果分析中...
选择条件：
  • 基金=国家科技支撑计划x
共 条 记 录，以下是1-10
全选清除导出
参考文献引证文献引用追踪
视图：
排序：
天地一体化网络中基于HDFS的元数据优化策略
《无线电通信技术》2018年第1期9-13,共5页王坤 杨杨 邱雪松 
北京邮电大学可信网络通信协同创新中心预研基金项目;中央高校基本科研业务费专项资金项目;国家科技支撑计划项目(2015BAI11B01)
Hadoop分布式文件系统(HDFS)是Hadoop的核心之一,已经广泛应用于天地一体化网络数据的存储。但由于HDFS存储和管理的数据容量受限于命名节点(Name Node)的内存大小,其扩展性受到制约。针对Name Node管理元数据时存在的加载文件系统镜像(...
关键词：HADOOP HDFS 元数据管理 扩展性 内存映射文件 
基于Hadoop平台的农产品价格数据爬取和存储系统的研究被引量：4
《计算机应用与软件》2017年第3期76-80,共5页杨晓东 郜鲁涛 杨林楠 刘建阳 
国家"十二五"科技支撑计划课题(2014BAD10B03)
目前许多大型农贸市场和农业信息商务平台都在实时发布每天各地区不同农产品的价格数据。针对数据更新快、数据量大、数据形式多样,使数据的爬取和存储以及后续的分析工作变得困难,提出基于Hadoop的农产品价格爬取及存储系统。利用HttpC...
关键词：分布式系统 爬虫 HADOOP HDFS 正则表达式 
Co-Work:基于HDFS的安全云存储数据一致性保持算法被引量：4
《计算机工程与应用》2017年第1期9-15,共7页林穗 黄健 姜文超 
国家科技支撑计划课题(No.2015BAK19B03);广州市科技计划项目(No.2014XYD-007);教育部留学回国人员科研启动基金(No.14ZK0152)
针对云存储平台中用户隐私和敏感数据的安全保护问题,在前期提出的基于自主可控机制的安全云存储模型ASOM(All Self-Organization Model)基础上,对MDSS端元数据的管理操作、MDSS和DMS之间的通信过程做进一步优化,针对ASOM模型实际场景...
关键词：安全云存储 Hadoop分布式文件系统(HDFS) 一致性 
眼科医疗影像文件存取下的HDFS负载均衡被引量：1
《计算机工程与应用》2017年第2期253-259,264,共8页刘烁阳 周丽娟 任仲山 张树东 
国家科技支撑计划项目(No.2013BAH19F01)
在HDFS系统中,集群负载分配不均衡成为影响分布式文件存取速度的瓶颈。针对医院信息系统的负载现状,提出多属性双阈值决策的动态负载均衡算法,对分布式集群中使用HDFS默认的单属性评价、单阈值的负载均衡策略存在的缺陷加以改进。通过...
关键词：Hadoop分布式文件系统(HDFS) 分布式集群 负载均衡 眼科医疗 影像文件存取 
面向BIM数据的分布式文件存储系统设计与实施被引量：4
《土木建筑工程信息技术》2016年第5期40-44,共5页王宝会 高远 
国家科技支撑计划子课题"建筑行业设计服务共性技术集成平台研发与应用"(编号:2014BAH25F03-04)
国内的BIM相关技术在近几年发展迅速,随之高速增长的BIM数据对存储系统的高可用性、负载均衡、横向扩容等功能也提出了更高的要求。本文就BIM行业内某公司需求,设计并实施了以FastDFS为主HDFS为辅的分布式文件存储系统。该公司主要存储...
关键词：BIM数据 FastDFS HDFS 
基于Hadoop集群的公安交通信息云共享技术应用研究被引量：3
《中国公共安全（学术版）》2016年第1期65-69,共5页邵志骅 崔林山 卢梦奇 
国家科技支撑计划项目;项目名称"道路交通安全智能化管控关键技术及集成示范";项目编号:2014BAG01B00
设计并实现了公安交通信息云共享系统,集成应用了分布式计算框架Hadoop、分布式文件系统HDFS、HBase、二级索引、面向服务架构、数据标准化、元数据管理、请求访问服务、数据库检索等技术。建立了公安交通信息大数据存储共享平台,解决...
关键词：交通信息管理 Hadoop HDFS HBASE 信息共享 
基于HDFS和IMPALA的碰撞比对分析被引量：4
《电视技术》2015年第14期94-98,共5页王艳 潘晨光 
"十二五"国家科技支撑计划项目(2011BAK05B06;2011BAK05B05)
处理公共安全大数据需实现查询、全文检索、即时数据推送和内存计算等实时业务分析,而基于Hadoop生态系统建立的Hive不支持海量数据的实时查询,无法实现交互式查询和报表查询快速返回数据结果。针对Hive实时查询的不足,首次将Impala架...
关键词：公共安全 数据处理 HDFS MAPREDUCE Hive 
Hadoop中处理海量小文件的方法被引量：1
《计算机系统应用》2015年第11期157-161,共5页李旭 李长云 张清清 胡淑新 周玲芳 
2013年度科技部科技支撑计划(2013BAJ10B14-5)
针对Hadoop中提供底层存储的HDFS对处理海量小文件效率低下、严重影响性能的问题.设计了一种小文件合并、索引和提取方案,并与原始的HDFS以及HAR文件归档方案进行对比,通过一系列实验表明,本文的方案能有效减少Namenode内存占用,提高HDF...
关键词：HADOOP HDFS 小文件 HDFS的I/O性能 
基于Spark的海量图像检索系统设计被引量：5
《微型电脑应用》2015年第11期11-13,17,共4页王迅 冯瑞 
国家科技支撑计划(2013BAH09F01);上海市科委科技创新行动计划(14511106900)
随着互联网,多媒体技术快速发展,互联网上的图像数量飞速增长,如何快速、有效地在海量的图像数据中找到用户需要的图像成为研究的热点。传统的图像检索系统基于单节点的架构,在处理海量图像数据时存在速度慢、并行性差、内存不足等问题...
关键词：图像检索 海量数据 SPARK HDFS 
农业海量信息资源管理平台设计与实现被引量：7
《计算机应用与软件》2015年第3期75-78,104,共5页孙想 吴华瑞 李庆学 
国家科技支撑计划项目(2011BAD21B02);北京市自然科学基金项目(4122034)
随着农业信息化的深入,如何描述、存储、管理和处理海量分布信息资源成为农业应用的首要问题。提出基于XML/XML Schema的统一农业信息资源描述框架,将XML描述与元数据约束相结合,采用层次化管理结构实现元数据与资源信息的组织;在HDFS(H...
关键词：XML SCHEMA HDFS 资源描述框架 农业信息管理 
全选清除导出
共2页<12>
检索报告 对象比较 聚类工具 使用帮助 返回顶部