HDFS

作品数:573被引量:2069H指数:20
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:林文辉伍卫国魏伟刘晓洁何连跃更多>>
相关机构:北京邮电大学电子科技大学华南理工大学南京邮电大学更多>>
相关期刊:更多>>
相关基金:国家自然科学基金国家科技支撑计划国家高技术研究发展计划中央高校基本科研业务费专项资金更多>>
-

检索结果分析

结果分析中...
选择条件:
  • 期刊=信息技术与信息化x
条 记 录,以下是1-8
视图:
排序:
分布式文件系统在脉冲星数据处理中的应用
《信息技术与信息化》2023年第3期70-73,共4页刘懿德 于徐红 刘志杰 
随着500 m口径球面射电望远镜(fi ve hundred meters aperture spherical telescope,FAST)巡天扫描的数据量不断增加,现有分布式计算集群所采用的文件存储系统逐渐成为限制计算速度的瓶颈之一。通过对计算集群架构的分析,将脉冲星数据...
关键词:脉冲星数据处理 分布式文件系统 Alluxio HDFS 
信息数据存储平台开发被引量:1
《信息技术与信息化》2022年第7期115-117,121,共4页许文芝 
江苏省教育科学“十三五”规划2020年度课题《基于SPOC课程的混合式教学模式在高校时代新人培育中的应用研究》,课题编号为C-c/2020/01/06;江苏省教育科学研究院现代教育技术研究所2017年度重点课题《信息传播视角下高校慕课(MOOCs)的建设与共享机制研究》,课题编号为2017-R-55067;2020年江苏高等教育学会“大学素质教育与数字化课程建设”专项课题《计算机类在线实践金课的建设与应用研究》,课题编号为2020JDKT073。
面对社会企事业单位、网络业务场景中大量的数据信息资源,传统以DFS为主的文件系统,由于其本身的物理存储资源,不一定直接连接于本地节点,且不能进行海量数据信息的分块切分与存储,围绕近年来网络数据存在的海量化、类别丰富化、并行计...
关键词:Hadoop分布式平台 HDFS存储结构 信息技术 开发 
基于Hadoop的校园云盘信息管理系统设计被引量:1
《信息技术与信息化》2021年第8期61-63,共3页刘晓莉 彭平 左文涛 汪邦博 刘丝雨 
广州工商学院大学生创新创业训练计划资助项目(项目编号:xj202113714082)。
校园云盘信息管理系统采用HDFS、HBase作为文件存储系统,高可用框架的MySgl数据库保存文件元数据,保证元数据安全,通过HDFS和MySQL数据库的配合实现大数据的分布式存储,以及对文件系统元数据的快速读写。上线部署后通过校园网可以为广...
关键词:HADOOP HDFS 校园云盘 管理信息系统 
基于Flume、Kafka、HDFS的多源数据采集系统被引量:8
《信息技术与信息化》2021年第6期115-117,共3页蒋亮 唐紫珺 
针对大数据采集工作面临的数据来源多样性、异构性、不稳定性等复杂问题,提出一种基于Flume、Kafka、HDFS等大数据组件设计的一个稳定可靠地分布式数据采集系统来完成多源异构数据的采集工作。使用Flume提供的source组件以及支持自定义s...
关键词:FLUME Kafka HDFS 分布式 数据采集 
基于FTP+HDFS的单片机多媒体数据的存储研究与实现
《信息技术与信息化》2019年第11期231-235,共5页刘跃博 叶桦 仰燕兰 陈旭璇 
在互联网快速发展的背景下,传统企业的产业互联网化已经成了不可避免的趋势。本文在为某公司开发软件系统的课题背景下,研究单片机产生的大量多媒体数据如何进行存储并使该文件服务器满足后续文件处理等可扩展性需求。为实现这一目的,...
关键词:FTP HDFS 单片机 文件迁移 JAVA分布式 
Hadoop核心技术及实例分析被引量:3
《信息技术与信息化》2019年第10期85-86,共2页梅俊 
安徽高校自然科学研究项目资助,编号:KJ2018A01
本文通过介绍Hadoop框架主要核心技术HDFS和Map Reduce,通过实例分析两大技术的运行过程及原理。使读者理解整个框架,了解Hadoop的优点及不足,并在此基础上做更深层次的算法研究。
关键词:HADOOP HDFS MAPREDUCE 
基于HDFS的跨集群分布式文件系统研究被引量:5
《信息技术与信息化》2019年第8期229-230,共2页王大志 
本文尝试构建一种基于HDFS的跨集群分布式文件系统,分别在小文件存储和负载均衡两个方面进行改进,提升HDFS分布式集群存储小文件的效率,降低NameNode元数据存储压力。
关键词:云存储 跨集群 HDFS 分布式系统 
分布式计算框架的研究被引量:6
《信息技术与信息化》2015年第10期199-200,共2页王利卿 张华敏 
大数据时代的到来,需要对大量数据进行离线和实时分析,现在这种线上和线下共用数据源的大数据框架已经成为一种研究热点。本文介绍的就是把离线和实时的数据源作为同一个数据源,然后控制数据分别进入离线和实时的系统。文中分别介绍了这...
关键词:FLUME Kafka STORM HDFS 分布式计算 
检索报告 对象比较 聚类工具 使用帮助 返回顶部