云南高校图书馆联盟文献共享服务平台- HDFS

HDFS: 作品数：569被引量：2062H指数：20; 导出分析报告; 相关领域：自动化与计算机技术更多>>; 相关作者：林文辉伍卫国魏伟刘晓洁何连跃更多>>; 相关机构：北京邮电大学电子科技大学华南理工大学南京邮电大学更多>>; 相关期刊：更多>>; 相关基金：国家自然科学基金国家科技支撑计划国家高技术研究发展计划中央高校基本科研业务费专项资金更多>>

新形势下企业办公自动化管理系统开发与实现: 《信息记录材料》2025年第3期49-51,共3页吴会江郭志辉郭朝辉盛娜杨晓芳; 随着信息技术的飞速发展,企业办公自动化(office automation,OA)管理面临新的挑战,亟需提升管理质量以保持竞争力。本文详细探讨新形势下企业OA管理的质量提升策略,重点分析Hadoop分布式文件系统(hadoop distributed file system,HDFS)...; 关键词：企业办公自动化 HDFS数据存储智能文档

农业网络云储存信息非对称加密方法研究: 《农机化研究》2024年第11期224-228,共5页李永娜; 河南省高等教育教学改革研究项目([2021]449号)。; 针对目前农业信息的管理共享性差且采用网络云储存时存在安全隐患的问题,对农业网络云储存信息系统进行了设计,并对云储存的非对称加密方法进行研究。为了保证农业网络云储存信息系统的安全性,采用非对称加密算法中的RSA算法对数据进行...; 关键词：农业网络云储存非对称加密方法 RSA算法 HDFS体系结构密钥

基于云计算的蛋白质折叠空间结构预测: 《电子技术应用》2024年第8期10-16,共7页徐胜超杨波王宏杰毛明扬蒋金陵蒋大锐; 广东省普通高校青年创新人才项目(2023KQNCX120)。; 构建基于云计算的蛋白质折叠空间结构预测框架,通过数据云存储设备获取蛋白质序列原始数据,采用HDFS(Hadoop Distributed File System)分布式存储方式保存于云端。资源和队列管理器RQM(Resource Queue Man‐agement)开启云端虚拟机后,...; 关键词：云计算蛋白质折叠空间结构预测 HDFS分布式存储局部搜索机制量子遗传算法

基于Table Format技术的离线数仓分钟级数据CRUD解决方案: 《冶金自动化》2024年第S01期483-486,共4页朱森; 基于传统Hadoop技术构建的大数据离线数仓,无法高效地在大型数据集上进行数据更新、删除等操作。近些年兴起的Table Format技术,可以在HDFS存储上实现文件级别的数据更新。本文主要介绍一种通过引入Table Format技术,实现离线数仓分钟...; 关键词：大数据 HDFS 离线数仓 Table Format CRUD

基于云平台的企业远程办公文件分布式存储方法被引量：1: 《自动化技术与应用》2024年第3期112-115,共4页张脉琪; 为提高数据的读写性能,设计基于云平台的企业远程办公文件分布式存储方法。总体架构由计算层、数据接入层、存储层、数据聚集层构成。存储层由Hadoop集群构成,各集群由NameNode管理;计算层与数据接入层可以实现数据的持久化存储;数据聚...; 关键词：云平台企业远程办公 HDFS文件文件分布式存储数据聚集

一种基于HDFS的分布式文件系统MPIFS被引量：4: 《黑龙江工程学院学报》2024年第1期9-14,共6页陈卓航陈雅琴郭志勇; 中央高校基本科研业务费专项资金项目(2023NYXXS036)。; 传统的MPI(Message Passing Interface)计算特点是数据向计算迁移,对于数据量庞大的计算任务具有先天的不足。文中提出一种支持MPI的分布式文件系统MPIFS的架构及实现。该文件系统基于HDFS(Hadoop Distributed File System),使得MPI在MP...; 关键词：MPI 分布式文件系统分布式并行计算计算迁移

基于Spark的智能菜品推荐系统设计与实现被引量：4: 《软件工程》2024年第2期69-73,共5页周杨玥李世锋李林; 河南省科技攻关项目“MOOC的大数据学习行为与成效分析技术研究”(222102320218);黄河交通学院2023年度校级教育教学改革研究项目(HHJTXY-2023jgyb20);黄河交通学院校级课程教学资源库建设项目“数据清洗与融合”(HHJTXY-2022kczyk101)。; 为解决人们“每天不知道吃什么”的烦恼,采用Spark分布式处理框架,结合分布式存储数据库(MongoDB)、日志收集系统(Flume)、分布式系统文件(HDFS)等工具,实现对菜品实时评分及特色化推荐。系统包含菜品评分及储存模块、评分数据处理模块...; 关键词：菜品推荐 SPARK 协同过滤算法 HDFS

基于HDFS分布式云存储系统的重复数据检测与删除研究: 《电脑编程技巧与维护》2024年第1期92-95,共4页王储; 传统最远点采样(FPS)算法、数据类型分析(WFC)算法的去重冗余度高,在同一数据集分块、去重检测中的数据重复率达到70~90%。基于这一实际情况,提出基于Hadoop分布式软件框架、分布式文件系统(HDFS)等云服务技术,建构用于复杂数据结构分...; 关键词：HDFS-SDBS 分布式云存储系统重复数据检测删除

Performance Improvement through Novel Adaptive Node and Container Aware Scheduler with Resource Availability Control in Hadoop YARN: 《Computer Systems Science & Engineering》2023年第12期3083-3108,共26页J.S.Manjaly T.Subbulakshmi; The default scheduler of Apache Hadoop demonstrates operational inefficiencies when connecting external sources and processing transformation jobs.This paper has proposed a novel scheduler for enhancement of the perfo...; 关键词：Big data HADOOP YARN hadoop distributed file system(HDFS) MapReduce scheduling fair scheduler

存算分离架构下S3存储和HDFS存储读写性能对比研究被引量：1: 《现代计算机》2023年第21期24-29,共6页杨慧程雪平; 广州华商学院2022年青年学术科研项目(2022HSXS086)。; 在存算分离架构下,存储和计算可以分别进行优化和扩展,从而实现更高效、更可靠、更可扩展的大数据处理。存储层作为存算分离架构的重要组成部分,不仅需要具备高可靠性、高可扩展性、高性能等特点,还需要考虑成本和易用性等因素。目前,S...; 关键词：存储分离 HDFS S3 Hive 数据仓库数据湖

HDFS