HADOOP集群

作品数:120被引量:377H指数:9
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:吴楠郭美思郑晓薇施化吉施磊磊更多>>
相关机构:辽宁师范大学浪潮〈北京〉电子信息产业有限公司南京邮电大学西安电子科技大学更多>>
相关期刊:更多>>
相关基金:国家自然科学基金国家高技术研究发展计划国家科技支撑计划河南省科技攻关计划更多>>
-

检索结果分析

结果分析中...
条 记 录,以下是1-10
视图:
排序:
高职教育中Hadoop大数据的课程设计与实践研究
《进展》2024年第23期116-118,共3页李巧巧 
Hadoop是人工智能技术应用的专业拓展课程,在人工智能专业知识体系建设当中占有重要地位,课程专业性强,对专业学科依赖度高,实践难度大。文章以湖南交通职业技术学院为例,基于学生的特点与专业培养目标,采用“案例教学+项目驱动+课堂互...
关键词:高职教育 人工智能 HADOOP集群 课程实践 
云计算环境下Hadoop集群性能优化的实证研究
《中国信息化》2024年第12期82-83,共2页甘博 
一、引言Hadoop作为一种开源分布式计算框架,凭借其良好的可扩展性、容错性和高效性,成为大数据处理领域的关键技术。然而,在云计算环境下,由于虚拟化、资源异构性等因素的影响,Hadoop集群的性能优化面临诸多挑战。因此,如何在云计算环...
关键词:大数据处理 云计算环境下 虚拟化 异构性 可扩展性 性能优化 容错性 分布式计算框架 
基于改进Noekeon算法的数据混合加密方案设计
《电子设计工程》2024年第21期23-27,共5页李媛媛 
张家口市社会科学立项研究课题(2021016)。
针对传统医疗数据信息加密算法存在的安全性差、运行效率低以及缺乏系统性的缺点,文中基于改进Noekeon算法提出了一种医疗数据混合加密方案。该方案对于原Noekeon算法密钥长度短且需要耗费大量算力的问题,把改进Logistic混沌序列和切比...
关键词:数据加密 混沌序列 对称式加密 HADOOP集群 并行运算 安全防护 
异构Hadoop集群中基于节点特性的负载平衡方法被引量:1
《计算机仿真》2024年第9期475-479,共5页宋吉飞 张学宾 
为了解决异构Hadoop集群中每个结点的负载平衡问题,提出了一种基于节点特征的负载均衡方法。方法首先分析决定节点性能的主要指标,然后根据这些指标的贡献,定义了对应的目标函数来描述节点性能;同时将节点性能与节点忙闲状态相结合来计...
关键词:异构 结点特征 负载均衡 数据存储 
海量数据背景下实践教学平台研究被引量:1
《大数据时代》2024年第6期41-45,共5页刘胜楠 
人工智能与大数据实践教学平台中的教学案例数据,正在向海量数据的趋势快速发展,这对原平台架构发起了巨大的挑战。文章提出一种在学习者使用的Docker镜像中植入案例数据辅助服务的方式,一方面,该方式能够与存储海量数据的Hadoop集群进...
关键词:实践教学平台 大数据平台 Docker镜像 HADOOP集群 
大数据Hadoop集群下Sqoop数据传输技术研究被引量:2
《河南科技》2024年第6期25-28,共4页周少珂 郭璇 张振平 付媛冰 
河南省科技厅科技攻关项目“基于边缘计算的车联网协同规划关键技术研究”(222102240010);河南省教育厅教育科学、就业创业类研究项目“基于1+X证书制度的云计算技术实施路径研究”(2021YB0560);河南省大中专院校就业创业课题“大数据技术推进就业供需精准智能匹配研究”(JYB2023223);河南应用技术职业学院青年骨干教师(2023-GGJS-X002)。
【目的】Hadoop系统是大数据分布式集群系统,其开源的生态圈中有众多功能组件,通过在大数据Hadoop集群系统上部署Sqoop组件,将本地关系型Mysql数据库中的数据和Hive数据仓库中存储的数据进行快速导入导出,进一步研究数据传输性能。【方...
关键词:大数据 HADOOP 分布式集群 Sqoop 
基于Hadoop和MapReduce实现词频的统计与排序
《电脑编程技巧与维护》2024年第2期15-17,共3页孔瑞平 
天津市高等职业技术教育研究会2022年度课题:立德树人视域下程序设计类课程思政元素的探索与实践(项目编号为2022-H-059);天津工业职业学院2022年度科研计划项目:立德树人视域下程序设计类课程思政元素的挖掘与实践探索(项目编号为202207)。
在大数据背景下,词频统计是被频繁提及的一个需求。一个词在文档中出现的频率越高就越重要,通过对每个词出现频率的统计而得出质的评价,从而为用户提供大量相关行业的数据信息,最终助力用户简便、快速地找到所需信息,为其做出精确、明...
关键词:HADOOP集群 MapReduce计算框架 词频统计与排序 
基于Docker技术的Hadoop集群实验环境设计与实现
《信息与电脑》2023年第19期38-42,131,共6页许新刚 吕国庆 王梦婷 
江苏省教育科学“十四五”规划立项课题“基于大数据的高职学生心理危机预警研究”(项目编号:D202103129);国家自然科学基金面上项目“矿井电性源电磁法多参数动态监测机理及联合反演”(项目编号:41974128)。
针对大数据教学实训环境存在成本高、维护难的问题,提出基于Docker技术在个人计算机上搭建Hadoop集群实验环境的方案。该方案在不改动计算机原有软件环境的情况下,在Windows操作系统中创建一台虚拟机,并在该台虚拟机内创建3个Docker容...
关键词:Docker容器 大数据技术 HADOOP集群 分布式环境 
一种基于容器的快速部署Hadoop集群的方法
《科学与信息化》2023年第17期44-46,共3页王逸嘉 
Hadoop集群已经发展成为大数据领域的通用基础设施,更多的场景需要简单快速地部署Hadoop集群。由于步骤多、时间长、组件间的兼容性,Hadoop集群的部署面临困难。本文使用容器技术对Hadoop环境进行镜像,并使用Linux脚本将Hadoop集群部署...
关键词:HADOOP 容器技术 LINUX 自动化部署 DOCKER 
基于大数据分析的温室管控系统优化研究被引量:2
《农机化研究》2023年第7期214-218,共5页胡海锋 
福建省教育厅科技项目(JAT191931)。
传统的温室环境参数获取主要依靠各类传感器进行数据采集,采集精度较高,但由于缺乏数据分析,环境参数获取后只能依靠经验对农用设备进行调控,控制效果差,无法保证农作物生长处于最优状态,影响农作物生长质量和产量。为解决上述问题,利...
关键词:大数据分析 智能管控 HADOOP集群 优化 温室 
检索报告 对象比较 聚类工具 使用帮助 返回顶部