大数据Hadoop技术完全分布式集群部署  

Fully Distributed Cluster Building Based on Hadoop Framework Mode

作　　者：周少珂 王雷 崔琳 郭璇 万小舟 

机构地区：[1]河南应用技术职业学院信息工程学院,河南郑州450042

出　　处：《工业控制计算机》2021年第8期101-103,共3页Industrial Control Computer

基　　金：2019年河南省高等教育教学改革研究与实践项目“基于类型教育的“四跨界四融合”人才培养模式的探索与实践”(2019SJGLX677);河南省科技厅科技攻关项目(212102210430);河南省教育厅教育科学、就业创业类研究项目(2020YB0499);校级科研项目(2019B-KJ-17);河南应用技术职业学院2018校级教学改革立项建设青年项目《智慧教室环境下的教学方式研究》。

摘　　要：物联网和云计算技术发展,促进了大数据时代到来,大数据技术经过十几年的发展逐步走向稳定、成熟。基于Hadoop框架模式下对3台主机,每台同样的6个核心文档进行详细配置,最终构建成一个小型的分布式集群,通过集群测试,能够正常工作并提供服务。Hadoop完全分布式集群的成功搭建为大数据工程研究提供了基础环境,为大数据下一步深层次理论研究提供技术依托。The development of the Internet of Things and cloud computing technology has promoted the arrival of the era of big data.After more than a decade of development,big data technology has gradually become stable and mature.In this paper,based on the Hadoop framework mode,three hosts,each of the same six core documents are configured in detail,and finally built into a small distributed cluster,which can work normally and provide services through cluster testing.The successful construction of Hadoop's fully distributed cluster provides a basic environment for big data engineering research,and provides technical support for the next deep theoretical research of big data.

关 键 词：大数据 集群 Hadoop 分布式计算 HDFS MapReduce 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论]