基于Hadoop的煤炭企业数据共享系统设计  

Design of Coal Enterprise Data Sharing System Based on Hadoop

作　　者：刘洋[1] 李筱楠[1] 刘会杰[1] 

机构地区：[1]石家庄铁路职业技术学院,石家庄050061

出　　处：《煤炭技术》2017年第6期326-328,共3页Coal Technology

基　　金：河北省高等院校科学技术研究项目(ZC2016137);河北省科技计划项目(15270330);河北省高等学校科学技术研究重点基金项目(ZD2016057)

摘　　要：针对煤炭企业数据处理能力的不足,将云计算技术应用到煤炭企业数据共享体系中,提出了一个利用Hadoop平台对煤炭企业数据进行高效共享的系统。首先,介绍了Hadoop平台及其关键技术;而后建立了应用于煤炭企业的数据共享模型,该模型抽取源数据并通过数据集成存储于数据仓库;最后结合煤炭企业实际需求,设计了数据管理平台,完成了数据集成、模型和并行关联算法的设计。Aiming at the deficiency of data processing ability in coal enterprises, the cloud computing technology is applied to the data sharing system of coal enterprises, and a system of efficient sharing of coal enterprise data using Hadoop platform is put forward. Firstly, the Hadoop platform and its key technologies are introduced. Then, the data sharing model applied to coal enterprises is established, the model is used to extract the source data and store it in the data warehouse. Finally, the data management platform is designed according to the actual needs of the coal enterprises, the design of data integration, model and parallel association algorithm is completed.

关 键 词：煤炭企业 云计算 HADOOP 数据共享 并行计算 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论] F270[自动化与计算机技术—计算机科学与技术]