基于Hadoop的数据处理平台的设计与开发研究  

Design and Development of Data Processing Platform Based on Hadoop

作　　者：严亚宁[1] YAN Yaning(Xi’an Peihua University,Xi’an 710125,China)

机构地区：[1]西安培华学院,陕西西安710125

出　　处：《现代信息科技》2019年第3期5-7,共3页Modern Information Technology

基　　金：2018年西安培华学院校级科研课题资助项目:基于Hadoop的海量数据处理平台的设计与开发研究(项目编号:PHKT18094)

摘　　要：随着计算机和网络在人们工作和生活中的广泛普及,数据量急剧增加。目前,如何有效地收集和存储数据是当前需要解决的主要问题。在Hadoop技术的基础上,给出了海量数据处理平台的系统需求分析、系统架构设计和关键模块设计,并阐述了基于Hadoop技术的数据处理平台开发的要点,为相关研究人员提供了一些参考。With the wide spread of computers and networks in people's work and life,the amount of data has increased dramatically. At present,how to collect and store data effectively is the main problem to be solved. On the basis of Hadoop technology, the system requirement analysis,system architecture design and key module design of mass data processing platform are given,and the key points of data processing platform development based on Hadoop technology are expounded,which provides some references for relevant researchers.

关 键 词：数据处理平台 大数据 HADOOP 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论] TP391.3[自动化与计算机技术—计算机科学与技术]