基于Hadoop的离线电商数据分析系统的设计与实现  

Design and implementation of offline e⁃commerce data analysis system based on Hadoop

作　　者：潘杰恒 蔡群英 Pan Jieheng;Cai Qunying(College of Computer and Information Engineering,Hanshan Normal University,Chaozhou 521041,China)

机构地区：[1]韩山师范学院计算机与信息工程学院,潮州521041

出　　处：《现代计算机》2024年第3期112-116,共5页Modern Computer

摘　　要：随着互联网的普及和人们不断增长的消费需求,电子商务平台已成为人们生活不可或缺的一部分,由此产生大量数据。基于Hadoop,设计并实现一个离线电商数据分析系统,从系统架构、数据采集、传输、存储、分析处理和可视化等方面作了介绍,系统具有一定的数据分析能力,能将原本无用的数据进行整理利用,发挥数据本身的价值。With the popularization of the Internet and the growing consumer demand of the people,e-commerce platforms have become an indispensable part of people,generating a large amount of data.Based on Hadoop,design and implement an offline e-commerce data analysis system.This article introduces the system architecture,data collection,transmission,storage,analysis and processing,and visualization.The system has certain data analysis capabilities and can organize and utilize previously useless data,leveraging the value of the data itself.

关 键 词：电商 离线 分析系统 大数据 HADOOP Hive FLUME Kafka 

分 类 号：F713.36[经济管理—产业经济] TP311.13[自动化与计算机技术—计算机软件与理论]