基于Hadoop的交通物流数据仓库构建技术研究  

作　　者：赵继新[1] 

机构地区：[1]广西交通职业技术学院管理系

出　　处：《西部交通科技》2019年第10期162-165,共4页Western China Communications Science & Technology

摘　　要：随着社会经济的高速发展,交通物流行业对交通数据存储、管理和分析的要求越来越高。文章在对比Hadoop与MPP等技术的基础上,基于对MapReduce并行计算、HDFS分布式文件系统、数仓工具Hive和Sqoop采集组件等架构的分析,研究了Hadoop交通物流数据仓库的构建技术,建设了交通物流数据仓库,实现了海量交通物流数据文件的元数据管理、分布式存储和交通物流数据查询。经测试验证:利用交通物流数据仓库进行大型交通物流数据文件的存储和操作时,能有效提高数据吞吐率及其读写效率。

关 键 词：交通物流数据 数据仓库 HADOOP 

分 类 号：U492.3[交通运输工程—交通运输规划与管理]