基于MapReduce模型的并行处理优化策略  

作　　者：王鹏 刘鹏 刘佳祎 

机构地区：[1]广西师范大学网络信息中心,广西壮族自治区桂林市541000 [2]桂林理工大学现代教育技术中心,广西壮族自治区桂林市541000

出　　处：《电子技术与软件工程》2021年第1期201-203,共3页ELECTRONIC TECHNOLOGY & SOFTWARE ENGINEERING

基　　金：国家自然科学基金项目(61941201);广西自然科学基金项目(2018JJA170082)。

摘　　要：本文提出一种并行处理优化策略。结合并行MapReduce模型的工作运行机制来改变原始框架的处理性能,并运用MPI技术并行化执行Mapper和Reducer机制来实现。经过在Hadoop云计算平台进行模拟实验后结果证明,该算法既能加快文件传输速率又缩短了Reducer机制的等待时间,而且相比传统模式上有所突破,其通过降低存储耦合性来达到使计算传输效率得以提升的效果。

关 键 词：云存储 MAPREDUCE 并行处理 传输效率 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论] TP333[自动化与计算机技术—计算机科学与技术]