分布式ETL负载均衡策略研究  

Research on Strategy of Load Balancing in Distributed ETL

作　　者：张亮[1] 夏秀峰[2] 

机构地区：[1]沈阳药科大学高职学院,辽宁沈阳110026 [2]沈阳航空航天大学计算机学院,辽宁沈阳110136

出　　处：《计算机与现代化》2011年第9期201-204,共4页Computer and Modernization

基　　金：辽宁省自然科学基金资助项目(20052007)

摘　　要：在分析分布式ETL中负载均衡重要性的基础上,针对传统ETL应用于分布式数据仓库中效率低的缺陷,提出一种根据ETL节点所抽取的数据类型不同对分布式ETL节点抽取的数据进行分割的策略,以及一种新的负载均衡模型—链网模型和Routers相结合的R-CN模型。在此基础上提出一种基于ETL数据分片和R-CN模型相结合的分布式ETL节点负载调度和均衡策略。此策略使ETL节点的数据处理能力有了很大的提高,有效地提高了分布式ETL的效率。After analyzing the importance of load balancing in distributed ETL,aiming at the limitation of traditional ETL used in distributed data warehouse,a new strategy that the data extracted from ETL node are divided according to the type of data is proposed,and then presents a new model of load balancing R-CN model that is combined by chain network model and Routers.On the basis of that presents a new load balancing strategy based on the data segment strategy and R-CN model.The strategy improves the ability of data processing greatly,and it also effectively increases the efficiency of distributed ETL.

关 键 词：分布式数据仓库 ETL 数据分割 负载均衡 

分 类 号：TP311[自动化与计算机技术—计算机软件与理论]