基于以太网机群的海量高光谱数据处理系统平台设计  

Platform design for massive hyperspectral data processing based on internet cluster

作　　者：王彩玲[1,2] 胡柄樑[2] 王洪伟[3] 刘学斌[2] 陈小来[2] 李普[1] 

机构地区：[1]西安石油大学计算机学院,陕西西安710065 [2]中国科学院西安光学精密机械研究所,陕西西安710119 [3]武警工程大学,陕西西安710086

出　　处：《应用光学》2013年第4期604-608,共5页Journal of Applied Optics

基　　金：国家973项目(2009CB724005)资助

摘　　要：在一些大型图像处理系统中,通过构建服务器机群网络,可实现多台服务器并行处理图像数据流。针对高光谱遥感数据及处理算法特点,设计了基于以太网的服务器机群海量高光谱数据处理系统平台,平台由7台服务器和1台千兆网交换机构组成,其中选择CPU核数不低于8核的4台HP刀片服务器作为并行处理服务器,在服务器机群软件设计中,通过任务分解、算法流水化处理及网络负载均衡等方法来实现并行处理。该系统已应用在某遥感数据处理系统中,多台服务器同时写入SAN盘阵,可实现6 000Mbps的写入能力。In some large-scale image processing systems,multiple servers can achieve parallel processing image data stream to complete the complex data operations by building server cluster network.An Ethernet-based server cluster for huge hyperspectral image processing system was designed based on image characteristics.In order to achieve parallel processing,the task decomposition,algorithm pipelined processing and network load balancing were used in software design.The system is used in a hyperspectral image data processing system and the date rate can achieve 6 000 Mbps.

关 键 词：以太网机群 并行计算 任务分解 高光谱数据处理 

分 类 号：TN202[电子电信—物理电子学] TP393.11[自动化与计算机技术—计算机应用技术]