应用光学, 2013, 34 (4): 604, 网络出版: 2013-10-23  

基于以太网机群的海量高光谱数据处理系统平台设计

Platform design for massive hyperspectral data processing based on internet cluster
作者单位
1 西安石油大学 计算机学院,陕西 西安 710065
2 中国科学院 西安光学精密机械研究所,陕西 西安 710119
3 武警工程大学,陕西 西安 710086
摘要
在一些大型图像处理系统中,通过构建服务器机群网络,可实现多台服务器并行处理图像数据流。针对高光谱遥感数据及处理算法特点,设计了基于以太网的服务器机群海量高光谱数据处理系统平台,平台由7台服务器和1台千兆网交换机构组成,其中选择CPU核数不低于8核的4台HP刀片服务器作为并行处理服务器,在服务器机群软件设计中,通过任务分解、算法流水化处理及网络负载均衡等方法来实现并行处理。该系统已应用在某遥感数据处理系统中,多台服务器同时写入SAN盘阵,可实现6 000 Mbps的写入能力。
Abstract
In some large-scale image processing systems, multiple servers can achieve parallel processing image data stream to complete the complex data operations by building server cluster network. An Ethernet-based server cluster for huge hyperspectral image processing system was designed based on image characteristics. In order to achieve parallel processing, the task decomposition, algorithm pipelined processing and network load balancing were used in software design. The system is used in a hyperspectral image data processing system and the date rate can achieve 6 000 Mbps.

王彩玲, 胡柄樑, 王洪伟, 刘学斌, 陈小来, 李普. 基于以太网机群的海量高光谱数据处理系统平台设计[J]. 应用光学, 2013, 34(4): 604. WANG Cai-ling, HU Bing-liang, WANG Hong-wei, LIU Xue-bin, CHEN Xiao-lai, LI Pu. Platform design for massive hyperspectral data processing based on internet cluster[J]. Journal of Applied Optics, 2013, 34(4): 604.

关于本站 Cookie 的使用提示

中国光学期刊网使用基于 cookie 的技术来更好地为您提供各项服务,点击此处了解我们的隐私策略。 如您需继续使用本网站,请您授权我们使用本地 cookie 来保存部分信息。
全站搜索
您最值得信赖的光电行业旗舰网络服务平台!