网格环境日志分析框架LARGE的设计  

The Design of LARGE: Log Analyzing Framework in Grid Environment

作　　者：赵一宁[1] 肖海力[1] Zhao Yining Xiao Haili(Computer Network Information Center, Chinese Academy of Sciences, Beijing 100190, China)

机构地区：[1]中国科学院计算机网络信息中心,北京100190

出　　处：《科研信息化技术与应用》2016年第3期3-7,共5页E-science Technology & Application

基　　金：国家高技术研究发展计划(863计划)(2014AA01A302);中国科学院计算机网络信息中心青年基金项目(CNIC_QN_1510)

摘　　要：本文介绍了网格环境日志分析框架(LARGE)的结构设计和工作原理。LARGE将整个日志分析流程分为采集、分析、反馈三个模块,并针对环境中系统日志和SCE日志这两种不同的日志类型提出了针对性的处理方法。LARGE系统部署在中科院超级计算环境中,对维护系统正常运行、及时发现并处理异常起到重要的支撑作用,同时对系统和用户行为的进一步分析提供了很好的基础。In this paper the issues of architectural design and work procedure of the Log Analyzing framework in Grid Environment （LARGE） is introduced. In LARGE the workflow of log processing is divided into three modules of collecting, analyzing and feedback, and various methods of processing are proposed for logs in different styles. The system of LARGE is deployed in the ScGrid of Chinese Academy of Sciences, providing functionalities of maintaining the grid enyironment and detecting faults, and producing the foundation work for any system and user behavior analyzing.

关 键 词：日志处理 大数据分析 网格环境 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论]