作者:严彬元; 王皓然; 周琳妍流式分析智能运维日志采集日志分析
摘要:随着信息化技术的发展,贵州电网公司完成资产管理、营销管理、人力资源管理、财务管理、协同办公、综合管理六个企业级应用系统的建设,在南网的信息化规划中,系统应使用统一的认证、权限、组织、审计,那么如何对日志进行统一的采集整理分析显得尤为重要。本文主要介绍了基于流式分析的日志大数据收集分析平台,该大数据平台采用Flume架构进行日志采集,Kalfka消息中间件来作为缓冲,Apache的Storm作为流式计算架构,Hadoop的Hdfs进行分布式文件存储,通过Hive进行离线分析查询,很好的解决了不同设备不同系统在运维日志采集分析中遇到的问题。
注:因版权方要求,不能公开全文,如需全文,请咨询杂志社