作者:王巍大数据智能运维kafkasparkelasticsearch
摘要:在运营商某融合通信系统中,传统的Hadoop海量文件批处理速度慢,数据库面对海量数据存储及全文检索能力弱,无法应对日常运维需要。处理海量业务日志且提升实时性,技术选型flume+Kafka+Spark+ElasticSearch,改造为流式计算大数据技术架构。文章结合业务诉求,基于领域模型全新设计,DashBoard分层递进,渐进明细地实时发现故障-初步分析-根因分析-定界定位,大幅提升系统运维运营能力和时效性的同时,还降低了人力成本。
注:因版权方要求,不能公开全文,如需全文,请咨询杂志社