ELK业务日志分析

我要开发同款
运维linux2022年02月09日
236阅读

作品详情

项目描述:优化业务故障定位问题。针对日志集中化管理。搭建ELK集群对于日志规范化。 个人职责:日志分析系统负责人,负责服务器的选型以及ELK集群架构的设计以及搭建优化项目过程:该项目存储以及cpu选型,针对存储就是日志的存放,数据分为冷热数据,热数据即7天内或者半个月内的数据将其放在ssd中,保证访问数据访问的速度,针对冷数据将其放入sata盘中。既保证了热数据的流畅访问又保障了冷数据的存储;集群架构做了多节点的elasticsearch以及logstash节点;防止数据的丢失,添加中间件使用zookeeper+kafka的集群做一个日志缓存存储,这样既减少了logstash对于大量日志访问的io以及保障了日志数据的完整性。针对该集群单节点宕机的情况以及单kafka节点宕机情况的容灾测试。
查看全文
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论