随着企业数字化转型加速，IT系统规模不断扩大，日志数据呈爆炸式增长。传统日志管理方式存在以下痛点：
- 配置分散 ：日志采集配置分散在多台服务器上，维护困难
- 监控缺失 ：缺乏统一的日志流量监控和异常预警机制
- 分析困难 ：日志数据量大，难以快速定位问题根源
- 运维低效 ：人工配置易出错，故障响应时间长
本系统旨在解决企业日志管理的核心痛点，提供统一的日志采集配置管理平台，实现日志流量实时监控、智能告警和多维分析。
适用行业 ：金融、电信、互联网、政府等对系统稳定性要求高的行业
业务背景 ：
- 金融行业 ：交易系统日志实时监控，保障交易安全
- 电信行业 ：网络设备日志采集分析，快速定位网络故障
- 互联网行业 ：分布式系统日志聚合，支持微服务架构
- 政府机构 ：政务系统审计日志管理，满足合规要求
典型应用场景包括：
- 应用运维人员实时监控日志流量，快速发现异常
- 开发人员通过路径分析定位代码问题
- 安全人员通过审计日志追溯操作行为
- 运维人员批量管理日志采集配置
### 主要功能描述
日志监控大屏 ：
- 钢琴键式流量可视化，直观展示日志量变化
- 按应用或资源类型分组展示
- 日志级别颜色标识（ERROR以上红色/WARN橙色/INFO以下绿色）
- 支持快捷时间范围选择（5/10/30/60分钟）和自定义时间范围
- 自动刷新机制，实时获取最新数据
路径分析 ：
- 基于 @antv/g6 的图形化拓扑展示
- 节点表示应用/组件，边表示调用关系
- 支持节点点击展开详情
- 流量数据实时更新
告警管理 ：
- 灵活的告警规则配置（阈值、级别、触发条件）
- 实时告警推送与浏览
- 告警状态管理（待处理、已处理、已忽略）
- 告警历史查询与统计
配置管理 ：
- 三层架构管理：应用 → 监控点 → 组件
- 支持批量配置下发
- 配置版本管理与回滚
- Agent心跳监控，实时掌握采集状态
作为项目开发人员，主要负责以下任务：
前端开发 ：
- 日志监控大屏 Dashboard 页面开发（实时流量可视化）
- 路径图 PathGraph 页面（G6 图形化展示）
- 元数据分析与维度分析页面
- 告警中心与规则配置页面
- 公共组件封装（Toast、ConfirmDialog）
后端开发 ：
- 应用、监控点、组件的 CRUD API
- 钢琴键数据聚合接口（支持多维度分组）
- 告警规则引擎与检测任务
- Agent 配置下发与心跳接口
- 数据库模型设计与优化
系统集成 ：
- 前端与后端 API 对接
- MySQL 与 ClickHouse 数据同步
- 定时任务调度（健康检查、告警检测）
- Docker 容器化部署配置
技术栈 ：
- 前端 ：Vue 3 + Vue Router + Bootstrap 5 + ECharts + @antv/g6
- 后端 ：FastAPI + SQLAlchemy + MySQL + ClickHouse
- 部署 ：Docker + Docker Compose
架构设计 ：
- 前后端分离 ：前端静态资源独立部署，后端提供 RESTful API
- 三层数据模型 ：应用 → 监控点 → 组件 → 机器配置的层级结构
- 双数据库架构 ：MySQL 存储配置数据，ClickHouse 存储日志指标
- 异步任务 ：使用后台任务处理健康检查和告警检测
实现亮点 ：
- 钢琴键算法 ：智能计算时间颗粒度，保证约60个格子的可视化效果
- 实时刷新 ：10秒自动刷新机制，支持手动刷新
- 多级告警 ：支持 PANIC/FATAL/ALERT/CRITICAL/ERROR/WARN 等多级告警
- 健康检查 ：自动检测 MySQL 和 ClickHouse 连接状态
- 异常处理 ：完善的全局异常处理
评论