项目描述:将线上所有正式运行的airflow及server(ES,ClickHouse等)服务进行监控
项目职责:负责该项目中架构及前后端代码编写,前端采用table表格及部分功能性开关,通过shell脚本定时检测服务运行状态,发送给Django后端保存运行状态;
airflow监控部分则是通过爬虫方法实时获取airflow运行状态,并爬取出失败的Dag及最后一次运行失败的task及时间,交由前端展示。
技术栈:airflow,Redis,Agent,HTML,Shell
点击空白处退出提示
评论