目前企业各专业管理系统非常繁多目录臃肿,部分系统老旧没有及时更新迭代使用经常出问题导致给后台管理人员造成巨大统计工作压力,为了减轻后台压力特开发此系统获取所有专业后台系统的各项指标数据汇总到一起在进行统计分析生成可视化图标以便于管理员做数据分析报告
1、系统后台实现了管理系统用户管理和获取数据步骤参数的定义(httpclient实现爬虫,数据解析jsoup解析html和xml格式数据)
2、数据爬取解析后转换成json将数据缓存在mongdb中
3、通过定时任务系统(quartz)每一天将mongdb中的数据统计计算生成业务需要的指标参数使用echarts进行可视化渲染
4、系统前台使用bootstarp框架进行搭建
工作职责
需求获取和需求基线定义
系统概要设计和详细设计(实体建模,爬取数据步骤定义)
系统编码(gitlab版本控制,maven构建工具)
点击空白处退出提示
评论