职责:团队负责人、数据库表设计、各模块搭建及设计、核心模板开发、解决问题
主要内容:(1)数据采集(2)数据处理(3)检验评估(4)产品统计(5)产品及评估结果显示。
技术路线:SpringBoot + SpringMVC + Mybatis + mysql + redis + VUE + python+docker +
shell
个人成长:数据库方面:(1)数据量大,单表2亿条数据,做分表,加索引,提高检索效率。(2)
多模块连接数据库,导致连接数不够问题,排查问题,并为mysql设置max_connections。(3)数
据查询优化。(4)解决mysql 的 REPLACE INTO 多线程并发处理同一张表导致表死锁。
数据方面:(1)数据源不稳定,导致检验评估、产品统计,遗漏时次,利用Redis记录已作时次,
避免未作、少做和重复做。(2)缓存热点数据。
点击空白处退出提示












评论