该项目为中国移动内部一线人员扫楼工具,为一线人员提供企业、学校、酒店等信息,集合互联网数据、移动内部数据,通过大数据清洗,形成较为详细的客户画像。
核心功能:全局搜索、客户信息录入、拜访记录、定点打卡。
我主要负责:
1、1.0版本初步功能沟通与主导开发;
2、主导2.0大版本数据库重构;
3、结合Mysql与ES优点优化搜索效率。
该项目难点:
1、数据量较大,存大多张千万级表,并存在关联;
2、数据来源复杂,包括采集、三方多个系统、业务数据。
解决方案:
1、建立ES索引,加快搜索效率;通过中间查询,使SQL走索引;
2、由数据处理人员清洗数据,核心数据入业务系统。