项目职责：负责短信业务模块和大数据分析报表功能的开发和设计和管理，短信主要基于cmpp协议后端使用 java8、springboot、springcloud、mybatis、kafka、redis、mysql,hadoop,hive,spark,hbase 等,前端 PHP+JS 开发。主要模块简介: 该平台主要用来完成公司的短信营销业务及 AI 语音电话的营销，主要模块有：短信业务，数据报表，黑名单管理，数 据出库，数据入库，数据处理，数据建模，自动撞库等模块。 项目描述：数鸣信天翁 CRM 平台是集成了短信发送，大数据处理，数据入库的综合性管理平台。 该平台所有的业务模块都是为了客户营销服务，营销的方式主要通过手机短信和 AI 电话。首先公司通过在运营商那里的数据建模获取要营销的客户数据，比如信用卡，会从运营商那里通过算法和建模获取意向的客户数据，数据回来后通过数据入库模块进行数据处理， 将数据分运营商和建模源存入到大数据平台,这部分主要通过 hadoop 和 hive sql 实现，使用策略模式分不同的数据源进行处理入库， 如山东移动，北京联通等。数据入库之后运营通过取数模块获取想要营销的业务数据如金融，保险，游戏等，然后通过短信模块（集成了一个基于 cmpp2.0 的短信平台）及 AI 电话（集成了一个 AI 机器人系统）进行数据营销，营销的成本及进件可以通过报表模块 进行展示分析是否赚钱。 我所负责的模块主要有短信平台，数据处理，数据入库，自动撞库等，短信平台主要基于 cmpp2.0 标准进行短信发送和回执上行接 收，使用了 springboot 及华为短信 api。数据入库主要通过新建不同的任务拉取不同数据源的数据文件，通过不同的 hivesql 进行 清洗匹配入库。数据处理主要有手机号的机型匹配，imei（手机设备号）匹配手机号，自动撞库等自动撞库主要是对接不同的商户， 营销时候需要通过对方提供的接口进行撞库，将数据区分为可营销和黑名单，撞库通过 springboot 接口方式实现，采用线程池做并 发撞库，提高撞库的效率。