1.依托太平洋网络自研的数据监测平台,实现自媒体平台如抖音、快手、小红书、视频号、懂车帝等用户个人信息与作品数据拉取,帮助我们的客户捷途汽车鼓励其自己的客户在这些流媒体平台发布与爱车相关的作品,实现其品牌宣传、拉动平台流量的目的,开拓市场。
点击空白处退出提示
1.依托太平洋网络自研的数据监测平台,实现自媒体平台如抖音、快手、小红书、视频号、懂车帝等用户个人信息与作品数据拉取,帮助我们的客户捷途汽车鼓励其自己的客户在这些流媒体平台发布与爱车相关的作品,实现其品牌宣传、拉动平台流量的目的,开拓市场。
该系统分为web后台,与移动端H5(嵌入捷途APP,目前日活用户1w左右),主要业务是帮助捷途汽车运营他们APP的用户(用户数据打通)。管理人员可以在web后台发布活动(设置活动平台、作品要求和奖励要求),捷途APP用户可以在嵌入的H5页面参与活动,前提是先进行媒体平台(抖音/快手/小红书/懂车帝/汽车之家)账号授权,然后再在这些媒体平台发布与活动要求相关的作品即可,系统会定时拉取这些作品数据(T+1同步进系统),然后使用线程池以任务的方式统计出符合活动要求的作品,并在活动结束后一天根据奖励要求统计用户奖励(可获得的捷途币)。
项目技术架构:springboot + mybatis-plus + 线程池 + redis + redisson + rabbitmq + mysql + docker + k8s
主要工作:
1.功能模块开发:比如用户管理,授权账号管理,数据中心(用户作品榜/账号榜),媒体平台(快手&懂车帝&汽车之家)账号授权,媒体平台作品拉取,有效作品统计,捷途币计算,捷途币明细等。其中懂车帝账号授权流程设计如下:
使用redis将授权任务解耦,后端服务分两步将授权手机号和验证码分别写入auth-phone和auth-verification-code队列,爬虫侧读取手机号和验证码完成登录,提取cookie写入redis,供后续爬取(个人账号信息和作品信息)业务直接读取,并将登录结果写入redis供后端轮询获取,继而将授权结果返回前端完成整个授权流程。
2.生产数据拉取问题排查与故障处理,慢sql优化(比如用户管理列表分页查询由原来的10+s到200ms,数据中心账号榜列表分页查询等)。
3.团队日常事务管理与安排、项目进度把控





评论