美团优选商品指标中心建设

我要开发同款
proginn15591236582024年03月21日
28阅读
开发技术spring、多线程、elasticsearch、kafka、java

作品详情

● 背景策略平台指标数据的更新稳定性差,数据延迟比较严重且接入成本过高,需要建立一个数据指标中心让策略平台更加关注于策略相关逻辑,策略执行能够应用到及时数据,长期目标是接入更多的商品经营业务● 服务介绍整体采用 spring boot 框架;通过 thrift RPC 框架与上下游(包括前端页面和第三方服务)进行交互。指标数据存储在 ES 进行读写。● 个人职责1. 查询模块开发。设计查询接口,主要提供给策略平台等业务方调用。2. 历史迁移,数据的一致性和准确性验证。历史数据多,避免 ES 深度分页采用 scroll 查询实现。3. 实时数据更新。监听多方数据变更消息,采用模板方法形成数据更新脚手架,遵循开闭原则,避免多个数据源更新的代码相互影响。
查看全文
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论