数据迁移处理

我要开发同款
wzx30362023年05月30日
92阅读
所属分类文档原型图

作品详情

项目描述:负责苏州中移软件园分布式调度平台及数据采集”分布式任务调度平台”浪潮开发任务调度系统,系统主要是为处理批量数据定时获取数据中台数据然后针对采集数据进行业务处理,系统通过中心式设计“调度中心’基于集群Quartz实现并支持集群部署,通过分布式设计“执行器’任务分布式执行,任务”执行器"支持集群部署以及注册中心: 执行器会周期性自动注册任务,调度中心将会自动发现注册的任务并触发执行,和丰富的路由策略等内容进行任务调度,系统开发使用了SpringBoot,MyBatisPlus,以及核心etty ,系统的前端使用了扁平化响应式设计,UI框架使用bootstrap,数据库使用了 Mysql与缓存数据库Ignite,由Maven管理架包,Tomcat部署Linux系统PTN/OTN等大型移动中台数据库中获取个别匹配与相关字段做为采集的必要字段,第一步采集将中台数据库中数据通过配置的sql语句导入到Ignite缓存数据库中,第二步映射将对应字段配置在映射表中完成针对字段值到ignite库中,第三步对比将生产库数据与ignite中数据进行对比,第四步将最终数据更新到生产库中项目职责:负责配置采集,映射,对比,同步等步骤的配置表,然后通过程序创建任务来执行每个网元的数据,最终完成到生产库数据使用。
查看全文
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论