1.负责项目整体进度把控,定期和行内负责人汇报项目进度
2.使用datastage将各个旧系统数据迁移到数仓
3.配合科技人员完成east监管报送的数据校验整改
4.结合数据仓库数据使用cognos开发业务部门内部报表
点击空白处退出提示
1.负责项目整体进度把控,定期和行内负责人汇报项目进度
2.使用datastage将各个旧系统数据迁移到数仓
3.配合科技人员完成east监管报送的数据校验整改
4.结合数据仓库数据使用cognos开发业务部门内部报表
1.统一数据采集:通过配置化接口,自动从核心、信贷、理财等十余个源系统抽取数据到gbase。
2.标准化数据处理:内置监管数据标准,进行数据清洗、转换、码值映射,并通过质量规则引擎进行校验。
3.任务调度与监控:实现ETL作业的自动化调度、依赖管理、失败告警与重跑。
4.报表生成与报送:基于加工后的标准数据,自动生成符合监管格式要求的文件,并记录报送轨迹。
5.其主要功能是确保海量监管数据能准确、高效、可审计地完成从业务系统到报送文件的转化。
我作为核心数据开发工程师以及项目经理,主要负责:
技术实现:使用IBM DataStage设计并开发了从ODS到目标层ETL流程开发;使用存储过程实现复杂业务逻辑;编写Shell脚本进行作业调度与监控。
性能优化:针对监管方面的数据质量问题,优化存储过程逻辑,针对业务部门反馈优化内部报表展示。
质量保障:设计并实施数据质量检核规则,确保关键指标在加工链路上的准确性,保障报送数据零差错。




评论