



个人介绍
我是程序员客栈的小兰,一名数据开发工程师; 我毕业于内蒙古工业大学,担任过东方国信总部联通项目的数据开发工程师,担任过深圳天源迪科电信项目的数据开发工作; 负责过2024年中国电信集团渠道销售管控系统项目,2022-2023中国联通采集整合项目,联通总部数据研发与运营项目的开发; 熟练使用MySql,Oracle,Shell,Hadoop,SQLServer,Linux,Hive; 如果我能帮上您的忙,请点击“立即预约”或“发布需求”!
工作经历
2025-01-01 -2025-05-19东方国信科技股份有限公司北京分公司数据开发
1:对迁移数据模型表结构备份,观察表字段类型,数据样式,实现新旧统一,避免结构不统一造成的数据缺失以及数据误差。 2:加工脚本稽核,存档备份,加工脚本可视化映射开发,变量函数编写,数据定时存量清理。 3:加工流程开发,包括自动化启动、前后置模型质量判断、定时运行、mapreduce参数调优、报错预警定向信息发送。以及后续加工过程中的报错修复、优化,历史数据补全。 4:总部数据下发省分、数据推送至业务部门、数据资产发布、数据使用权限审批。 5:甲方需求独立开发,需求沟通,确定业务层数据分析要求,合理使用现有基础全量模型开发,运用最合理的逻辑加工方式,提供精简数据,交付审核。 6:对数据质量存疑的部分模型进行问题核查,如存在则沟通修改时间。 7:对其他同事核查过的问题和解答的问题原因进行确认审核,保证答复准确性。 8:定期24小时值班保证各层数据自动化加工稳步进行,修复报错,监控重点模型加工。 9:疑难杂症数据模型优化,指标数据量稽核,
2024-03-01 -2024-12-30深圳天源迪科北京分公司数据开发
1:页面需求沟通,判断当前需求字段,格式等是否可实施,并给出合理化建议,沟通精简数据内容,保证数据展示内容符合客户预期。 2:在git上开发需求shell脚本,包括编辑账期变量,数据库加参,运行hivesql数据脚本。 3:处理脏数据,确认汇总数据计算方式并加工。 4:查验数据质量,基于源表与历史生成的其他结果表,验证当前数据准确性。包括数据条数,数据格式,数据计算的结果值。 5:上传加工后数据至前台mysql库,并生成前台下载文件,传输至指定位置,便于客户导出数据文件。 6:添加定时事件,保证数据实效性,并配置定时检测,报错预警信息发送。 7:补足历史账期,及时相应客户后续改进建议。 8:每月出账,按时交付出账数据,保证数据准确性,若有变更或者客户存疑及时查证并更新出账。 9:与其他项目组出账人员核对双方或多方数据差异,沟通差异产生原因,判断差异是否合理,客户是否接受差异存在,或者多方沟通后对齐差异数据。
2022-07-01 -2024-03-01东方国信科技股份有限公司数据开发工程师
基于hadoop平台和Oracle数据仓库的模型设计、开发、性能调优、程序测试工作。负责Linux开发平台上shell脚本编程。电信行业业务统计分析,解决并实现业务需求 1:甲方定向数据模型需求开发。 2:业务新模型开发。 3:数据模型建模、调优、质量稽核。 4:业务指标数据质量问题核查与更正。 5:日常自动化流程运维。 6:不同集群模型群迁移、整合。 7:业务方疑难复杂问题答疑、修复、稽核。 8:数据的下发、定时清理、权限审批。
教育经历
2017-09-01 - 2021-06-10内蒙古工业大学计算机本科
在学校学习专业知识,顺利完成各科结课考试,答辩评优。