工作经历
2021-01-01 -2023-12-01北京网智天元高级后端工程师
报送平台项目旨在为政府部门、企业和个人提供一个便捷的在线报送和信息共享平台。该平台将整合多个渠道的报送 需求,包括政府文件、企业报表、税务申报、投诉建议等,以提高报送的效率、准确性和透明度。项目的目标是实现政府 与企业和居民之间的数字化互动,简化报送流程,降低报送成本,提高数据质量,促进信息共享。 外部数据平台项目旨在建立一个集成和管理外部数据源的平台,以满足组织对外部数据的需求。该平台将收集、整合 、存储和提供对多种外部数据的访问,包括市场趋势、社交媒体数据、竞争对手信息、行业洞察等,以支持组织的决策制 定、市场分析、竞争情报和战略规划。
2017-09-09 -2020-12-10恒生电子高级后端工程师
一、项目概述 为实现企业业务数据的高效管理与价值挖掘,构建标准化数据仓库体系,通过 ETL 工具定期采集业务数据,结合 ods(操作数据存储层)、dw(数据仓库层)、rpt(报表层)的分层架构设计,完成数据的抽取、转换、加载与深度处理。同时,引入数据稽核与数据治理机制保障数据质量,最终通过帆软报表***据可视化呈现,为企业决策提供有力支持。 二、数据采集与 ETL 处理 采用成熟的 ETL 工具(如 Kettle、Datax),根据业务需求制定数据采集计划,定期从 tcmp、CRM、OA、TA 等多源异构系统中抽取业务数据。通过配置化的任务调度,实现数据的全量抽取与增量更新,确保数据的及时性与完整性。在数据抽取过程中,对数据进行初步的格式转换与编码统一,为后续数据处理奠定基础。 三、数据分层架构设计 ods 层(操作数据存储层):作为数据仓库的入口层,直接存储从业务系统采集的原始数据,保持数据的原始形态与时间戳信息,不进行复杂的数据清洗与转换操作,为数据溯源与审计提供依据。该层数据采用分区存储策略,提高数据存储与查询效率。 dw 层(数据仓库层):基于 ods 层
教育经历
2012-07-14 - 2025-12-12大连大学计算机科学与技术本科





