电商、餐饮连锁企业线下门店众多,每天产生大量营业、销售、库存数据,原始业务数据分散在各个业务系统,无法直接用于业务分析统计。需要搭建统一大数据数仓,完成多源业务数据汇聚,给运营、财务提供报表与指标支撑,解决数据孤岛、口径不一致问题。
点击空白处退出提示
电商、餐饮连锁企业线下门店众多,每天产生大量营业、销售、库存数据,原始业务数据分散在各个业务系统,无法直接用于业务分析统计。需要搭建统一大数据数仓,完成多源业务数据汇聚,给运营、财务提供报表与指标支撑,解决数据孤岛、口径不一致问题。
本数仓平台完成整套 ODS‑DWD‑DWS‑DM 分层建设。ODS 层对接各个业务系统原始数据;DWD 层做数据清洗、脏数据过滤;DWS 层做业务主题聚合;DM 层面向报表业务,输出营业、销售、库存、客流主题数据集。支撑财务对账、门店经营分析、库存消耗统计等业务功能,对外提供指标查询数据源。
本人负责整体数仓链路设计与开发。使用 DataX 完成多业务源数据同步导入;基于 Spark 完成数据清洗转换;采用 StarRocks 作为 OLAP 引擎,构建分层模型;处理数据倾斜、慢查询优化问题,统一业务指标口径,保障每日 T+1 数据定时产出,保障上层报表稳定运行。



评论