1、项目包含数据采集、数据开发、数据治理、数据保障、数据呈现等几个环节1）数据采集包含内部系统比如：erp、分销；外部数据：各个苏宁、天猫后端数据爬取获得2）数据开发采用标准4层结构ODS>DWD>DWS>ADS3）数据治理包含表名称、元数据、字段规范2、所用到技术及语言包含ETL（Kettle）、Python、Java、Hive、Dataworks、Maxcomputer、OSS、elasticsearch等查看全文
声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论