后端技术：Java、Mybatis、SpringBoot2.0、MySQL5、TF2.1开发工具：IDEA2019、GIT、Docker、StarUML、Maven开发环境：Windows10 64位、K8S+DOCKER数仓技术栈：平台搭建：CDH6.3数据存储：HDFS、HBase、MySQL5、ES数据计算：Hive,Spark数据分析：ClickHouse、Hive On Spark资源调度：YARN任务调度：Azkaban数据可视化：Superset、Grafana消息队列：Kafka数据采集：Sqoop、Flume元数据管理：Atlas中台功能： 数据来源：业务数据库、APP端业务埋点、应用网关访问日志、应用运行日志等主要功能：智能推荐（千人千面）、运营数据分析、用户画像、日志分析、运营策略、风控、waf策略、图片识别(CNN)、语言识别(RNN)等；数仓分层：ODS(原始数据)+DWD(明细数据)+DWS(服务数据)+DWT(数据主体)+DIM(维度)+ADS(数据应用层)。平台特点：实现流批一体数据处理 责任描述：负责系统的整体框架设计及项目工期的安排、进度跟进、质量审核、难点问题处理和后期部署维护;