智者天道
1月前来过
全职 · 400/日  ·  8700/月
工作时间: 工作日09:00-21:00、周末09:00-21:00工作地点: 远程
服务企业: 2家累计提交: 1工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

本人有4年多数仓建设批流一体化的项目设计与开发!

1、熟悉 Shell 、Python 等语言,熟练 pySpark、pyFlink 进行数据开发;

2、掌握 Hadoop、Hive、ClickHouse、Doris、Spark、Flink 等大数据技术栈工具;

3、精通 HiveSQL、SparkSQL 性能调优;

4、掌握数据仓库的建模、分层架构设计、ETL 、报表开发;

5、掌握 Airflow、Azkaban、Oozie、DolphinScheduler 调度工具的使用;

6、熟悉爬虫开发、Pandas、Numpy 数据分析。

工作经历 和TA聊聊

APP扫码和程序员直接沟通

  • 该用户选择隐藏工作经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看

教育经历 和TA聊聊

APP扫码和程序员直接沟通

  • 该用户选择隐藏教育经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看

技能

Oracle
0
1
2
3
4
5
0
1
2
3
4
5
作品
在线教育系统分析平台

1、通过API抓取接口数据存储至数据仓库中; 2、针对数据进行清洗与指标建设; 3、采用对外接口获取数据至前端页面实现可视化;

0
2023-04-03 16:49
数据分析平台

大数据可视化分析平台 1、爬取各大小说、影视平台相关数据信息; 2、实现对数据进行分析并可视化; 3、采用pyecharts对数据进行标准化维护;

0
2023-04-03 16:50
数据迁移任务监控可视化

大数据迁移任务监控可视化 1、利用APT获取任务数据信息,通过python对接并存储; 2、实现数据分析与指标、标签的设计; 3、采用echarts完成大屏可视化。

0
2023-04-03 17:39
更新于: 2023-02-08 浏览: 174