



个人介绍
1. 熟练使用Linux系统操作命令。
2. 熟练掌握PostgreSQL和MySQL数据库操作。
3. 熟练使用SQL进行数据分析。
4. 熟练掌握Hive及HQL进行数据分析。
5. 熟悉Redis非关系型数据库使用。
6. 熟练使用Impala、Spark等查询引擎。
7. 熟悉HBase的使用。
8. 熟悉JavaEE和Shell编程语言。
9. 熟悉Kafka、Flume、ZooKeeper等大数据组件。
10. 熟悉Flink及Flink SQL。
11. 熟悉数据仓库建模和大数据治理。
12. 了解Scala、Spark、Spark SQL。
13. 了解使用Azkaban等任务调度器。
14. 具备良好的业务需求分析和沟通能力。
15. 在攻读MBA期间,培养了卓越的管理和领导能力。
16. 掌握了高效团队管理、项目协调和战略规划的技能。
17. 具备优秀的战略思维和商业分析能力。
18. 熟悉企业运营管理和市场营销策略。
19. 能够将技术与管理相结合,有效推动项目进展和团队协作。
全职工作者,有需要可以非工作时间安排时间进行业务处理
工作经历
2022-02-02 -至今中国软件大数据开发工程师
个人职责 工单管理:主导工单主节点流转审批,保障流程高效顺畅。 实时业务开发:负责专项实时业务开发,提升数据处理质效。 数据模型开发:开发并优化数据模型,满足复杂业务分析需求。 项目架构选型:负责架构选型,确保系统高性能与可扩展性。 代码审核与优化:审核上线脚本,优化任务并给出建议。 招聘与培训:担任面试官,开展新员工技术与业务培训。为多分局 500 人定制课程,互动教学提升员工技能与效率,降低培训成本。 创新与专利:协同分局员工,用 PostgreSQL 解决数据质量问题,实现数据结构化转变,撰写论文并获专利。 项目描述 集群搭建与配置:用 PostgreSQL 搭建 MPP 集群,集成 Kafka 消费实时数据入库,配置 Kafka 保障数据高效处理;利用 Hive 数据仓库,通过 Spark 和 Sqoop 实现数据分层,用 Azkaban 调度任务达 T+1 标准。 数据库应用:Oracle 作中间与备库,支持 Hive 数据 T+1 更新;PostgreSQL 和 MySQL 作集市库,用 PostgreSQL 处理异常值;用达梦数据库 DSG 工具保障数据安全完整。 主要工
教育经历
2022-09-09 - 2024-06-30曼谷吞武里大学工商管理学硕士硕士