HDFS

1、 协助完成《指标口径文档详情文档》的探查工作，存贷款部分包括协定存款、通知存款、一般定期、大额存款、结构性存款、协议存款、白名单存款、白领通、普惠贷款等等，探查范围包括业务种类，数据标准，业务口径等等，探查指标类型有衍生指标、新建指标、存量指标。 2、 独立完成存、贷款ODS取数逻辑（其中包括机构拆分），有对公定期存款、对公活期存款、个人定期存款、个人活期存款、对公结算存款、应解汇款及临时存款、开出汇票本票，对公账户贷款、个人账户贷款、信用卡贷款、贴现业务等等12个业务场景及表结构设计。 3、 协助前端指标配置及测试工作。

主要从事银行业数据开发方向以及ETL方向，针对银行业务需求制定解决方案，主要以写SQL为主，以及shell脚本和工具使用等，还做过BI报表分析等 1.熟练掌握Oracle、MySQL、DB2、GBASE、HIVE、达梦等关系型数据库； 2.熟练掌握以上数据库各种常用函数的使用、存储过程、执行计划等，对 SQL 性能调优等； 3.熟练使用ETL处理工具，KETTLE、DATASTAGE等； 4.熟悉银行相关业务，存款、贷款、资金、理财、票据、债券、同业等； 5.掌握linux系统基本命令和编写 shell 脚本以及Python脚本； 6.熟悉Hadoop、hive、kafka、NCDS 等相关技术组件，熟悉 Hive SQL 应用开发； 7.熟练使用JAVA基础开发； 8.熟练掌握EXTJS前端开发； 9.熟练掌握帆软报表开发使用；

项目描述： 越来越多的企业在开展营销工作中面临着以下问题。活动上线准备工作繁琐，有效时间内可运营活动有限；难以精准筛选培养优质用户，会员粉丝数量增长缓慢；跨部门协作支持劳神费力，想要提升产出效率但有心无力；缺少大规模沟通策略执行辅助，业绩无法见到显著增长等。若此时能借助强大的自动化营销工具，您的营销活动更具创意性，营销团队的工作更加便捷，部门间的协作也会变得更紧密无间，当然您的业务表现也会大幅增长！DM Hub就是这么一款业务增长之路上必不可少的好搭档！ DM Hub包含用户管理、群组管理、会员管理、微信营销、素材管理、企微、短信营销、微页面设计、表单设计、营销活动管理、用户旅程设计器、数据看板、监测分析、数据权限、开放平台等模块。强大的产品覆盖版图背后，是最初对产品底层架构的缜密设计，应对复杂多变的市场环境，更可通过开放平台快速响应，实现产品能力拓展。 DM Hub具有超强的性能，每秒千万级实时数据处理能力，面对海量数据任务轻松驾驭，让大规模触达不再限速，实时捕获用户行为，创建高时效性的营销触达，让您牢牢把握每一个商机。 技术架构： grails+akka+kafka+spark+flink+hadoop+hive+hbase+impala+kudu+redis+mongodb+mysql+elasticsearch+beats+kibana+jenkins+kubernetes+docker+gitlab 项目职责： 1、负责实时数据采集和批量数据采集平台架构设计开发 2、负责数据治理平台开发，智能标签、用户画像数据仓库设计开发 3、负责数据可视化平台开发，各种指标分析、数据看板模块开发 4、负责数据实时ETL平台、数据离线分析平台设计开发 5、参与自动流项目的开发 6、负责微页面链接转短链功能设计开发