Hadoop

项目面向常熟农商行三农、小微制造、纺织服装、批发零售、个体工商户、科创、供应链、外贸、消费金融及财富管理等场景，整合行内业务、征信、工商、司法、税务、发票、流水、订单、物流等多源数据，构建客户画像、反欺诈、信用评分、额度测算与风险定价模型；支持线上申请、自动审批、人工复核、合同签署、放款支付、贷后预

本项目旨在加速国家开发银行金融租赁有限公司的数字化转型，通过实施大数据迭代开发策略，依托先进的数据平台运营机制，在数据资产管理、数据源无缝切换及外部数据集成等关键领域达成阶段性成就。此举有效缓解了数据收集与处理的繁重任务，显著降低了数据报送复杂性与资产管理难度。

1、搭建集团域+养老子域双层数仓分层模型，完成ODS贴源层、DWD明细层、DWS汇总层全链路ETL开发；2、实现Oracle存量业务向华为MRS大数据平台迁移，优化SparkSQL解决数据倾斜、任务超时，批处理时长由数小时缩短至半小时；3、封装通用增量SQL模板支撑PB级海量数据迁移，编写Shell

持续迭代优化数据仓库架构，标准化分层建模与公共中间层口径，大幅提升模型、脚本复用效率，同步清理冗余冷数据、精简重复存储，有效缩减存储资源占用；深度梳理全链路SQL执行逻辑，剔除低效关联、冗余计算与全表扫描语句，优化索引与分区策略，显著降低离线、实时任务的算力与内存资源消耗，整体提升数据调度运行效率。

1、存款送积分功能包括活动创设、核心交易数据消费，数据经过flink进行业务数据匹配主要包括（交易渠道、业务类型、产品类型、产品期限、业务机构等），进行按活动及方案的配置，给客户派积分。

项目分为投资者概览，投资者检测，以及重点关注投资者三个大板块，概览展示投资者群体的大数据，检测重点展示对比数据以及不同维度下的趋势变化，重点关注投资者主要为更细致的行为数据展现

本项目构建了完整的IFRS17财务数据平台，核心功能模块包括：**1.数据探源与接入模块**：对接保险核心业务系统、再保系统、精算系统等10余个源系统，完成保单级、赔案级、费用级明细数据的全量抽取与增量同步。**2.数据标准化与校验模块**：设计标准数据模型，实现源系统数据到标准模型的映射转换；构建

搭建全业务域微服务架构体系，覆盖用户额度、借款审批、风控校验、账户管理、计费结算全业务模块；实现新产品快速接入、分布式事务管控、流量熔断降级、多级缓存容灾能力，支撑百亿级信贷业务规模稳定运行。

主要对平安银行所掌握的用户数据进行打标分析，后生成一张以用户id为主建的用户风险分析数据，推送到应用端供应用端展示给一线客户经理，一线客户经理依据这些分析评估数据对离岸客户进行安全风险评估，以评估离岸客户有哪些安全风险，并提供风险预警

主要对平安银行所掌握的用户数据进行打标分析，后生成一张以用户id为主建的用户风险分析数据，推送到应用端供应用端展示给一线客户经理，一线客户经理依据这些分析评估数据对贷款用户进行安全风险评估，以评估贷款用户有哪些安全风险，并具体贷款金额

1、前端埋点上报（包含移动端、web端、后端）2、用户行为埋点数据采集、处理（OneId）、存储3、埋点数据分析查询，包含用户留存分析、用户路径分析、漏斗分析等4、异常数据检测及告警

产品功能列表优化说明现金头寸管理实时监控和管理资金余额，支持多账户、多币种的现金流调度与结算，帮助企业优化流动性，降低闲置资金成本。证券可用管理精准跟踪证券持仓及可用数量，支持质押、冻结、交易可用量管理，确保交易顺利执行并提高资产利用效率。实时收益与业绩归因提供投资组合实时收益监控，并进行多维度业绩

1、 协助完成《指标口径文档详情文档》的探查工作，存贷款部分包括协定存款、通知存款、一般定期、大额存款、结构性存款、协议存款、白名单存款、白领通、普惠贷款等等，探查范围包括业务种类，数据标准，业务口径等等，探查指标类型有衍生指标、新建指标、存量指标。 2、 独立完成存、贷款ODS取数逻辑（其中包括机构拆分），有对公定期存款、对公活期存款、个人定期存款、个人活期存款、对公结算存款、应解汇款及临时存款、开出汇票本票，对公账户贷款、个人账户贷款、信用卡贷款、贴现业务等等12个业务场景及表结构设计。 3、 协助前端指标配置及测试工作。

1、面向渤海保险有限公司，解决用户挖掘、匹配，统计计算问题，通过标签规则给用户打标签操作，实现用户挖掘，维护用户，精准推送，计算保费 2、新兴技术，渤海保险公司希望通过构建基于现有数据仓库平台的用户画像系统，实现以 下目标：精准营销、客户风险评估、客户服务优化、新模式研发 3、具体技术方案包括：基于 HDFS 完成基础数据存储、通过 ES存储业务数据及标签结果 数据、使用 SparkSQL 实现标签计算、采用 SparkMLib 完成挖掘类标签计算，并将结果导入 ES、基于 FineBI 实现报表展示、整个项目基于标签管理平台，进行标签增删改查及定时调度，底层调度采用 DS

主要从事银行业数据开发方向以及ETL方向，针对银行业务需求制定解决方案，主要以写SQL为主，以及shell脚本和工具使用等，还做过BI报表分析等 1.熟练掌握Oracle、MySQL、DB2、GBASE、HIVE、达梦等关系型数据库； 2.熟练掌握以上数据库各种常用函数的使用、存储过程、执行计划等，对 SQL 性能调优等； 3.熟练使用ETL处理工具，KETTLE、DATASTAGE等； 4.熟悉银行相关业务，存款、贷款、资金、理财、票据、债券、同业等； 5.掌握linux系统基本命令和编写 shell 脚本以及Python脚本； 6.熟悉Hadoop、hive、kafka、NCDS 等相关技术组件，熟悉 Hive SQL 应用开发； 7.熟练使用JAVA基础开发； 8.熟练掌握EXTJS前端开发； 9.熟练掌握帆软报表开发使用；

1．“工作台”模块支持对待办审批任务、我的消息、经营指标三类内容的查询、提示与处理功能；2．“客群管理”模块支持对重点客群进行维护，并支持对各客群进行洞察功能；3．“营销管理”模块支持对不同的营销业务进行配置操作，便于业务人员更加灵活的开展营销活动；4．“营销发布”模块支持将营销活动发布到前端H5页