Hadoop

1、实时远程监控电梯数据，数据分析预测电梯是否可能发生某种故障2、快速故障困人识别，自动呼叫救援人员3、电梯运行数据接入各地政府特种设备安全平台4、电梯维保平台，安全、规范、监管维保情况5、远程调式电梯功能

项目背景：离线链路只能T+1、业务看不到「现在卖得怎么样」，故补分钟级实时链路，与离线集群同机共存构成Lambda架构雏形|▪实时ETL与数据质量验证：高仿真订单生产者模拟真实生产：泊松到达+21点峰值波峰+8品类加权+二八用户分布，注入1%脏数据验证清洗拦截与巡检不误报；FlinkSQL事件时间+

项目背景：基于淘宝公开订单数据集（99,457行×9列、39个月）从零搭建离线数仓，为报表与自助分析提供统一口径销售指标|▪分层建模与ETL：ODS→DWD→DWM→DWS→DM五层+dim；针对尾逗号、日期混乱、浮点噪声（16%行受影响）等脏数据，DWD八步清洗（去重、缺失值、异常过滤、round

项目面向常熟农商行三农、小微制造、纺织服装、批发零售、个体工商户、科创、供应链、外贸、消费金融及财富管理等场景，整合行内业务、征信、工商、司法、税务、发票、流水、订单、物流等多源数据，构建客户画像、反欺诈、信用评分、额度测算与风险定价模型；支持线上申请、自动审批、人工复核、合同签署、放款支付、贷后预

项目主要包含首页轮播、非遗项目分类展示、传承人介绍、文化资讯、活动公告、图片展示、视频介绍、留言咨询等功能模块。网站采用分区式布局，将文化内容以卡片、轮播、列表、详情页等形式呈现，用户可以通过分类导航快速浏览不同非遗项目，了解相关历史背景、传承人物和活动信息

本系统涉及三类用户角色，各角色功能需求如下：（1）普通用户：注册登录、浏览商品、搜索商品、加入购物车、创建订单、查看订单、评价商品、收藏商品、账户充值、修改个人资料、修改密码、浏览闲置广场、发布闲置商品、购买闲置商品、闲置聊天、发布求购信息、使用AI助手等。（2）商家用户：申请开店（含上传营业执照和

本项目实现六大核心功能：①用户行为实时统计（PV/UV）；②基于ALS模型的个性化商品推荐；③基于朴素贝叶斯的评论情感分析；④负面舆情实时监控与预警；⑤Kafka双Topic解耦行为与评论数据流；⑥Flask+ECharts大屏动态展示实时流量、热门排行、推荐列表、情感分布、预警及吞吐量六大模块。

实时交易决策中心（Flink+Redis毫秒级拦截）、智能规则引擎与模型平台（Drools+GBDT/LR模型）、设备指纹与行为反欺诈（Canvas/WebGL指纹+行为序列建模）、知识联邦与隐私计算（横向联邦+Paillier加密）、物流异常预警与跨境合规中心

项目主要是由四大业务域，20个模块组成1、归档接收与基础编目：全宗门类→案卷条目，接收登记→移交凭证，库房盘点·扫码上架，档号规则、元数据模板。2、保管与安全合规：定密保密·涉密告警，水印策略、访问审计、操作日志，RBAC四层权限+组织对接。3、利用与信息公开：借阅审批·逾期催还，9条件检索·全文命

功能模块：多系统大数据ETL、水电生产数据模型、多维数据分析模型、设备监测、故障预警。主要功能：构建水电生产数据模型，基于Avatar数据中台搭建应用开发平台，实现多系统数据统一整合，开发设备远程监视、故障预警等核心应用，支撑水电生产智能决策，提升设备运维效率与异常响应能力。

本项目包含以下核心功能模块：1）数据采集与清洗：采集深圳二手房房源数据，对面积、价格、户型、装修、朝向、楼层等字段进行清洗与反推校正，剔除脏数据。2）大数据数仓建模：基于HadoopHA集群与SparkSQL构建ODS、DWD、DWS、ADS四层六表数据仓库，实现从原始数据到主题指标的加工。3）后端

本项目旨在加速国家开发银行金融租赁有限公司的数字化转型，通过实施大数据迭代开发策略，依托先进的数据平台运营机制，在数据资产管理、数据源无缝切换及外部数据集成等关键领域达成阶段性成就。此举有效缓解了数据收集与处理的繁重任务，显著降低了数据报送复杂性与资产管理难度。

项目构建了一套完整的心脑血管风险预测与群体健康数据分析平台，包含个人风险评估、机构批量分析、数据可视化、历史趋势分析及健康建议等核心模块。个人端基于双XGBoost模型分别预测心脏事件和脑卒中风险，并提供五级风险评级、关键因素解释及情景模拟；机构端支持CSV大数据上传、重点人群筛选、区域聚合统计和多

比值法Asthesunsinksslowlybelowthehorizon,itpaintshalftheskyinshadesofgoldandsoftred,castingawarmglowovereverythinginsight.Peoplewalkalongthestreet,headin

企业知识库：构建多源异构数据接入层，支持文档（PDF/Word/Excel/PPT/TXT）、数据库（MySQL/PG等结构化元数据）、视频流（音视频转录与语义索引）的统一导入、解析与向量化存储，形成企业专属知识图谱。AIAgent智能体：支持文本/语音多模态交互，融合LLM推理与工具调用能力，实现

1.大数据中台构建批流一体、湖仓一体的现代架构，作为全媒体业务的数据心脏。解耦前台与后台，提供标准化数据服务，实现毫秒级实时感知与智能分发，完成从“人找数”到“数找人”的范式转移，驱动精准决策。2.数据采集与清洗打造全链路、无侵入的智能感知网络，覆盖终端、内容、日志等多维数据。引入流式处理与动态脱敏

本项目为基于Hadoop生态的大数据平台集群部署实践，涵盖从单节点到多节点高可用集群的完整搭建流程，并集成Sqoop、Azkaban、Hive等核心生态组件，适配CentOS、Debian与Ubuntu三种主流Linux环境。主要功能模块包括：1.集群基础环境配置：在CentOS、Debian和Ub

1.三大核心业务模块客户之声（VOC）：关联市场端售后反馈与研发端试验数据，直观展示用户真实痛点与试验验证的匹配度，确保研发方向贴近市场需求。全球试验基地（核心模块）：通过3D地理信息地图，精准定位并展示吐鲁番、黑河、三亚、广饶等基地。实时呈现各场地温度、湿度、风速、光照等环境数据，并动态刷新车辆当

1.位置详情展示：首页直接显示省/市/街道+楼宇精准地址，标注定位更新时间、定位精度数值2.轨迹回放：支持查看当日/近7天行动轨迹，地图生成彩色路线，标注停留时长、途经地点；可导出轨迹记录3.电子围栏：自定义圆形/多边形安全区域（家、学校、园区），手表跨出/进入围栏，APP立即弹窗+推送告警消息；4

数据采集任务管理（创建、编辑、版本管理、任务部署启动）数据加工ETL任务管理（创建、编辑、版本管理、任务部署启动）工作流任务管理（创建、编辑、版本管理、任务部署启动）脚本任务管理（创建、编辑、版本管理、任务部署启动）数据源管理（创建、编辑、测试连接，表，数据预览）参数、函数、预警管理基础功能（用户、