Hadoop

本平台基于Hadoop生态构建，实现了学生成绩数据的全流程处理。使用HDFS存储海量成绩数据，通过MapReduce和Hive进行数据清洗、统计与关联分析，计算各课程平均分、挂科率、成绩分布等指标；使用Python和ECharts实现分析结果的可视化，生成柱状图、折线图和热力图，直观展示不同专业、不

该智慧煤矿指挥中心可视化系统，核心功能覆盖四大核心模块：矿区基础信息全景展示：直观呈现乌东煤矿的区位关系、行政区划、地理位置，以及井田面积、地质储量、可采储量、设计生产能力等核心资源与产能指标；安全与井田管理可视化：实时展示安全生产累计天数，同时通过三维井田分区地图，清晰呈现南区、北区、西区的井田划

多源时空分析西安市局综合性数据分析平台，贯通数据采集、治理、分析、应用全流程。依托WiFi信令海量数据实时运算处理，完成数据规整与深度研判，可精准甄别重点目标、开展动态管控。共有七大功能模块：案件中心统筹案件相关数据，消息中心推送各类动态讯息，查询中心支持多维度信息检索，数据监测中心实时把控数据态势

项目核心功能包括数据源管理、元数据管理、数据集成与入湖、SQL作业、任务管理和数据服务。数据源管理用于统一维护MySQL、InfluxDB等外部数据源的连接配置，支持数据源新增、编辑、连接测试、启用禁用和状态查看。元数据管理用于管理接入数据的库表结构、字段信息、字段类型、数据来源、更新时间以及Ice

采集业务库MySQL订单、用户、商品、库存数据，同步至HDFS分层搭建ODS、DWD、DWS、ADS数仓分层模型清洗脏数据、缺失值、重复数据，统一指标口径实现销售总额、客单价、复购率、库存预警等指标计算输出结构化数据同步至MySQL，供报表系统使用

1、存款送积分功能包括活动创设、核心交易数据消费，数据经过flink进行业务数据匹配主要包括（交易渠道、业务类型、产品类型、产品期限、业务机构等），进行按活动及方案的配置，给客户派积分。

该项目分为Python语言开发的增强版BrowseUse、Go语言开发的Agent调度工程。我在其中负责UserAgent和ReportAgent的Prompt调优、大模型调用性能优化、工具链与算子功能完善、系统稳定性与性能优化等方面的工作

项目分为投资者概览，投资者检测，以及重点关注投资者三个大板块，概览展示投资者群体的大数据，检测重点展示对比数据以及不同维度下的趋势变化，重点关注投资者主要为更细致的行为数据展现

1.用户画像服务，存储每个用户设备的画像，如兴趣、年龄、地理位置等信息2.广告主平台，给广告主提供投放的相关功能和数据分析3.推荐引擎，链接媒体和广告主的引擎

1、项目有哪些具体功能模块采购管理模块：供应商协同、采购订单生成与跟踪、对账结算仓储与库存模块：区域仓/工地仓的出入库、盘点、安全库存预警物流调度模块：智能拼单、路径优化、在途监控、签收回传工程管理模块：施工计划拆解、进度填报、变更单审批、完工验收物料需求计划（MRP）：根据工程进度自动生成物料需求

零售管理模块：支持京东平台多店铺订单的统一接入和处理，实现订单全生命周期管理，从订单创建、支付确认、发货出库、配送追踪到签收确认的全流程可视化；集成售后服务模块，支持退换货、售后退款等业务处理，提升客户满意度。采购管理模块：供应商信息管理，实现供应商档案、资质、评级等信息电子化管理；采购订单生成，支

数据中台通常包括数据集成、数据开发、数据存储、数据治理和数据服务五大核心功能。数据集成支持多源数据接入（如数据库、日志、消息队列等），实现离线与实时同步；数据开发提供ETL/ELT能力，支持批处理与流处理任务；数据存储基于数据湖或数仓架构（如分层模型ODS、DWD、DWS、ADS）；数据治理包括元数

本项目构建了完整的IFRS17财务数据平台，核心功能模块包括：**1.数据探源与接入模块**：对接保险核心业务系统、再保系统、精算系统等10余个源系统，完成保单级、赔案级、费用级明细数据的全量抽取与增量同步。**2.数据标准化与校验模块**：设计标准数据模型，实现源系统数据到标准模型的映射转换；构建

页面埋点设计：针对产品各核心页面与交互节点进行系统化埋点规划，覆盖点击、曝光、停留、滑动等多类型用户行为事件，确保关键行为数据不遗漏，为后续分析提供完整的数据采集基础。自动化建站：支持通过配置化方式快速生成埋点管理站点，无需重复手动搭建，大幅降低埋点接入成本，提升多项目、多平台的埋点部署效率。埋点数

搭建全业务域微服务架构体系，覆盖用户额度、借款审批、风控校验、账户管理、计费结算全业务模块；实现新产品快速接入、分布式事务管控、流量熔断降级、多级缓存容灾能力，支撑百亿级信贷业务规模稳定运行。

取多系统数据，清洗整合成一张dw表，再基于不同的业务需求在dw表基础上根据不同的业务逻辑不同的业务线和部门再区分成不同业务逻辑不同部门不同业务线的表或者看板，给业务部门和业务人员使用。

1.车辆数据实时接入：支持百万级车辆实时数据上报、采集、校验与清洗。2.大数据存储与计算：海量历史数据存储，日增量3–5T，支持高并发查询。3.Web管理平台：完整后台管理、车辆监控、数据查询、报表统计、权限管理。4.实时监控大屏：车辆状态、运行指标、异常告警可视化展示。5.AI智能分析：接入LLM

本系统围绕电商平台的核心业务场景，构建了涵盖用户端、商家端、大数据与AI推荐四大板块的完整功能体系。一、用户商城（用户端）提供完整的电商购物闭环，包含商品浏览与搜索、商品详情与评论、购物车管理、下单结算、订单全流程跟踪（待付款/待发货/已完成/售后）等核心功能。营销模块支持优惠券领取与核销、限时秒杀

本系统旨在提高客户对通讯资源信息的管理能力，建设一套能够多人同时在线、灵活生成并编辑对应台账的资源管理系统。同时本系统能够根据配置的字段规则自动统计对应信息、排查错误信息减少用户排查错误的时间与难度、减轻用户统计所需负担，消除由于重复工作等问题所产生的时间成本、人力成本的浪费，优化企业内部工作流程、

爬虫、大数据分析系统，通过获取的4G、固网、无线等数据，分析人员拓扑。通过数据分析提取人员结构化数据，形成知识图谱。实现通过手机号、身份证号码、姓名、QQ等内容查询人员家庭信息、快递信息等信息。