数据库调整和优化

k12卡码脸消费系统是专门为智慧校园打造的无感消费系统，可支持刷脸、刷卡、刷码消费，系统包括消费支付模块、消费限额模块、消费分组模块、消费欠款模块、消费优惠模块、消费充值模块、消费异步处理模块、消费统计模块等等。本人对于系统全流程了解透彻，并参与除了消费限额模块外其他所有模块的主力编程工作。 项目分为设备端和服务端，服务端包括技术包括Nginx、Linux、SpringBoot、Redis、Mysql、RocketMQ、Zookeeper以及自研组件等等。 系统日并发高达150万次。期间遇到过数据库超出每秒2000次读瓶颈，通过对合理数据增加缓存解决。以及服务器带宽问题，通过购买服务器弹性带宽处理。

1、高并发大数据接入、数仓、数据挖掘、动态感知 2、350万终端、24万包/秒、15P/年 3、hadoop、flink、clickhouse、kafka 4、担任项目高管，负责平台架构设计、项目管理等。

● 背景 策略平台指标数据的更新稳定性差，数据延迟比较严重且接入成本过高，需要建立一个数据指标中 心让策略平台更加关注于策略相关逻辑，策略执行能够应用到及时数据，长期目标是接入更多的商 品经营业务 ● 服务介绍 整体采用 spring boot 框架；通过 thrift RPC 框架与上下游（包括前端页面和第三方服务）进行交 互。指标数据存储在 ES 进行读写。 ● 个人职责 1. 查询模块开发。设计查询接口，主要提供给策略平台等业务方调用。 2. 历史迁移，数据的一致性和准确性验证。历史数据多，避免 ES 深度分页采用 scroll 查询实现。 3. 实时数据更新。监听多方数据变更消息，采用模板方法形成数据更新脚手架，遵循开闭原则， 避免多个数据源更新的代码相互影响。

总后勤部提供招投标评标专家提供专家抽取服务，提供专家库管理、抽取专家项目管理、专家及项目评价管 理。并提供第三方平台服务接口，可进行数据同步以及抽取业务的对接。 项目主要技术栈Springboot、Hibernate、Redis、MySql、Vue、Nginx等 专家库管理包含信息、考勤、评价等模块；抽取专家包含项目申请、审核、抽取相关业务 在此项目中担任负责人，负责对产品需求进行评估以及研发工作。 担任团队调度，进行项目的跟进。 此项目采用量子技术大幅度的提高了服务效率 目前已为200+个项目提供了服务保障

智慧平安平台致力于科学化、精细化、智能化、法治化，让城市更有序、更安全、更干净。通过接入物联感知、视频设备、厂商数据，整合小区自有住户数据，进行用户统一鉴权认证，完成小区事件的提醒与响应，追踪事件处理、事件流程各环节关键节点，最终完成事件的整体闭环 1、参与项目分析与评估，项目结构设计、功能评估、关键代码开发工作等； 2、独立负责项目中本组相关的项目研发工作，制定开发计划，确保开发效率，跟进测试组及时上线； 3、处理项目上线后续问题，疑难公关、配合有关部门协调合作，完成项目验收； 4、负责移动端、管理端、智慧大屏研发，并负责与硬件厂家进行设备和数据的对接；

项目卡片是魔信APP里的一个项目信息模块,以魔信APP简介来讲:魔信APP是为大型企业开发的一款在线办公软件,超多的办公功能都已上线,在家也可以进行很好的办公,办公功能都很实用所有的文件都可以不用加载就能观看,而且上传的文件都是永久保存,随时都能查看. 项目卡片是将各个项目的核心进展、项目风险、销售回款等信息以可视图方式展现给用户. 1.负责工程进展的图片上传与展示功能; 2.负责续销周报统计图以及地库所有信息的展示; 3.负责展示项目认购、签约、回款、等计划季度期展示; 4.负责用户对场地风险评价与项目日志更新的保存于管理;

MES信息化管理系统 项目描述： MES系统又称生产执行系统，是在企业信息化管理体系中对生产过程进行管理的重要工具。MES系统主要负责生产现场的数据采集、过程控制和生产调度等工作，帮助企业实现生产计划的有效执行和资源的优化利用。MES系统包括以下几个模块：生产调度、物料控制、质量管理、设备维护、能源管理等。这些模块相互关联，形成一个完整的生产管理系统。MES系统可以为企业提供全面的生产数据分析和决策支持，帮助企业优化生产流程，提高生产效率和产品质量。 项目职责： 1、负责建立和维护一个有效的测试流程; 2、负责测试团队的日常管理工作; 3、负责制定和安排测试计划、测试工作; 4、带领测试团队进行程序测试工作、按照制定的测试计划执行，并监督和控制测试工作的进程; 5、负责测试用例的质量，开发高效的测试用例; 6、负责与其他部门的人员沟通协作，例如与开发人员和项目管理人员进行沟通，共同推动项目的顺利进行; 7、负责测试团队的培训，培养团队队员的能力。

项目描述： 数据资产管理平台基于B/S架构，用户所有操作都基于浏览器来访问，系统支持的浏览器为：IE10+、Google Chrome57+、火狐浏览器。 数据资产管理平台是一款基于WEB方式的数据管理工具，通过这个工具能够整合企业中不同系统、不同来源、不同类型的数据资产，便于用户进行集中浏览、分析并管理。数据资产管理平台有助于帮助用户了解和管理信息、管理加工处理过程的来源，也有助于用户理解信息与加工过程之间的关系以及它们如何被使用。 产品特点： 平台基础框架采用FIGTREE技术框架，完全使用基于J2EE的微服务架构，整合了绝大多数JAVA开源、成熟技术框架，比如SpringBoot、springcloud、mybatis、fegin,es等，另前端采用vue技术框架，实现前后端完全分离开发。网络结构设计采用先进技术，软件平台、数据库系统以及开发工具选择当前先进的系统。能对接主流的大数据平台，具有大数据平台开发能力，有微服务架构开发能力。

项目名称 上海新城地产计划系统，广州时代地产计划、资产系统，杭州中安计划系统，光大地产计划系统，华润置地计划系统 软件环境 Windows8/2007/XP、linux等 开发工具 JDeveloper Studio、MyEclipse10、Oracle P6、SVN、Weblogic Server、Tomcat、Axure等。 数据库 Oracle11g 主要技术 J2EE、ADF 框架技术、P6接口等核心技术 参与过的模块开发： 经营计划、 经营计划作为公司年度责任部门的指标，各项业务活动都是围绕着指标进行开展工作。经营指标的完成情况，直接关系到公司的经营活动。 项目计划、 进行项目计划编制、计划调整及审批 、完成情况填报。 会议管理、 为了管理过程中的项目决策会议、项目专业会议的集中管理，实现会议管理与项目计划、经营计划集中控制，提高新城总部对各管理中心、城市公司、项目公司的清晰明确管控和跟踪力度。会议管理主要由会议计划、会议卡片、会议汇报、会议待决事项/作业、会议验证关闭、会议统计等功能组成。 部门计划、专项计划、 对各部门根据公司年度计划、考核指标结合本部门常规工作任务编制

基于SpringCloudAlibaba、filnk、tidb、dbswitch、neo4j等构建，结合了实时计算和离线计算两种场景的需求。 flink在实时计算方面表现出色，能够处理高速数据流并支持流批一体化处理。tidb则作为高性能的分布式数据库，具备强大的海量数据处理能力。 同时，dbswitch负责离线数据的同步计算，支持多种主流数据库。此外，我们采用neo4j构建图数据库，以高效的方式处理复杂的关联数据。 包含数据集成，数据开发，数据治理，数据资产，数据服务，数据集市六大模块，解决数据孤岛问题，实现数据统一口径标准，自定义数据开发任务，解决数据孤岛问题：通过统一的数据管理和整合，打破信息壁垒。 统一口径标准：确保数据的准确性和一致性。 自定义数据开发任务：满足企业特定的数据处理和分析需求。 高效的数据处理能力：flink和tidb的结合使得数据处理速度更快。 支持多种使用场景：无论是实时计算还是离线计算，都能得到满足。 提供全面的数据服务：从原始数据到个性化报表，满足各层次的数据需求。

流量计数据在线监控系统 项目描述： 系统采用B/S架构，支持主流浏览器，兼容艾默生、科隆、E+H等进口品牌以及国产的主流型号计量仪表的管理，该系统集计量仪表运行监控、状态数据统计分析、故障报警管理等为一体的信息化管理平台，利用信息化智能监测技术（对报警自动判断、智能诊断），实现计量仪表故障自诊断、形成诊断案例库；构建企业级计量仪表监控中心，对计量仪表进行集中管控。消除信息孤岛，打破信息系统间壁垒，计量仪表智能监控管理还需提供数据接口与实时数据库、生产管理等系统实现数据的共享。 项目职责： 1、参与需求分析,熟悉业务流程,用Xmind 思维导图工具提取测试点； 2、根据测试点,主要采取等价类边界值、场景法等多种方法进行测试用例编写,组织测试评审, 提升测试用例的盖率，尽量覆盖更多正向、反向的情况，保证测试的全面性； 3、根据测试用例执行测试,并且按照进度及时更新维护测试用例； 4、在测试过程中,将发现的Bug提交到禅道，并持续跟踪Bug状态并回归验证，直至Bug关闭； 5、根据接口测试文档编写接口测试用例,使用JMeter完成接口自动化测试； 6、使用Fiddler

该系统全部业务模块在国电投集团及下属二三级单位（覆盖1000+家）全级次应用，提供了上报、审批、汇总、平衡、分解下达和分析的全过程管理，推动了国家电投集团“计划、预算、考核、激励（JYKJ）”闭环管理体系的信息化建设,同时在综合计划、预算管理、综合统计、绩效考核模块中落实三新产业、跨区域委托运营、创新驱动等业务。 主要职责 1、参与项目设计，主导项目系统功能需求分析、确定技术方案、进行核心模块详细设计及升级等工作； 2、负责对接项目组，参加业务需求评审，把控开发需求，参与项目验收并及时沟通处理客户过程异议； 3、制定团队（5-8人）开发计划，管理过程文档，协调开发资源，优化资源配置并跟进业务组、开发组、测试组，把控项目开发上线进度； 4、技术难点攻关，处理新增需求、新增bug，指导初级开发工程师，保证效能，带领团队高质量交付；

智慧视频管控平台，通过与以下6个不同平台数据的结合，平台解决各个系统数据不同步，数据有效性的问题，并且通过各个平台系统的调度，将不同平台的联动一线串联，形成更加智能的一站式管控平台。 1. 通过人脸识别，提取人员信息，人员轨迹绘制，方便海量数据查找统计； 2. 人脸布控结果展示、新增布控任务； 3. 通过可视化监控设备，对车辆进行监控，车辆轨迹绘制，车辆违法信息展示，实时预警车流信息等； 4. 摄像机IP与坐标、GIS地图绑定； 5. 通过对人员，车辆的轨迹信息监测，分析人员动向，车辆实时流动情况，为综合调度提供依据，方便决策； 6. 通过视频监控，实时获取人员，车辆信息，随时查找相关车辆，人员，随时定位。

1. 参与系统或应用的开发、维护。 2. 根据业务需求和前端组协作开发并实现各产品功能。 3. 分析解决产品开发过程中的重要技术问题和疑难问题。

业务管理系统是一个综合性的解决方案，专为简化复杂的业务流程而设计。该系统分为几个关键的功能模块，旨在为使用者提供全方位的管理支持。核心模块包括客户关系管理、销售机会跟踪、订单处理、库存管理以及绩效分析，这些功能共同工作，以确保业务操作的流畅和效率。 通过集成这些模块，业务管理系统能够为用户提供实时的数据洞察，从而帮助他们做出更明智的决策，提高客户满意度，加速销售周期，同时优化库存水平以减少浪费。 在开发过程中，我承担了全站开发，包括web端，移动端和后端。利用先进的技术栈，包括vue,springboot，uni-app，mysql，我成功实现了全部功能。这些成果显著提升了系统的可靠性，并为用户提供了更加流畅和直观的操作体验。

基于SpringCloud、SpringBoot、SpringMVC和MyBatis技术栈，结合Oracle数据库和Redis缓存，构建稳定、高效、可扩展的车险业务处理系统。 项目描述： 中国银行微信小程序项目，专注于车险业务的推广与高效投保，旨在通过线上渠道提升业务效益。核心功能包括车险投保、续保、保单查询、业绩自查、车险二维码推广以及业务员业绩查询等，为用户提供便捷、全面的车险服务体验。

西安爱菊集团智能仓储项目致力于实现粮油低温副食堆垛机库和米面密集穿梭 车库的高效运转及物资管理。 通过 WCS 系统， 堆垛机和穿梭车能够按照算法最优路径进行货 物的出入库操作。 管理系统提供物资位置查询、 库存统计及预警功能， 确保物资充足且新鲜。 此外， 项目还通过大数据实时展示物资和设备状态

服务内容全部包含: DPI协议解析。 嵌入式linux系统定制。 利用机器学习进行数据分析。 数据库表设计和性能优化。 系统性能优化。 服务部署。 服务优势: 8年以上技术管理经验：包括项目管理，常规代码review，项目管理平台搭建，解决方案编写，投标，申报专利和软著，培训，前沿技术预研，核心架构搭建等。带领技术团队，规模10人以上。 10年以上linux开发和部署经验，10年嵌入式开发经验，10年网络协议开发经验。 擅长数学建模和利用Python搭建机器学习模型。

1.产品为山东通、爱山东业务运行管理系统，主要包含运行管理对象中心、规则预案中心、监控告警中心、风险处置中心、分析评价中心、指挥调度中心、系统配置管理等； 2.我主要负责运行管理对象中心、监控告警中心、指挥调度中心的研发与研发管理工作，系统采用Spring Cloud，Spring MVC，Redis，Nginx，Oracle等主流技术，支持分布式微服务架构，并持续优化系统的稳定性与性能提升，提升客户的满意度与使用体验。

1：分为系统模块、定时调度模块、数据中台模块、业务系统模块、文件传输模块、网关等模块 2：使用技术栈：es、MySQL、redis、rocketMQ、微服务等 3：难点：文件分片存储、数据库优化、JVM优化等