全市场投管人收益表数据获取方案简介 1. 方案目标与解决问题 本方案主要面向**保险股份有限公司,旨在解决其在获取外部网站数据时遇到的效率低下和数据处理困难等问题 。具体来说,该方案自动化了从多个外部网站获取“年金基金投资管理”相关数据并将其写入指定Excel表格“全市场投管人收益表”的过程 。这大大减少了人工操作的耗时,将原本可能需要人工耗时数月的工作,通过技术方案将时间控制在可管理的范围内。 2. 方案特点与优势 相比于市场上的常规方案,本方案的独特之处在于其采用RPA+Python的混合技术方案,并兼顾了效率、成本和技术可行性。 RPA+Python混合方案:传统的RPA方案(方案1)在识别合并单元格时会出现数据错乱的问题,而纯Python方案(方案3)则需要熟悉复杂的数据分析和网页获取技术,且未用到RPA和IDP 。本方案将RPA(机器人流程自动化)和Python语言相结合,利用RPA处理网页访问、标题链接打开等操作,然后由Python读取RPA处理后的数据进行复杂的表格数据获取和联表查询,最后再将Python代码作为插件导入RPA中进行整体流程的调试和测试 。 高效性与高投入产出比:该混合方案避免了纯RPA方案中因处理页面元素耗时过长导致效率低下的问题,也规避了纯Python方案的技术难度 。例如,在获取80个网站数据的情况下,纯RPA方案预计需要240天左右,而本方案在确保数据准确性的同时,预计总用时仅为110天,大幅提高了效率 。 自动化录屏:流程运行后,方案能够自动生成录屏文件,便于客户直观地了解和验证流程运行情况,并能将生成的数据文件直接发送给客户 。 3. 方案技术组成 该方案主要由以下技术组件构成: RPA:用于自动化网页操作,例如访问指定网站、打开符合规则的标题链接等. Python:用于处理复杂的数据操作,包括读取RPA处理的数据、访问链接、获取表格数据、联表查询,以及将处理后的数据写入Excel文件. 配置文件:用于存放需要打开的网站标题、链接和规则等信息,以便于管理和维护.
730PythonIT
人才礼遇项目产品系统
面向机关企事业单位公职人员的福利积分消费平台。用户通过微信小程序使用积分在指定商户消费,商户端小程序可查看消费记录 与统计,管理员通过Web后台审核订单、管理积分发放并完成扣费,交易完成后系统自动短信通知用户。 技术栈:Spring Boot(Java后端)、Vue.js + Element UI(Web前端)、微信小程序、MySQL、Redis 等
300JavaTomcat 扩展项目
数字助手产品系统
技术栈: uniapp + uview-ui + vue2 + vuex + echarts + jenkins 项目描述:这是一个基于大型语言模型的对话式人工智能系统(聊天机器人),通过大量文本数据训练,能够针对各种问题和提示生成类人化的文字回应,为用户提供信息查询和综合问答服务。 职责描述:前端开发 1. 根据UI效果图和产品原型图,独立完成前端页面开发与交互实现,确保高质量还原设计稿,保证视觉效果与用户体验的一致性; 2. 负责Web、H5、小程序等多端开发工作,实现跨平台适配与响应式布局,确保在不同设备和平台上的一致性体验; 3. 参与项目发布与更新维护工作,保障项目稳定运行和版本迭代顺利进行。
530HTML5软件
数字魔方产品系统
技术栈:vue3 + element plus + vuex + vue Router + es6 + vite + nvm 项目描述:支持多种主流数据库类型连接,通过可视化拖拽操作自动生成宽表结构,提供自助式数据分析功能,支持数据下钻分析和多维度数据探索,实现灵活高效的数据可视化分析体验。 职责描述: 1. 参与产品的原型设计和优化; 2. 根据产品原型,独立完成前端页面开发与交互实现; (1) 报表配置:选择数据库表以后,设置查询条件和查询列表后,进行预览。 (2)数字魔方组件( 网格报表组件 /数字魔方大屏组件 )的开发与应用 数字魔方组件开发:提供给系统更丰富的整合方式,将数字魔方配置的报表和大屏组件整合到业务系统。 业务系统集成:程序员能够轻松将网格报表组件整合到各类业务系统中,实现数据的实时展示与分析,有效提升了业务系统的数据处理与展示能力。 3. 使用 docker 部署和发布项目;
420HTML5软件
外贸头条产品系统
技术栈:uniapp + vue2 + vue cli + vuex + echarts 项目描述: 专业的外贸数据。看外贸:支持外贸数据的统计、分类查询;问答:支持专业问题的问和答;轻松招:支持企业信息的快速检索;资讯:展示最新最全的外贸资讯; 项目职责: 根据UI效果图和产品原型图,独立完成前端页面开发与交互实现,确保高质量还原设计稿,保证视觉效果与用户体验的一致性;
310Vue外贸
农聚福商城产品系统
项目背景:农聚福商城,用户量百万级,业务覆盖生鲜、日用百货等品类。 核心功能优化: 1. 分享分佣机制设计与实现: 采用三级分销模型,支持不同层级佣金比例配置。 通过责任链模式实现用户等级动态判定与佣金计算。 构建分佣任务异步处理机制,保障高并发下数据一致性。 上线3个月拉新1万+,GMV提升40%。 2. 拼团功能分布式改造: 引入Redisson分布式锁解决超卖问题,确保库存扣减原子性。 设计本地缓存预热+定时刷新机制,降低Redis访问压力。 实现拼团订单状态机,支持自动成团/超时退款等复杂业务。 活动期间订单处理效率提升50%,系统吞吐量达1000TPS。 3. 高性能会员系统搭建: 基于MySQL分表方案(64张表)存储亿级会员订单&奖励分配数据。 设计会员积分实时计算引擎,支持复杂积分规则配置。 构建会员等级晋升自动化评估系统,提升用户活跃度。 亿级数据量下核心查询响应保持在50ms以内。 个人贡献: 主导分佣算法设计与架构实现,建立完善的分佣监控体系,监控指标包括分佣成功率、佣金计算准确率、延迟等。 设计拼团功能高并发解决方案,保障大促期间系统稳定。 规划会员系统存储架构,确保海量数据下的高性能访问。 优化核心业务链路性能,关键接口响应时间缩短80%。 设计风控系统,对订单分佣、佣金溯源进行风控 通过用户行为埋点采集数据,经 Kafka 流转清洗后,由 ELK 存储可视化,再用 Flink 进行用户行为分析。    
590Java电商
1、主导超复杂业务流程的 SaaS 化电商平台架构设计与落地实施: 负责品类过百万、交易额过亿的 B2B 电力招标采购 SaaS 平台及供应链金融系统的整体架构设计,涵盖权限控制、数据隔离、多租户支持、招标流程引擎、消息推送等多个关键模块,支撑高并发、高可用、可扩展的业务场景。 2、构建安全可靠的多租户权限体系: 基于 Shiro 实现 SaaS 平台的细粒度权限控制机制,支持企业级角色划分与员工权限隔离,确保不同客户、不同岗位之间的访问控制严格合规,保障系统安全性。 3、采用微服务架构提升系统稳定性与扩展能力: 使用 Dubbo + Spring Cloud Alibaba 技术栈搭建分布式服务体系,实现模块解耦、服务自治和弹性伸缩,系统可用性达 99.95%,并发处理能力提升 3倍以上。 4、设计基于 Activity 的自定义工作流引擎,提升审批效率: 主导开发基于 Activity 工作流的任务调度模块,支持灵活配置招标、开标、评标等业务流程,使流程发起与审批效率提升 200%,显著缩短业务周期。 5、构建智能数据分析与规则引擎模块,赋能招标决策: 设计并实现数据分析模块,结合动态规则引擎提供实时评分、风险预警等功能,为招标过程中的关键节点提供数据支撑,提高评审准确率和透明度。 6、基于消息队列实现高效招标信息推送机制: 引入 RocketMQ/Kafka 消息中间件,实现招标需求定向推送与广播通知功能,大幅提升投标人参与率,关键项目的投标响应率提升 200% 以上。 7、数据架构优化与多数据库同步体系建设: 采用数据聚合与逻辑隔离策略,满足多租户下的数据安全与共享双重要求; 利用 Canal 实现主从数据库与跨库数据同步,确保数据一致性与高可用,数据延迟降低至 1秒以内。 8、DevOps 与 CI/CD 体系建设,提升研发效率与质量: 自建开发环境,部署 Linux、JDK、MySQL、Git、Jenkins 等基础组件,构建完整的 CI/CD 流水线,自动化构建与部署覆盖率超过 80%,上线效率提升 40%; 与华为云、腾讯云、IDC 供应商对接,完成测试与生产环境的多点部署,提升系统稳定性和容灾能力。 9、项目管理与质量保障体系落地: 使用 Jira 进行项目任务拆解、WBS 分解与里程碑管理,实现项目进度可视化,交付准时率达 100%; 推动单元测试、集成测试与自动化回归测试全面覆盖,测试覆盖率高达 100%,线上事故率为 0%,显著提升产品质量。
530JavaBI商业智能
MDM主数据平台产品系统
该系统旨在管理企业核心数据,通过将集团内各个系统的主数据规范化并保存到主数据平台中,并进一步分发至各下游系统。系统的核心功能包括模型管理、字段管理(创建表)、数据维护以及使用RabbitMQ整合并通过Exchange机制分发最新数据给下游系统。这确保了数据的一致性、准确性和及时更新,为企业的高效运作提供了坚实的基础。 相比于市面常规方案来说是成本比较低,是通过开源框架改造而来前端使用vue,后端.net core,可以部署在window服务器也可以部署到Linux服务器,同时支持SQL server和MySQL,并且加上了RabbitMQ可以在更新的第一时间推送到下游系统。
760C# PC网站
1、主导永辉、中百、无限极等超大型企业电商系统架构设计与数字化转型落地: 负责 SKU 过亿、交易额超百万的电商平台整体架构设计,涵盖智慧供应链、仓储物流、订单履约等多个关键模块,支撑高并发、高可用、高扩展性的业务场景。 2、制定企业级 IT 技术战略与架构演进路线: 结合企业业务目标与市场趋势,主导长期和短期的技术选型、架构升级路径及数据体系建设方案,明确微服务治理、云原生演进、数据中台建设等关键技术方向。 3、完成企业现有系统架构反向工程与现状分析: 梳理并绘制企业原有系统的架构图与功能依赖关系,识别系统瓶颈与技术债务,为后续改造提供清晰蓝图。 4、基于 DDD 的系统建模与边界划分: 主导业务需求调研与领域驱动设计(DDD)建模,完成核心业务域拆分与限界上下文定义,统一业务与技术人员的认知,确保系统设计与业务逻辑高度对齐。 5、构建高可用、可扩展的微服务架构体系: 使用 Spring Cloud Alibaba 技术栈搭建分布式服务体系,解决原有系统老旧、启动慢、难扩展、信息孤岛等问题;通过异步解耦、服务自治等方式提升系统稳定性与响应能力。 6、数据架构优化与海量数据处理能力升级: 对 TB 级数据表进行 DDD 驱动的业务模型重构,合理拆分为 1000w 级别的业务表,提升查询效率; 实施分库分表策略,实现业务隔离与数据安全; 引入 Canal + MQ + ES 组合方案,实现数据实时同步、分发与多维查询,支持实时 BI 和智能推荐场景。 7、缓存体系与高并发访问能力设计: 设计本地缓存(Caffeine)+ 分布式缓存(Redis Cluster)+ 搜索引擎(ES)三层缓存架构,有效应对高并发访问压力,系统吞吐量提升 3倍以上,用户请求响应时间下降 60%。 任务调度与定时任务体系优化: 基于 Spring Boot + Quartz + XXL-JOB 构建分布式任务调度平台,简化开发流程,使定时任务模块开发效率提升 200%,任务执行成功率接近 100%。 8、构建 DevOps 与监控运维体系: 通过 Jenkins + Docker 实现 CI/CD 自动化流水线,部署效率显著提升; 利用 Prometheus + Grafana 实现全链路监控告警机制,保障系统运行稳定性; 配合大数据部门建设供应链智慧化平台,结合 AI 与大模型技术(如 Spring-AI、ChatGPT)实现智能预测、自动决策等功能,推动供应链智能化升级。 9、跨团队协作与问题攻坚: 担任供应链领域的技术负责人,协调产品、前端、测试、大数据等多个团队,推动集团整体数智化方案落地;深入一线解决复杂系统故障与性能瓶颈,保障平台稳定高效运行。
710Java零售电商
锦云营销中台产品系统
拈文投作为中国创意文化旅游产业领军品牌,为了支撑集团战略,决策进行基于互联网先进技术的数字化转型建设。为了能够快速响应市场的需求变化,形成以数据驱动业务决策为标志的企业数字化转型;也为了解决当前实际景区业务运营过程中的难点、痛点,使得系统未来能够全面支持多个景区的快速上线运营:以拈花湾景区现有信息化系统建设为参考,建设以互联网中台技术重塑业务流程和系统架构的新智慧景区云平台——“拈花智慧文旅云”。
340RocketMQ智慧景区
黑猫学术是一个ai的产品,目前主要定位于大学生提供论文生成服务,无论是大专,本科,硕士,博士学历层次。无论那个专业,都可以轻松的生成高质量的论文。论文的内容除了毕业论文外,还可以生成:期刊论文,开题报告,课程论文、实习报告等,答辩的PTT等服务。 后台使用mvc .net开发,论文同时支持PC,h5 和小程序三个平台。 ai生成论文部分,使用dify开源项目,适配多个ai工具。方便扩展。
380C#uniapp
本项目开发历时半年之久,团队成员组成总共4个,2个程序,2个美术。适合于消防队的消防演练,目前有5个模块,分别是:办公室着火,化工厂着火,储油罐着火,油罐车着火,和危险品转运5个业务模块。该系统具有以下特点: 1、以游戏的方式进行,支持多人协作消防演练。 2、结合水枪和灭火器硬件,体验感更好。 3、同时支持PCVR和一体机,HTC vive ,pico VR一体机。 4、有后台管理管理,自由配置每个模块的参数,演练完成后对效果进行评估。
340C#Unity
ai自动化爬虫产品系统
1.自动化爬虫,爬取兆级数据 2.数据筛选,塔尖llm 企业级RAG 3.智能体工具调用 4.获得多个竞赛奖项 5.使用celery分布式部署 6.mysql、mongodb、milvus多数据格式保存 7.部署于gitee,运用Jenkins一键化更新 8.搭建工作流与知识库,更具哦啊去数据录入知识库进行检索,提升RAG的检索能力
240Python推荐引擎
微博信息采集源文件源码
本方案用 Python requests 采集微博评论,先通过请求头与 Cookie 模拟浏览器。访问微博评论 API,传入微博 ID、页码等参数,获取数据后提取用户 ID、名称、地址及评论内容等关键信息。采集过程加入随机延时防封禁,多页数据自动拼接。最后用 pandas 将数据存入 Excel,支持追加扩充表格。使用前需替换 Cookie,注意控制爬取频率,遵守平台规则,确保数据采集合法合规,满足后续数据分析需求。
300Python PC网站
通过构建"全面感知、智能分析、穿透管控"的数字化监管体系,实现了施工安全管理的三个转变:从经验判断向数据决策转变、从事后处置向事前预防转变、从单点管控向系统治理转变,为新时代建设高质量发展提供技术保障。以"数据穿透、智能决策、闭环管控"为核心目标,构建三级联动的智能监管体系: 1、实现"建设指挥部-标段项目部-工点现场"全层级数据贯通 2、建立基于 AI 的智能风险预警与决策支持机制 3、形成"监测-预警-处置-反馈"的数字化闭环管理 4、达到重大风险识别率≥95%、隐患整改响应时间≤2 小时的核心指标
320前端uniapp
Rust 语言编写的基于 LL(1)预测分析表法实现的 C--编译器,数据类型支持 char 类型、int 类型和 float 类型,同时支持字符串给 char 型一维数组赋值。基本运算支持算术运算、比较运算、自增自减运算、复合赋值运算和逻辑运算。控制语句支持 if 语句、while 语句、do while语句、break、continue 语句、for 语句、switch 语句。支持多维数组、函数调用、单行注释和多行注释等,可最终编译成 MASM 汇编代码。同时也做了一些如常量替换、代码外提之类的代码优化。
360Rust语法解析工具
OA系统产品系统
办公自动化系统(OA),是指使办公活动科学化、自动化的设备体系,涵盖信息输入、加工、存储和输出功能 。其核心目标在于提升工作质量与效率,适用于各类办公场景。该系统功能模块包括公文管理、流程审批、协同办公、知识管理及移动办公等,支持多级审批流程。有了这个系统,不仅能保证员工的信息沟通更及时、方便,实行多人、多部门、跨地域的协同办公模式,还可以让日常许多通过手工完成的事情,被计算机和网络提供的功能所代替,实现标准化的工作流程管理。 OA的核心在于协同办公,**能满足企业团队沟通、协作的需求,让企业更高效地实现目标。
530C#jQuery对话框
访客系统开源项目
一款开源免费的访客在线预约登记系统 支持企业微信、邮箱接收审核消息 访客预约后提交的资料会及时的发送企业微信、邮件到被访人的手机和邮箱中,由被仿人确认(有些流程被访人确认后主管审核)访客二维码生效。 多库支持、不同类型的数据库迁移 访客在线预约登记系统使用的是postgres数据库,同时支持主流的数据库,如:Oracle,Mysql,Sqlserver,SqlLite等等,不同类型的数据库之间数据迁移。 自由开放的数据看板 数据看板使用的是GoView开源版本,可自由搭配各种图表。 对接海康综合安防管理平台 与海康综合安防管理平台对接,支持线上预约后刷人脸入场或开车入场。
700C#工业
全栈工程师,熟练使用Java后台开发,Web前端开发,聚焦GIS开发,对GIS数据在三维场景中的管理、展示、分析非常熟练。对桥梁结构安全进行全方位实时数据监测、综合预警、结构安全评估,准确、全面掌握桥梁运营期的环境参数及结构响应参数,并通过数据的分析对桥梁的使用状态和力学行为进行预警和初步评估,为桥梁的安全运营提供有力的保障。
370JavaGIS
语音房系统产品系统
功能模块: 房间模块:交友厅,感情厅,电台厅 排行榜 礼物打赏 礼物 打赏清单 背包,宝箱 靓号商城 邀请好友 任务中心 俱乐部等 项目技术栈 1.用户端:安卓:java(java语法) 苹果(iOS):obje-ctive-C 2.后台服务:PHP+MySQL+Nginx + Redis 3.管理系统:THINKPHP5 + Bootstrap 注意: 1.购买前请先联系客服看演示站,测试无误后再确定下单。 2.需要安装的先联系客服,请确保客服在线,并进行沟通以后再行购买。 3.价格稍有浮动,需要二开/定制等服务的先联系客服,按需定价,价格公道。 特此声明:本店所售程序只供娱乐模拟测试研究,不得使用于非法用途,不得违反国家法律,否则后果自负!购买以后使用一切法律责任后果都由购买者承担于本店无任何关系!
430PHP源码
当前共10万+个项目
×
寻找源码
源码描述
联系方式
提交