Kafka

Kafka分布式事件流平台,现为Apache开源项目。它以高吞吐、低延迟著称,每秒可处理数百万条消息,并支持数据持久化与多副本容错 。其核心架构基于主题(Topic)和分区(Partition),通过生产者(Producer)和消费者(Consumer)实现发布订阅模式,广泛应用于实时日志收集、消息队列、用户行为跟踪和流处理等大数据场景。
广告系统开发产品系统
核心功能1. 广告主管理广告主注册、资质审核、账户管理、余额充值、消费明细查询。​2. 广告计划管理新建广告计划、广告单元、广告创意;支持启停、编辑、删除、投放时段控制。​3. 广告投放与曝光广告实时检索、策略匹配、流量分配、曝光去重、点击防作弊。​4. 定向投放能力支持地区、设备、年龄、性别、兴趣
340Java项目任务
爬虫系统产品系统
核心功能-任务管理:支持新增、启动、暂停、删除爬虫任务,可视化配置抓取规则​-多线程/分布式采集:高并发抓取,提升采集效率,支持多站点同时运行​-页面解析:HTML解析、JSON接口解析、正则匹配、XPath/CSS选择器提取​-数据处理:自动清洗、格式化、去重、校验、结构化存储​-反爬应对:请求头
350Java项目任务
tecoai产品系统
一、项目功能模块(Topology-Distilled)安全隔离网关:负责统一契约收口与租户流量隔离。状态流转引擎:负责资源生命周期的标准化状态迁移。策略准入中心:负责非侵入式的业务规则解析与动态加载。异步审计模块:负责底层状态与数据库的最终一致性对账。多租户网关 输入:gRPC/REST。逻辑:提
280Python开发工具
为了解决这些问题,我主导了ES的全栈云原生化转型,开发了ES云原生平台,主要包括如下功能:1.集群搭建(Deploy):自助申请,帮助用户快速启动和配置ES集群2.集群变更(Update):支持业务用户或SRE对集群做规格变更、配置变更、扩缩容、重启等操作3.索引管理(Usage):提供创建、删除、
510Java项目任务
数据采集产品系统
系统具备定时采集、数据清洗、存储等功能,能够按照设定的规则自动采集指定facebook页面或用户的数据。在后台管理中,可以浏览采集数据的详情、图片、帖子等信息。
400Java企业服务
1.蜘蛛池核心模块:①分布式IP池管理(动态切换海外高匿IP,模拟多地区真实访问,规避谷歌风控);②智能蜘蛛诱捕(分析谷歌蜘蛛抓取规律,定时推送高质量链接,提升抓取频率);③行为模拟(模拟真实用户的点击、停留、跳转行为,提升页面权重);④抓取数据监控(实时统计谷歌蜘蛛抓取量、收录量、抓取成功率)。2
410Python机器深度学习
1.商品管理模块:①多语种商品信息管理(支持英/西/阿/日等10+语种自动翻译+人工校对);②多平台商品同步(一键上架至亚马逊/速卖通/Shopee/独立站);③智能定价(根据汇率、关税、竞品价格自动调整售价);④库存全局管理(多仓库存实时同步,缺货预警)。2.订单管理模块:①多渠道订单聚合(自动抓
400PHP电商
项目核心功能模块包括:可信数据存证模块:基于联盟链技术,对政务审批、合同签署、资质认证等关键业务数据进行上链存证,确保数据不可篡改、全程可追溯。跨部门协同办理模块:通过智能合约实现多部门间的业务流程自动化流转,打破数据孤岛,大幅缩短事项办理周期。公众服务门户模块:为企业和个人提供一站式政务服务入口,
750Java项目任务
用户角色与门户模块:清晰区分“开发者”与“雇主”两种角色入口,提供差异化的个人中心/企业中心。开发者展示与筛选模块:包含程序员简历库、技术栈标签(如Java/Python/前端)、工作模式(远程/兼职/全职)、薪资期望、历史项目经验等高级筛选器。需求发布与匹配模块:雇主可在此发布项目需求(含功能描述
850C企业服务
数据中台项目产品系统
1、设计多源数据整合方案,搭建标准化数据资源池,支撑9万+服务企业数据统一管理;2、主导数据模型全链路开发(ODS/DWD/DWS/ADS分层),设计场景标签与维度模型,优化查询性能,保障模型合理高效;3、参与集团数据治理体系搭建,负责数据质量校验脚本开发,协助搭建元数据平台实现资产可视化;4、负责
770Kafka项目任务
Shuttle bus产品系统
•核心职责&架构贡献:1.分析班车业务核心痛点(如线路优化、实时跟踪),设计“调度服务、轨迹服务、统计服务”三大核心模块,选用MongoDB存储海量轨迹数据,MySQL存储结构化业务数据,兼顾性能与查询效率;2.引入Kafka中间件处理实时刷卡数据与轨迹数据,解决高并发场景下的数据积压问题,缩短数据
1090Java项目任务
MES系统产品系统
1.订单模块: 对接第三方系统导入订单数据到我们系统,且支持手动更改,订单确定之后成功导入2.生产单模块:确认后的订单可选择多个订单生成生产单,后期当做一个单进行派工分发操作3.生产派工:按生产单生成组别派工单,把生产单派给某一个生产组别,然后根据组别派工单选择员工生成员工派工单4.计产模块:员工根
1190Java项目任务
1.Kinmouse图形建模模块(exp-kinmouse)模块职责:负责可视化数据建模功能的设计与实现技术实现:基于SpringBoot构建RESTfuIAPI服务实现图形化建模工具的后端逻辑支持拖拽式建模和模型配置管理集成函数库管理和脚本执行引擎核心功能:数据模型图形化设计界面支持模型节点和连接
790Java企业服务
1、管理员功能:用户管理、商品管理、大屏观察、数据分析、订单管理、个人中心等2、用户功能:商品浏览、商品收藏、推荐、购物车、商品评论、个人中心等3、系统公告和轮播图的管理
970Java项目任务
1)基础信息:基本信息、宽带信息、ip信息、证件信息等。2)虚拟身份:个人身份证或手机号下的全部账号信息、注册信息,最近常用账号,数据来源提供方。3)规律分析:地址规律分析、生活出行规律分析,人员聚集分布分析,网络订单分析。4)行为分析:安装及使用APP,境外IP访问。5)内容分析:展示个人身份证或
2130Java网络安全
项目描述 Ape-Frame是一款专门企业级开发脚手架,内部进行高度封装集成,覆盖企业级开发常用的工具及业务场景。达到开箱即用,上手快,学习成本低的价值导向。用于解决中小项目进行开发时,每次要进行框架搭建选择的痛点。进行统一的规范和组件封装,使开发者更加专注于业务价值。 技术栈:SpringBoot+SpringCloud+MyabtisPlus+Mysql+Redis+Guava+xxl-Job+rocketMq 技术要点: 独立从0到1负责项目的架构设计,技术选型,把控框架质量及框架价值导向,调研业务场景; 采用模块化思想,对项目模块进行拆分设计,模块可插拔,可按需选择模块装载,模块间解耦; 负责核心common-redis模块的建设,提供分布式锁,本地缓存,lua脚本,pipeline等功能设计; 对常用业务场景,例如数据归档,链路追踪,多数据源等进行覆盖封装,提高开发速度,简化开发步骤。 集成常用中间件mysql,redis,es,mq,xxljob等,并提供集成demo和starter封装;
4710java网页开发工具
1.参与公司岗前培训,熟悉公司研发的框架与代码编写规范; 2.参与公司项目设计的讨论,与用户沟通确定需求; 3.参与软件系统的设计、开发等工作; 4.负责软件系统中主要功能的代码实现和单元测试,保证项目的质量; 5.编写数据库设计文档与系统接口文档; 6.参与项目的调试、部署与上线;
2720java数据库驱动程序
该产品的目标:致力于建设覆盖生产、经营、使用等各环节的医疗器械全生命周期追溯管理体系,实现医疗器械日常监管、采购流向、临床应用等信息平台的数据共享,有效提升产品监管效率、医疗卫生管理效能,提高医疗保障水平。 我在工作中主要负责:1 产品设计 2 模型设计 3 工作分配 4 后端代码开发
2370kafka物联网
品牌广告业务系统架构,主要服务于大客户、品牌广告的生产,打造客户品牌影响力。利用平台自有的流量以及自主开发的广告主来实现业务闭环。为品牌广告管理投放、运营管理等提供解决方案。1、系统主要分为运营平台、刊例价系统、广告投放系统、crm管理系统。 通过合同、资源、财务、广告、内容、活动等功能模块。完成建广告主客户,订单和排期,模版关联刊例价,审核以及广告主通过投放平台发布广告,依赖于广告引擎投放,完成召回等一系列操作。
2840kafkaspringboot
●背景 优选经营运营同学需要定义规则根据商品属性进行匹配,对匹配到的商品进行一定的动作,比如禁 售、标记等。人工筛选显然效率低,故需要建设策略平台 ● 服务介绍 整体采用 spring boot 框架;通过 thrift RPC 框架与上下游(包括前端页面和第三方服务)进行交 互。通过 MySQL 存储一些规则配置信息;ES 存储执行日志信息和商品指标数据; Redis 缓存执行 结果;引擎层用到的是公司统一的平台,其底层还是依赖 aviator 做的实现。执行结果等消息会通 过 kafka 发送。 ● 个人职责 1. 负责初期整体项目设计、搭建。按照 DDD 设计思想设计项目模块。 2. 负责策略相关存储模型设计。创建 MySQL 表以及相关 Java 模型。 3. 负责底层规则引擎的调研和文档输出。 4. 负责规则引擎的交互设计、开发以及后期维护(可用性、可靠性、及时性保证)
3460java项目构建
当前共22个项目more
×
寻找源码
源码描述
联系方式
提交