Kafka

Kafka分布式事件流平台,现为Apache开源项目。它以高吞吐、低延迟著称,每秒可处理数百万条消息,并支持数据持久化与多副本容错 。其核心架构基于主题(Topic)和分区(Partition),通过生产者(Producer)和消费者(Consumer)实现发布订阅模式,广泛应用于实时日志收集、消息队列、用户行为跟踪和流处理等大数据场景。
项目背景:离线链路只能T+1、业务看不到「现在卖得怎么样」,故补分钟级实时链路,与离线集群同机共存构成Lambda架构雏形|▪实时ETL与数据质量验证:高仿真订单生产者模拟真实生产:泊松到达+21点峰值波峰+8品类加权+二八用户分布,注入1%脏数据验证清洗拦截与巡检不误报;FlinkSQL事件时间+
770Python云计算
当前共1个项目more
×
寻找源码
源码描述
联系方式
提交