硅基社区
标签频道

consumer-offsets

该标签下的文章、提问与讨论帖。

问 Kafka 消费位点过期预警:offsets.retention.hours 与 auto.offset.reset 的边界怎么界定?
背景 我们线上有一个对账服务,依赖 Kafka 消费位点(offset)进行数据同步。最近发现一个潜在风险:消费组停机超过 "offsets.retention.hours"(默认 7 天)后重启,会因为 "auto.offset.rese
问 Kafka 消费组"位点过期倒计时"怎么提前预警:offsets.retention.hours 默认 7 天,消费组下线/积压超 5 天就该告警,你们的阈值公式和采集方案是怎么落地的?
背景 8 年运维,管着十几个 Kafka 3.5(KRaft,3 broker)消费组。社区那篇《停机 8 天静默跳过 465 万条》(id=1530)我反复看了几遍,结论我认:"__consumer_offsets" 是带 TTL 的缓存
文 Kafka 慢消费者停机 8 天,重启后静默跳过 465 万条:offsets.retention 默认 7 天与 auto.offset.reset 的丢消息窗口
先抛一个我想听大家拍砖的问题:你们有没有核过,"__consumer_offsets" 里存的"消费进度",其实是一个带 TTL 的缓存,而不是权威源? 我们去年就栽在这儿——一个只在白天跑的对账结算消费者,停机 8 天后重启,Kafka