线上问题:
Kafka:
客户说Broker不时会发生些错误日志,也看到topic的tps下降很快很明显,
日志看是ISR在不断的伸缩,
监控发现发生问题时的CPU、IO、磁盘都没有瓶颈
再查看堆栈信息:可看到关键信息:
有锁等待!!!
说明Kafka Broker在这三种情况下都需要申请leaderIsrUpdateLock锁!
消息写入时需更新Kafka高水位线
处理消息请求时
ISR发生扩张与伸缩
方案
ISR的频繁扩张与收缩,直观的原因是:follower副本从Leader副本复制数据跟不上
调整了以下2参数解决:
replica.lag.time.max.ms从默认10s,调整为20s
num.replica.fetchers从默认值1调整为5
===============
原文地址:https://blog.csdn.net/a4453368/article/details/128495162
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。