返回到文章

采纳

编辑于 3年前

Kafka 加载受损索引文件出错 Attempt to append an offset (49760738) to position 3006 no larger than the last offset appended (49760738)

kafka

kafka 2.6.2 进程异常退出

1、异常退出,导致索引文件受损,导致发送端耗时升高,再次重启,加载到该文件出错。
2、只有这个topic有问题:__consumer_offsets

Error processing append operation on partition __consumer_offsets-21 (kafka.server.ReplicaManager)
org.apache.kafka.common.errors.InvalidOffsetException: Attempt to append an offset (49760738) to position 3006 no larger than the last offset appended (49760738) to /opt/esearch/kafka_cluster/kaf
ka-logs/__consumer_offsets-21/00000000000049669327.index.

4、错误信息如上,集群超半数节点都出现了该问题。
5、重启Kafka节点只能短暂修复,半个小时后还是会异常。也曾替换正常节点的索引,无效。希望有一种解决办法。