Denna artikel är en spegelartikel om maskinöversättning, klicka här för att hoppa till originalartikeln.

Utsikt: 15810|Svar: 2

Windows Kafka FEL Misslyckades med att rensa loggen för __consumer_offsets

[Kopiera länk]
Publicerad på 2021-07-06 13:30:04 | | |
Recension:

Kafka konfigurerar JMX:s fjärrövervakning
https://www.itsvse.com/thread-9968-1-1.html

Detaljerad förklaring av Kafkas konfigurationsparametrar
https://www.itsvse.com/thread-9965-1-1.html

Kafka ställer manuellt in offsetoffset
https://www.itsvse.com/thread-9641-1-1.html

Kafka-operationer för .NET/C#-meddelandeköer [med källkod]
https://www.itsvse.com/thread-9619-1-1.html


Windows Kafka-felet är följande:

[2021-07-06 09:05:54,809] FEL: Misslyckades med att rensa loggen för __consumer_offsets-42 i diret C:\tmp\kafka-logs på grund av IOException (kafka.server.LogDirFailureChannel)
java.nio.file.FileSystemException: C:\tmp\kafka-logs\__consumer_offsets-42\00000000000000000000.timeindex.cleaned -> C:\tmp\kafka-logs\__consumer_offsets-42\00000000000000000000.timeindex.swap:


[2021-07-06 09:06:06,460] FEL [Log partition=__consumer_offsets-42, dir=C:\tmp\kafka-logs] Kunde inte hitta offset-indexfilen motsvarande loggfilen C:\tmp\kafka-logs\__consumer_offsets-42\ 00000000000000000000.log, återställa segment och bygga upp indexfiler... (kafka.log.Logg)

[2021-07-06 09:06:10,607] ERROR-fel när man skapar ephemeral vid /brokers/ids/0, noden existerar redan och ägaren '72057597827809280' matchar inte nuvarande session '72057597827809313' (kafka.zk.KafkaZkClient$$ CheckedEphemeral)
[2021-07-06 09:06:10,616] FEL [KafkaServer id=0] Fatalt fel vid KafkaServer-uppstart. Förbered för avstängning (kafka.server.KafkaServer)
org.apache.zookeeper.KeeperException$NodeExistsException: KeeperErrorCode = NodeExists
        på org.apache.zookeeper.KeeperException.create(KeeperException.java:126)
        at kafka.zk.KafkaZkClient$CheckedEphemeral.getAfterNodeExists(KafkaZkClient.scala:1904)
        at kafka.zk.KafkaZkClient$CheckedEphemeral.create(KafkaZkClient.scala:1842)
        at kafka.zk.KafkaZkClient.checkedEphemeralCreate(KafkaZkClient.scala:1809)
        på kafka.zk.KafkaZkClient.registerBroker(KafkaZkClient.scala:96)
        på kafka.server.KafkaServer.startup(KafkaServer.scala:308)
        På Kafka. Kafka$.main(Kafka.scala:109)
        På Kafka. Kafka.main (Kafka.scala)


Tillfällig lösning

Stoppa zookeeper och Kafka, radera alla filer under mappen C:\tmp\kafka-logs\__consumer_offsets-42\.





Föregående:Under Windows, se programmet som Java.exe tillhör
Nästa:Installation och distribution av Linux Redis-källkod
 Hyresvärd| Publicerad på 2021-07-06 13:34:36 |
Kafka-processen hänger upp då och då.

1、FEL Misslyckades med att rensa loggen för __consumer_offsets-30 i dir/tmp/kafka-logs på grund av IOException (kafka.server.LogDirFailureChannel)

2. Linux rensar filerna i /tmp-katalogen regelbundet, och min kafka-loggfilskatalog placeras i katalogen /tmp/kafka-logs, vilket gör att den rensas regelbundet, så kafka gör ett fel när man försöker läsa eller lägga till loggar.
grep log.dirs /opt/kafka_2.12-2.3.0/config/server.properties
/tmp/kafka-logs
3. Modifiera
log.dirs=/opt/kafka_2.12-2.3.0/kafka-logs/
4. Starta om kafka
5. Lägg till Kafka-loggkatalogen i saneringsvitlistan
Rensningen av /tmp-katalogen under centos7 ansvarar för servicesystemd, och dess relaterade konfigurationsfiler finns i katalogen /usr/lib/tmpfiles.d, vi ändrar konfigurationsfilen tmp.conf och lägger till kafka-loggkatalogen i den.
#防止删除kafka日志文件
X /tmp/kafka-logs

Rensningen av /tmp-katalogen i centos6 sker via tmpwatch, som bygger på cron-tiden, och schemaläggningsfilen är /etc/cron.daily/tmpwatch
#防止删除kafka日志文件
X /tmp/kafka-logs
 Hyresvärd| Publicerad på 2021-07-12 10:57:17 |
Kafka Windows-systemet kommer att hänga upp efter att ha varit igång en tid
https://www.itsvse.com/thread-9984-1-1.html
Friskrivning:
All programvara, programmeringsmaterial eller artiklar som publiceras av Code Farmer Network är endast för lärande- och forskningsändamål; Ovanstående innehåll får inte användas för kommersiella eller olagliga ändamål, annars kommer användarna att bära alla konsekvenser. Informationen på denna sida kommer från internet, och upphovsrättstvister har inget med denna sida att göra. Du måste helt radera ovanstående innehåll från din dator inom 24 timmar efter nedladdning. Om du gillar programmet, vänligen stöd äkta programvara, köp registrering och få bättre äkta tjänster. Om det finns något intrång, vänligen kontakta oss via e-post.

Mail To:help@itsvse.com