【Praktische Gevecht】Kafka parameterafstemming lost het probleem van te grote berichtenbody op

Klein tuig · Geplaatst op 13-12-2021 16:25:11

Bij het verzenden van berichten met Kafka staat de producer max.request.size standaard op het volgende:1048576(1M) in grootte.

Als het producer-berichtlichaam meer dan 1MB is, wordt de volgende foutmelding gerapporteerd:

Het bericht is 18685640 bytes wanneer het geserialiseerd is, wat groter is dan 1048576, wat de waarde is van de max.request.size-configuratie.

oplossing

Stel bijvoorbeeld in het lenteproject de maximale verzoekgrootte in in het configuratiebestand van het project20MBAls volgt:

Inloggen is zichtbaar.

Nadat de installatie is voltooid, start je het project opnieuw op, en je ziet dat de instellingen succesvol zijn, zoals te zien is in de onderstaande figuur:

Wanneer het verzonden bericht meer dan 1MB is, wordt er een nieuwe foutmelding gemeld, als volgt:

Het verzoek bevatte een bericht dat groter was dan de maximale berichtgrootte die de server accepteert.

oplossing

Log in op de Kafka-server en wijzig ditserver.propertiesBestand voeg de volgende configuratie toe:

Inloggen is zichtbaar.

Standaard: 1000012, bijna 1M, de maximale grootte berichten die de server kan ontvangen.

Start de Kafka-dienst opnieuw en het probleem is opgelost.

Er zijn geen andere instellingen voor consumentenBijvoorbeeld:

Inloggen is zichtbaar.

(Einde)

Klein tuig · Geplaatst op 13-12-2021 16:31:31

Opmerking: Deze parameter werkt niet op het aangemaakte onderwerp nadat het is aangepast

Pas de aangemaakte topicparameters aan: bin/kafka-configs.sh --zookeeper localhost:2181 --alter --topic topicName --config max.message.bytes=62914560

Perfecte oplossing

vliegende vis · Geplaatst op 26-12-2021 17:16:30

Leer leren...

【Praktische Gevecht】Kafka parameterafstemming lost het probleem van te grote berichtenbody op

Gerelateerde berichten

Secties bekeken