Domande taggate «apache-kafka»

Apache Kafka è una piattaforma di streaming distribuita progettata per archiviare ed elaborare flussi di dati ad alta velocità.

18
Elimina argomento Kafka
C'è un modo per eliminare l'argomento in kafka? Ho inserito un messaggio troppo grande in un argomento di messaggio kafka sul mio computer locale, ora sto ricevendo un errore: kafka.common.InvalidMessageSizeException: invalid message size Aumentare fetch.sizenon è l'ideale qui, perché in realtà non voglio accettare messaggi così grandi.
23
Leader non disponibile Kafka in Console Producer
Sto cercando di usare Kafka. Tutte le configurazioni sono eseguite correttamente ma quando provo a produrre un messaggio dalla console continuo a ricevere il seguente errore WARN Error while fetching metadata with correlation id 39 : {4-3-16-topic1=LEADER_NOT_AVAILABLE} (org.apache.kafka.clients.NetworkClient) Versione Kafka: 2.11-0.9.0.0
3
Cosa determina l'offset del consumatore Kafka?
Sono relativamente nuovo a Kafka. Ho fatto un po 'di sperimentazione, ma alcune cose non sono chiare per quanto riguarda l'offset del consumatore. Da quello che ho capito finora, quando un consumatore inizia, l'offset da cui inizierà la lettura è determinato dall'impostazione di configurazione auto.offset.reset(correggimi se sbaglio). Ora, ad esempio, …
4
Modellazione dei dati con Kafka? Argomenti e partizioni
Una delle prime cose a cui penso quando utilizzo un nuovo servizio (come un archivio dati non RDBMS o una coda di messaggi) è: "Come devo strutturare i miei dati?". Ho letto e visto alcuni materiali introduttivi. In particolare, prendiamo ad esempio Kafka: un sistema di messaggistica distribuita per l'elaborazione …
168 apache-kafka 
7
Apache Kafka contro Apache Storm
Apache Kafka: sistema di messaggistica distribuito Apache Storm: elaborazione messaggi in tempo reale Come possiamo utilizzare entrambe le tecnologie in una pipeline di dati in tempo reale per l'elaborazione dei dati degli eventi? In termini di pipeline di dati in tempo reale, entrambi mi sembrano fare il lavoro identico. Come …
2
La chiave è richiesta come parte dell'invio di messaggi a Kafka?
KeyedMessage<String, byte[]> keyedMessage = new KeyedMessage<String, byte[]>(request.getRequestTopicName(), SerializationUtils.serialize(message)); producer.send(keyedMessage); Attualmente sto inviando messaggi senza alcuna chiave come parte di messaggi con chiave, funzionerà ancora delete.retention.ms? Devo inviare una chiave come parte del messaggio? È utile inserire la chiave come parte del messaggio?
14
Elimina argomento in Kafka 0.8.1.1
Devo eliminare l'argomento testin Apache Kafka 0.8.1.1. Come espresso nella documentazione qui , ho eseguito: bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic test Tuttavia, questo risulta nel seguente messaggio: Command must include exactly one action: --list, --describe, --create or --alter Come posso eliminare questo argomento?
2
Differenza tra Redis e Kafka [chiuso]
Chiuso . Questa domanda deve essere più mirata . Attualmente non accetta risposte. Vuoi migliorare questa domanda? Aggiorna la domanda in modo che si concentri su un problema solo modificando questo post . Chiuso 4 mesi fa . Migliora questa domanda Redis può essere utilizzato come pub-sub in tempo reale …
Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.