kafka宕机时发送消息也不例外

Question

我有 kafka 随机下降的情况。当我向 kafka 发送消息并且它关闭时，我想单独处理它。但是当我在 kafka 关闭时向它发送消息时，没有例外，所以我无法确定 kafka 是否已关闭。有什么办法可以捕获异常和丢失的消息。

我有一个非常基本的代码

public static void main(String[] args) {
    String topicName = "test-1";

    Properties props = new Properties();
    props.put("bootstrap.servers", "localhost:9092");
    props.put("acks", "all");
    props.put("retries", 0);
    props.put("batch.size", 16384);
    props.put("linger.ms", 1);
    props.put("buffer.memory", 33554432);
    props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
    props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

    Producer<String, String> producer = new KafkaProducer<>(props);

    for (int i = 0; i < 10; i++) {
        producer.send(new ProducerRecord<>(topicName, Integer.toString(i), Integer.toString(i)));
    }
    System.out.println("Message sent successfully");
    producer.close();
}

Answer 1

您需要发送一个同步调用才能从 Kafka 获得响应。

for (int i = 0; i < 10; i++) {
    ProducerRecord<String, String> record = 
              new ProducerRecord<>(topicName, Integer.toString(i), Integer.toString(i));
    try {
           producer.send(record).get();
    } catch (Exception e) {
           e.printStackTrace();
           // Handle message that has failed
    }
}

方法.get()将返回来自 Kafka 的响应。当记录推送到Kafka失败时会抛出异常。成功发送记录后，RecordMetadata将返回a。