java怎么往kafka寫數(shù)據(jù)

170次閱讀

共計 1415 個字符，預(yù)計需要花費 4 分鐘才能閱讀完成。

在 Java 中，你可以使用 Kafka 提供的 Producer API 來向 Kafka 寫入數(shù)據(jù)。以下是一個簡單的示例代碼：

import org.apache.kafka.clients.producer.*;
import java.util.Properties;
public class KafkaProducerExample {public static void main(String[] args) {
// 設(shè)置 Kafka 相關(guān)配置
Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9092");
props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");
// 創(chuàng)建一個 Kafka 生產(chǎn)者
Producer producer = new KafkaProducer(props);
// 構(gòu)建一個消息
String topic = "my-topic";
String key = "my-key";
String value = "Hello, Kafka!";
// 發(fā)送消息到 Kafka
ProducerRecord record = new ProducerRecord(topic, key, value);
producer.send(record, new Callback() {
@Override
public void onCompletion(RecordMetadata metadata, Exception exception) {if (metadata != null) {System.out.println("消息發(fā)送成功，偏移量為：" + metadata.offset());
} else {System.out.println("消息發(fā)送失敗，原因為：" + exception.getMessage());
}
}
});
// 關(guān)閉 Kafka 生產(chǎn)者
producer.close();}
}

上述代碼中，我們首先創(chuàng)建了一個包含 Kafka 相關(guān)配置的 Properties 對象，然后使用這些配置創(chuàng)建了一個 Kafka 生產(chǎn)者。接下來，我們構(gòu)建了一個消息，并使用 ProducerRecord 將該消息發(fā)送到指定的主題。最后，我們通過調(diào)用 close() 方法關(guān)閉了 Kafka 生產(chǎn)者。
你需要根據(jù)自己的 Kafka 配置修改 bootstrap.servers 屬性的值，以及指定正確的主題名稱。另外，你也可以根據(jù)自己的需求修改消息的鍵和值。
需要注意的是，上述代碼中的消息發(fā)送是異步的，即 producer.send() 方法會立即返回，而不會等待消息被寫入 Kafka。如果你需要同步地發(fā)送消息，可以使用 send().get() 方法，這將阻塞當(dāng)前線程，直到消息發(fā)送完成。
此外，你還可以在回調(diào)函數(shù)的 onCompletion() 方法中處理發(fā)送結(jié)果。當(dāng)消息成功被寫入 Kafka 時，metadata參數(shù)將包含有關(guān)寫入的消息的元數(shù)據(jù)，包括主題、分區(qū)和偏移量等信息。如果發(fā)送失敗，exception參數(shù)將包含有關(guān)失敗原因的異常信息。
希望以上信息對你有所幫助！