Bagaimana saya bisa memastikan pengiriman tepat sekali ketika membaca data dari Kafka dengan Spark?

Untuk memastikan pengiriman tepat sekali, Anda dapat menggunakan pengaturan produser idempotent di Kafka dan mekanisme checkpointing di Spark Structured Streaming. Hal ini mungkin dicapai jika wastafel Anda adalah tabel delta, tetapi tidak jika wastafel adalah topik Kafka lainnya.