Apakah spark memberikan tanggal & waktu ketika acara tertentu diterima dalam streaming terstruktur?

Sumber data bertanggung jawab atas waktu kejadian, waktu penampakan biasanya adalah cap waktu dari sumber server pesan yang Anda baca (Kafka, Kinesis, dll) dan waktu pemrosesan dapat dimasukkan saat memproses aliran data yang masuk menggunakan fungsi paket current_timestamp. https://spark.apache.org/docs/latest/api/scala/index.html#org.apache.spark.sql.functions$ Ini bukan tepat ketika Spark menerima data dari server tetapi dekat dan akan dikelompokkan oleh interval pemicu. Perhatikan bahwa fungsi ini tidak dapat digunakan ketika dalam mode terus menerus. https://spark.apache.org/docs/latest/structured-streaming-programming-guide-supported-queries#html