بتوفر سبارك التاريخ والوقت اللي بيوصل فيه حدث معين في التدفق المنظم؟
مش مباشرة. مصدر البيانات مسؤول عن وقت الحدث، وقت <unk>وصول<unk> هو عادةً الختم الزمني من مصدر خادم الرسائل اللي انت تقرأ منه (كافكا، كينيسيس، إلخ) ويمكن إدراج وقت <unk>معالجة<unk> عند معالجة تدفق البيانات الواردة باستخدام وظيفة current_timestamp function. https://spark.apache.org/docs/latest/api/scala/index.html#org.apache.spark.sql.functions$ مش ده بالضبط وقت استلام سبارك للبيانات من الخادم لكن قريب وسيتم تجميعه حسب فترة الزناد. لاحظ إن الوظيفة دي مش ممكن تستخدم لما تكون في وضع مستمر. https://spark.apache.org/docs/latest/structured-streaming-programming-guide.html#supported-queries