واش كايعطي سبارك التاريخ والساعة اللي فيه يتم استلام حدث معين في التدفق المهيكلة؟
مَاشِي مباشرة. مصدر البيانات هو المسؤول عن وقت الحدث، وقت الوصول هو عادة الختم الزمني من مصدر سيرفر الرسالة اللي كتقرا منه (كافكا، كينيسيس، إلخ) و يمكن إدراج وقت المعالجة عند معالجة تدفق البيانات الواردة باستخدام وظيفة current_timestamp. https://spark.apache.org/docs/latest/api/scala/index.html#org.apache.spark.sql.functions$ دا ماشي بالضبط وقت ما تلقى فيه سبارك البيانات من سيرفر ولكن هو قريب وسيتم تجميعها حسب فترة الزناد. لاحظ بلي هاد الوظيفة ما تقدرش تستخدم لما تكون في الوضع المستمر.