كيف تختلف هندسة البيانات عن علم البيانات؟
هندسة البيانات تحدث قبل علم البيانات في دورة حياة البيانات. البيانات يمكن ان تتولد من مصادر مختلفة وهذه البيانات الخام يمكن ان تكون منظمة او شبه منظمة او حتى غير منظمة. عشان نعطي معنى لهذه البيانات، يجب استيعاب البيانات وتحويلها. هذا هو وقت تدخل فيه هندسة البيانات في الصورة. هندسة البيانات تتضمن عملية استخراج البيانات الخام، واستيعاب البيانات في نظام مثل بحيرة البيانات، وتحويل البيانات لاحتياجات العمل وأخيرا تحميلها في جدول. هذا معروف عادة باسم ELT (إستخراج تحميل تحويل). يمكن ايضا استخدام ETL (Extract-Transform-Load) عندما يحدث التحول قبل مرحلة التحميل. علم البيانات والتحليلات هي الخطوة التالية في دورة حياة البيانات. بعد ما تتوفر البيانات المطلوبة للاحتياجات التجارية المحددة، يستخدم علماء البيانات هذه البيانات لتشغيل نماذج التعلم الآلي للعثور على النموذج الأكثر دقة. هذه البيانات متاحة لعلماء البيانات في شكل جداول. محللو البيانات يستخدموا هذه البيانات ليقوموا ببعض التحليلات الاستكشافية ويخلقوا لوحات القيادة. في جوهرها، دورة حياة البيانات ستكون على النحو التالي: بيانات خام من مصادر مختلفة -> هندسة البيانات -> علوم البيانات والتحليلات