كيف هندسة البيانات تختلف عن علم البيانات؟
هندسة البيانات تحدث قبل علم البيانات في دورة حياة البيانات. البيانات يمكن ان تتولد من مصادر مختلفة وهذه البيانات الخام يمكن ان تكون منظمه او شبه منظمه او حتى غير منظمه. ليكون معنى لهذه البيانات، البيانات يجب ان تُستوعب وتتحول. هذا هو المكان الذي تدخل فيه هندسة البيانات في الصورة. هندسة البيانات تتضمن عملية استخراج البيانات الخام، واستيعاب البيانات في نظام مثل بحيرة البيانات، وتحويل البيانات لاحتياجات العمل وأخيرا تحميلها في جدول. هذا معروف عادة باسم ELT (استخراج-تحميل-تحويل). ETL (Extract-Transform-Load) ممكن ايضا عندما يحدث التحول قبل مرحلة التحميل. علم البيانات والتحليلات هي الخطوة التالية في دورة حياة البيانات. بمجرد ان تتوفر البيانات اللازمة للاحتياجات التجارية المحددة، يستخدم علماء البيانات هذه البيانات لتشغيل نماذج التعلم الآلي للعثور على النموذج الأكثر دقة. هذه البيانات متاحة لعلماء البيانات في شكل جداول. محللو البيانات يستخدمون ايضا هذه البيانات للقيام ببعض التحليلات الاستكشافية وخلق لوحات القيادة. في جوهرها، دورة حياة البيانات ستبدو كالتالي: بيانات خام من مصادر مختلفة -> هندسة البيانات -> علم البيانات والتحليلات