資料工程與資料科學有何不同？
在資料生命週期中，資料工程發生在資料科學之前。資料可以從各種來源生成，並且該原始資料可以是結構化的、半結構化的甚至非結構化的。為了理解這些資料，必須攝取和轉換資料。這就是資料工程出現的時候。資料工程包括提取原始資料、將資料引入資料湖等系統、根據業務需求轉換資料並最終將其載入到表中的過程。這通常稱為 ELT（提取-載入-轉換）。 ETL（提取-轉換-載入）也可以在載入階段之前進行轉換。
資料科學和分析是資料生命週期的下一步。一旦獲得特定業務需求所需的資料，資料科學家就會使用這些資料來執行機器學習模型，以找到最準確的模型。這些資料以表格的形式提供給資料科學家。資料分析師還使用這些資料進行一些探索性分析並建立儀錶板。
本質上，資料生命週期如下所示：
來自不同來源的原始資料 -> 資料工程 -> 資料科學與分析