Pour la couche Bronze, comment suggérez-vous de traiter les sources de données qui arrivent en JSON/CSV/Avro, etc. (données SQL Onprem importées en json via Azure Data Factory dans ADLS ou appels API qui renvoient JSON) Devraient-elles être stockées sans traitement dans la couche bronze d'ADLS/traitées et stockées en tant que Delta dans bronze ou devrions-nous avoir une couche pré-bronze ?
For Bronze layer, how do you suggest handling the data sources that are coming as JSON/CSV/Avro, etc. (Onprem SQL data imported as json via Azure Data Factory into ADLS Or API Calls that return JSON) Should that be stored without processing in bronze layer in ADLS/Process them and store as Delta in bronze or should we have a pre bronze layer?
Either method will work.  There are some advantages to using a delta bronze layer over relying on your JSON files in ADLS.  It is a lot more performant to re-process data that's in the bronze delta format than re-processing the json files in ADLS.  This is because all of your data will be consolidated and filesizes will be optimized in your bronze layer.
L'une ou l'autre méthode fonctionnera.  L'utilisation d'une couche delta bronze présente certains avantages par rapport à l'utilisation de fichiers JSON dans ADLS.  Il est beaucoup plus performant de retraiter les données au format delta bronze que de retraiter les fichiers JSON dans ADLS.  En effet, toutes les données seront consolidées et la taille des fichiers sera optimisée dans la couche de bronze.
general_qa
fr