對於青銅層,您如何建議處理以JSON/CSV/Avro等形式傳入的資料來源 (通過Azure Data Factory將本地SQL資料作為json匯入到ADLS或返回JSON的API呼叫) 應該在ADLS中不處理地儲存在青銅層中/處理它們並儲存為青銅中的Delta,還是我們應該有一個前青銅層?
無論哪種方法都能起作用. 使用 delta 銅層比依賴 ADLS 中的 JSON 檔案有一些優勢. 而不是在ADLS中重新處理json檔案. 因為所有的資料都將被整合, 檔案大小也將被優化.