單元評量

1.

使用 Lakeflow Connect 進行資料擷取的主要優勢，與撰寫自訂擷取程式碼相比是什麼？

Lakeflow Connect 可為已擷取的資料提供更快的查詢效能

Lakeflow Connect 提供可自動處理變更資料擷取與管線協調的管理連接器

Lakeflow Connect 所需的 Unity Catalog 權限比基於筆記本的資料擷取需求較少

2.

資料工程師應該使用哪種 SQL 指令，才能持續從雲端儲存載入新檔案，而不需重新處理已被接收的檔案？

使用 read_files 函式的 CREATE TABLE AS SELECT

建立或替換表格

複製到

3.

在變更資料擷取（CDC）流程中，序列欄位的目的為何？

當紀錄未按順序到達時，判斷變更步驟的正確順序

指定目的地資料表中應包含哪些欄位

用以辨識哪些紀錄應視為刪除

4.

當資料工程師想要處理所有可用的串流資料並停止串流時，應該使用哪種觸發模式？

使用短間隔的 processingTime 觸發程序

availableNow 觸發器

預設觸發器，沒有設定

5.

當自動載入器在使用 addNewColumns 架構演化模式時偵測到來源檔案中的新欄位會發生什麼事？

串流會忽略新欄位，繼續處理且不做任何變更

串流失敗時，會新增欄位到結構中，串流在重新啟動時仍會以更新的架構繼續運作

新欄位會被擷取到_rescued_data欄位，且不會修改結構

6.

在 Lakeflow 管線中使用明確的流程，將多個來源的資料匯入單一資料表的主要好處是什麼？

明確流程處理資料的速度比以 UNION 為基礎的方法更快

顯式流程允許新增新的來源流程，而無需修改現有流程或觸發完整刷新

明確的流程會自動從多個來源去除重複紀錄

檢定您的知識