Airbyte:來源新增一欄,要傳播結構還是回填歷史?

用兩筆虛構資料拆開檢查結構變更及歷史完整性。

來源: airbyte.com
August 24, 2026
1 min

Airbyte 在 2026 年 6 月更新的官方文說明連線層級可設定來源結構如何傳播。沒參與指標的新欄可先通知或暫不變;下游要看歷史時,新增欄位和補舊值是兩件事。官方文件區分同步期間偵測及後續處理,不要假設每種連接器或目的端都會回填。

用兩列驗收

離線造兩筆 A、B,以 ID 當鍵。來源新增 color,歷史值 A=TEAL、B=AMBER,新增後目的端都空。下一輪只重讀 A,只有 A 變成 TEAL。需要回看歷史時,即使兩邊仍各兩筆也不合格。規劃補跑後按 ID 對值,不把空值一概當沒有顏色。

Article img
三份假資料快照:兩值空、只有 A 有值,最後兩者一致。

原創對帳圖,非 Airbyte 輸出。三張快照列數相同,不能只檢查列數。

驗收歷史覆蓋

先確認連接器、同步模式和目的端支援,記下欄位定義、每鍵列數、覆蓋期間和已知空值。兩列、不重複、顏色一致才過。重複 A 或空 B 先停,查是否只讀到新資料。沒歷史需求可記生效日;有歷史需求要估補跑與下游重算,無法確認覆蓋時先人工審查再傳播。

內容說明:本文基於公開資料整理,僅供工具選型參考。產品功能、價格及相關政策可能隨時調整,請以官方最新資訊為準。

原文出處:airbyte.com