某公司有一個地端 Oracle 資料倉儲，目前正在 Amazon S3 上建置資料湖。他們需要將倉儲資料表載入 S3，並透過每日增量資料保持同步。每個資料表都有一個單調遞增的欄位，大小在 50 GB 以下，每日凌晨 1 點到 2 點之間重新整理，BI 查詢則在上午 10 點到晚上 8 點之間執行。哪種方法在操作上最有效率？

此選項結合了 AWS DMS 的初始完整載入和變更資料擷取 (CDC) 功能，以有效率地處理資料同步。DMS 完整載入可快速將現有資料移至 S3，而 CDC 任務則能持續捕捉增量變更。由於資料表有單調遞增欄位，DMS 可以利用此特性進行高效的 CDC。接著，使用 AWS Glue 的自訂邏輯將這些每日增量資料附加到 S3 中的完整載入副本，確保資料湖的即時更新，同時避免重複載入。 其他選項的缺點： 使用 AWS Glue JDBC 連線並設定任務書籤雖然可行，但 AWS DMS 更專為異質資料庫遷移和 CDC 設計，通常在效能和管理上更具優勢，尤其是在處理大型初始載入時。 每天使用 AWS DMS 或 AWS Glue 進行完整載入並覆寫前一天的副本，效率極低。這會導致大量的重複資料傳輸和儲存成本，並且在資料量較大時，可能無法在指定的時間窗內完成。