Cloud Storage 中的 CSV 檔案包含混合的資料類型和不一致的格式（電話號碼、地址）。哪種管道方法能透過在載入 BigQuery 之前進行清理和轉換來確保資料品質？

Data Fusion 是一個全代管的雲端原生資料整合服務，專為建構和管理 ETL/ELT 資料管道而設計。它提供圖形化介面和豐富的轉換功能，非常適合處理混合資料類型和不一致格式的 CSV 檔案，並在載入 BigQuery 之前進行清理和轉換，確保資料品質。將 CSV 轉換為 AVRO 雖然是資料格式優化，但並未直接解決資料清理和轉換的需求。直接載入 BigQuery 後再用 SQL 轉換，可能因資料類型不符而導致載入失敗或需要額外的錯誤處理，且對於複雜的資料清理，SQL 可能不夠直觀或效率不高。在原處使用 SQL 轉換也面臨類似挑戰，且可能影響原始資料。