您需要對廣告資料進行近乎即時的清理，以便在將資料饋送給 AI 模型和分析之前，識別長尾和離群點。您應該使用什麼？

Dataflow 是一個全受管的無伺服器服務，適用於串流和批次資料處理。它能以近乎即時的方式處理大量資料，非常適合用於識別廣告資料中的長尾和離群點。透過程式化方式在 Dataflow 中實作處理邏輯，可以靈活地定義複雜的長尾和離群點偵測演算法。將 BigQuery 作為接收器，可以將處理後的資料高效地儲存起來，以便後續的 AI 模型訓練和分析。 其他選項的不足之處： Cloud Storage 和 shell script 組合缺乏即時處理能力和可擴展性。 BigQuery 雖然擅長分析，但其主要功能不是即時的程式化資料清理和轉換。 Cloud Composer 是一個工作流程協調服務，本身不執行資料處理，需要與其他處理服務結合使用。