毎日テラバイト規模のGoogle AnalyticsイベントデータがBigQueryに保存されます。顧客プロファイルテーブルはCloud SQL for MySQLとCloud SQL for PostgreSQLに存在します。マーケティング部門は、Cloud SQLインスタンスへの負荷を最小限に抑えながら、1日に100～300回結合キャンペーンを実行する必要があります。何を実装しますか？

Datastreamは、Cloud SQLのデータをBigQueryに継続的にレプリケートするフルマネージドサービスです。これにより、マーケティング部門はBigQuery内でGoogle Analyticsデータと顧客プロファイルデータを結合でき、Cloud SQLインスタンスへの負荷を最小限に抑えられます。BigQueryフェデレーテッドクエリは、Cloud SQLに直接クエリを発行するため、Cloud SQLに負荷がかかります。Dataproc上のSparkジョブやTrinoクラスタは、一時的なクエリには適していますが、日中の頻繁な結合キャンペーンにはDatastreamによるデータレプリケーションが最も効率的で、Cloud SQLへの影響も最小限です。