Google Cloudにロードする非常に大きなファイル（90 GB）がいくつかあり、最初の転送のために帯域幅を確保します。トランザクションシステムは、リアルタイムでウェアハウスを更新し続ける必要があります。バルク移行と継続的な書き込みには、どのツールを使用しますか？

90GBのファイル転送にはgsutilが適しています。gsutil cp -mコマンドは並列アップロードをサポートし、大規模なデータセットの効率的な転送を可能にします。Storage Transfer Serviceは、異なるクラウドプロバイダ間やGCSバケット間の転送に最適ですが、単一の大きなファイル転送にはgsutilがより直接的で十分です。BigQuery Data Transfer ServiceはBigQueryへのデータ転送に特化しており、今回の要件とは異なります。リアルタイム更新には、Pub/Subで変更イベントを取り込み、Dataflowでそれらを処理してウェアハウスに書き込むのが一般的なパターンです。Cloud Data Fusionはデータ統合サービスですが、リアルタイムストリーミング処理の柔軟性ではDataflowが優れています。DataprocはHadoop/Sparkクラスタを管理するサービスであり、リアルタイムストリーミング処理の主要な選択肢ではありません。