ピーク時にサイズが変動するオンプレミスのSpark/Hive/HDFSクラスターを2か月以内にクラウドに移行し、運用を削減し、将来のサーバーレスモダナイゼーションを可能にします。どの移行アプローチが速度とコスト削減のバランスを取りますか？

このアプローチは、既存のSpark/HiveワークロードをDataprocに移行することで移行速度を確保し、HDFSの代わりにCloud Storageを使用することで運用コストを削減します。Cloud StorageはHDFSよりもスケーラブルで管理が容易であり、将来のサーバーレス化への道を開きます。 他の選択肢は以下の理由で適切ではありません。 HDFSを保持すると、オンプレミスと同様の運用オーバーヘッドが発生し、コスト削減とサーバーレス化の目標に反します。 HiveをBigQueryに、SparkをDataflowに即座にモダナイズすることは、移行の初期段階では複雑すぎ、2か月という時間制約を満たすのが困難です。