あるPythonジョブがCloud Storageにある数百万の顧客ファイルを読み取ります。規制要件として、ジョブの完了時に顧客データを直ちに削除する必要があります。総完了時間を最小限に抑えるには、どうすればよいですか？

Cloud Storage APIへのバッチリクエストは、数百万のオブジェクトを効率的に一括削除する最も高速な方法です。ジョブの最終ステップとして組み込むことで、総完了時間を最小限に抑えられます。オブジェクトライフサイクル管理ルールは、設定された条件に基づいてオブジェクトを削除しますが、即時性やジョブ完了との同期が保証されません。Google Cloudコンソールからのバケット削除は、バケット内のすべてのオブジェクトを削除しますが、手動操作であり、自動化されたジョブには適していません。gcloud storage rm --recursive コマンドは数百万のオブジェクトに対しては完了に時間がかかり、APIバッチ処理よりも効率が劣ります。