ある会社が、DynamicFrame を使用して S3 データを読み込み、変換されたデータを Amazon RDS for MySQL に 1 日 1 回ロードする複数の AWS Glue ETL ジョブを実行しています。現在、ジョブは S3 バケット内のすべてのオブジェクトを再処理していますが、会社はジョブを日次の増分データのみで動作させたいと考えています。最も少ないコード変更で済むソリューションはどれですか?
解答を選択
オプションをタップして解答を確認してください。
正解: ETL ジョブのジョブブックマークを有効にして、実行後に状態を更新し、以前に処理されたデータを追跡します。.
これが解答である理由
ジョブブックマークを有効にすると、AWS Glueは以前に処理されたデータを自動的に追跡し、次回の実行時に新しいデータのみを処理します。これにより、S3バケット内のすべてのオブジェクトを再処理する必要がなくなり、最も少ないコード変更で増分処理を実現できます。S3ファイルのステータスをDynamoDBに記録する方法は、追加のコードと管理オーバーヘッドが発生します。ジョブメトリクスは処理状況の監視には役立ちますが、増分処理自体は行いません。処理済みオブジェクトをS3から削除する方法は、データの永続性を損ない、再処理が必要になった場合に問題となります。
試験に合格 — 終わりのない解答探しなしで
この試験のすべての検証済み問題と解説を1か所で入手し、準備時間を大幅に節約しましょう。1,000以上の認定 · 20以上の言語 · 無料で開始。
試験に早く合格する → カード不要