한 회사에서 Amazon S3, Amazon Redshift 및 Snowflake의 데이터를 Amazon SageMaker Data Wrangler로 수집해야 합니다. 수집된 데이터는 항상 소스 시스템의 최신 변경 사항을 반영해야 합니다. 이 요구 사항을 충족하는 접근 방식은 무엇입u니까?

정답은 카탈로그화된 연결을 사용하여 소스에서 Data Wrangler로 데이터를 가져오는 것입니다. Amazon SageMaker Data Wrangler는 Amazon S3, Amazon Redshift 및 Snowflake와 같은 다양한 데이터 소스에 대한 카탈로그화된 연결을 지원합니다. 이러한 연결은 데이터 카탈로그를 활용하여 메타데이터를 관리하고, Data Wrangler가 항상 최신 스키마 및 데이터 변경 사항을 반영하도록 보장합니다. 직접 연결은 일회성 데이터 가져오기에는 적합하지만, 소스 시스템의 지속적인 변경 사항을 자동으로 반영하지 못할 수 있습니다. AWS Glue 또는 AWS Lambda를 사용하여 데이터를 추출하고 Data Wrangler로 가져오는 방법은 가능하지만, Data Wrangler가 제공하는 내장된 카탈로그화된 연결보다 복잡하며 불필요한 추가 계층을 생성합니다. Data Wrangler의 카탈로그화된 연결은 데이터 최신성을 보장하면서 가장 효율적이고 통합된 접근 방식을 제공합니다.