У специалиста по данным есть 20 ТБ данных CSV в Amazon S3, и ему необходимо преобразовать их в Apache Parquet с наименьшими усилиями. Какой самый простой способ выполнить это преобразование?
Выберите ответ
Нажмите на вариант, чтобы проверить свой ответ.
Правильный ответ: Написать скрипт преобразования и запустить его как AWS Glue job для чтения CSV и записи вывода Parquet..
Почему это правильный ответ
Правильный ответ — запустить скрипт преобразования как задание AWS Glue. AWS Glue — это бессерверный сервис ETL, который идеально подходит для преобразования больших объемов данных, таких как 20 ТБ CSV-файлов, в формат Parquet. Он автоматически масштабируется и управляет вычислительными ресурсами, что минимизирует усилия. Использование AWS Glue crawler напрямую не преобразует файлы; он только обнаруживает схему и создает таблицы в AWS Glue Data Catalog. Запуск скрипта на кластере Amazon EMR требует управления кластером, что увеличивает усилия. Выполнение скрипта из блокнота Amazon SageMaker не предназначено для обработки таких больших объемов данных и может быть неэффективным или дорогостоящим.
Сдайте экзамен — без бесконечного поиска ответов
Получите все проверенные вопросы и объяснения для этого экзамена в одном месте и сэкономьте часы подготовки. 1000+ сертификаций · 20+ языков · начните бесплатно.
Сдайте экзамен быстрее → Карта не требуется