Вы ежемесячно получаете CSV-файлы от сторонней организации; схема меняется каждый третий месяц. Требования: выполнение по расписанию, аналитики, не являющиеся разработчиками, могут изменять преобразования, а также графический дизайнер преобразований. Какое решение соответствует этим требованиям?

Dataprep by Trifacta — это управляемый сервис для визуальной подготовки данных, который идеально подходит для нетехнических пользователей, таких как аналитики. Он позволяет легко создавать и изменять «рецепты» преобразований с помощью графического интерфейса, что соответствует требованию о том, что аналитики, не являющиеся разработчиками, могут изменять преобразования. Dataprep также поддерживает планирование заданий. Изменение схемы каждые три месяца легко обрабатывается путем корректировки существующего рецепта или создания нового. Загрузка в BigQuery и использование SQL требует написания и изменения SQL-кода, что может быть сложно для неразработчиков. Dataflow требует навыков программирования на Python. Apache Spark на Dataproc также требует навыков программирования и настройки кластера, что не соответствует требованию о графическом дизайнере преобразований для аналитиков.