타사로부터 매월 CSV를 수신하며, 스키마는 3개월마다 변경됩니다. 요구사항은 다음과 같습니다: 예약된 실행, 비개발자 분석가가 변환을 수정할 수 있어야 함, 그래픽 변환 디자이너. 이러한 요구사항에 적합한 솔루션은 무엇입니까?

Dataprep by Trifacta는 비개발자 분석가가 그래픽 인터페이스를 통해 데이터 변환 레시피를 시각적으로 설계하고 예약할 수 있게 해주는 관리형 서비스입니다. 스키마 변경이 3개월마다 발생하므로, 코드를 직접 수정할 필요 없이 Dataprep의 시각적 도구를 사용하여 레시피를 쉽게 업데이트할 수 있습니다. 다른 옵션들은 다음과 같은 이유로 적합하지 않습니다: BigQuery에 로드하고 SQL을 사용하는 것은 스키마 변경 시 SQL 쿼리를 수동으로 수정해야 하므로 비개발자 분석가에게는 어렵습니다. Python Dataflow 파이프라인은 개발자에게 적합하며, 비개발자 분석가가 코드를 작성하고 유지 관리하기 어렵습니다. Dataproc의 Apache Spark는 개발자에게 적합하며, 비개발자 분석가가 Spark 코드를 작성하고 유지 관리하기 어렵습니다.