데이터 과학자가 GZIP으로 압축된 파일 스트림에 대해 거의 실시간으로 SQL 쿼리를 실행해야 합니다. SQL을 사용하여 스트림을 쿼리하는 가장 짧은 지연 시간 방법은 무엇입니까?

Amazon Kinesis Data Analytics는 스트리밍 데이터에 대해 거의 실시간으로 SQL 쿼리를 실행할 수 있는 관리형 서비스입니다. GZIP으로 압축된 파일 스트림의 경우, Lambda 변환을 사용하여 데이터를 압축 해제하고 SQL 쿼리를 실행할 수 있도록 준비할 수 있어 가장 짧은 지연 시간을 제공합니다. AWS Glue는 배치 ETL에 더 적합하며 실시간 쿼리에는 지연 시간이 너무 깁니다. Kinesis Client Library와 Elasticsearch Service는 복잡한 설정과 관리가 필요하며, Kinesis Data Firehose는 데이터를 S3에 전달하여 나중에 쿼리하는 방식이므로 실시간 쿼리 요구 사항을 충족하지 못합니다.