一家公司每天将数据上传到 S3 存储桶，并使用 AWS Glue Data Catalog。有时，日报表会在所有数据到达之前运行。数据工程师必须将识别出任何不完整数据的消息发送到现有的 Amazon SNS 主题，同时将操作开销降至最低。哪种解决方案可以满足此需求？

正确答案是使用 AWS Glue 工作流和 EventBridge。AWS Glue 工作流可以编排多个 Glue 作业和爬网程序，非常适合执行数据质量检查。当检测到不完整数据时，工作流可以直接触发 EventBridge 事件。EventBridge 可以轻松地将此事件路由到现有的 Amazon SNS 主题，从而实现低操作开销的通知。 其他选项虽然可行，但操作开销更高： 使用 Apache Airflow 需要管理 Airflow 集群，增加了复杂性。 部署 Amazon EMR 集群进行每次检查成本较高，且编排也更复杂。 Lambda 函数虽然轻量，但如果质量检查逻辑复杂，可能需要多个 Lambda 函数，并且 Step Functions 编排也会增加复杂性。