Bir veri mühendisi, Amazon Managed Workflows for Apache Airflow (Amazon MWAA) üzerinde pipeline'lar çalıştırıyor. Yakın zamanda bir iş akışı başarısız oldu ve mühendisin neden başarısız olduğunu belirlemek için Apache Airflow günlüklerini incelemesi gerekiyor. Mühendis, hatanın temel nedenini bulmak için hangi günlük türünü incelemelidir?

Doğru cevap olan YourEnvironmentName-Task günlükleri, Apache Airflow'da belirli bir görevin (task) yürütülmesi sırasında oluşan olayları ve hataları içerir. Bir iş akışı başarısız olduğunda, bu başarısızlığın genellikle belirli bir görevde meydana gelen bir problemden kaynaklandığı düşünülür. Bu günlükler, görevin çıktısını, hata mesajlarını ve görevin neden başarısız olduğunu anlamak için kritik bilgileri sağlar. Diğer seçenekler ise farklı Airflow bileşenlerinin günlükleridir: YourEnvironmentName-WebServer günlükleri, Airflow kullanıcı arayüzü (UI) ile ilgili olayları kaydeder. YourEnvironmentName-Scheduler günlükleri, DAG'lerin zamanlanması ve görevlerin kuyruğa alınmasıyla ilgili bilgileri içerir. YourEnvironmentName-DAGProcessing günlükleri, DAG dosyalarının ayrıştırılması ve işlenmesiyle ilgili sorunları gösterir. Bir iş akışı başarısız olduğunda, hatanın temel nedenini bulmak için öncelikli olarak görevin kendi günlüklerine bakmak en mantıklı yaklaşımdır.