Ein Unternehmen erstellt ein Modell mit Amazon SageMaker und muss die Modellverzerrung verfolgen und die Ergebnisse auf einem Dashboard anzeigen. Nachdem ein Bias-Monitoring-Job erstellt wurde, wie sollte der Ingenieur die Bias-Metriken für das Dashboarding erfassen?

Die korrekte Antwort ist, Amazon CloudWatch-Metriken zu sammeln, die von SageMaker Clarify ausgegeben werden. SageMaker Clarify ist das spezifische Tool innerhalb von SageMaker, das für die Erkennung und Überwachung von Modellverzerrungen (Bias) entwickelt wurde. Es integriert sich nahtlos mit CloudWatch, um Metriken zu Verzerrungen bereitzustellen, die dann einfach für Dashboards visualisiert werden können. AWS CloudTrail-Ereignisse sind für die Überwachung von API-Aufrufen und Benutzeraktivitäten gedacht, nicht für Modell-Bias-Metriken. SageMaker Model Monitor ist für die Überwachung der Modellleistung und Datenqualität nach dem Deployment zuständig, nicht primär für Bias-Metriken, die vor oder während des Trainings identifiziert werden. EventBridge und SNS sind Mechanismen für die Ereignisweiterleitung und Benachrichtigungen, aber nicht die primäre Quelle für die Bias-Metriken selbst.