Firma tworzy model za pomocą Amazon SageMaker i musi śledzić stronniczość modelu oraz wyświetlać wyniki na pulpicie nawigacyjnym. Po utworzeniu zadania monitorowania stronniczości, w jaki sposób inżynier powinien przechwytywać metryki stronniczości do wyświetlania na pulpicie nawigacyjnym?

Poprawna odpowiedź to zbieranie metryk Amazon CloudWatch emitowanych przez SageMaker Clarify. SageMaker Clarify, używany do wykrywania stronniczości, automatycznie publikuje metryki do Amazon CloudWatch. Te metryki można następnie wizualizować na niestandardowych pulpitach nawigacyjnych CloudWatch, co pozwala na łatwe monitorowanie stronniczości modelu. Zbieranie zdarzeń AWS CloudTrail z SageMaker Clarify jest nieprawidłowe, ponieważ CloudTrail rejestruje działania API i zdarzenia użytkownika, a nie metryki wydajności modelu czy stronniczości. Zbieranie metryk SageMaker Model Monitor za pośrednictwem Amazon EventBridge lub powiadomień Amazon SNS jest nieprawidłowe, ponieważ Model Monitor skupia się na dryfie danych i dryfie modelu, a nie bezpośrednio na metrykach stronniczości generowanych przez SageMaker Clarify. Chociaż EventBridge i SNS mogą być używane do automatyzacji i powiadomień, podstawowym źródłem metryk stronniczości dla pulpitu nawigacyjnego jest CloudWatch.