Медицинская компания размещает конечную точку SageMaker, которая прогнозирует риск повторной госпитализации пациентов. Они отдают приоритет высокому показателю recall и готовы мириться с ложноположительными срабатываниями. Текущая модель деградировала, поэтому они обучили и развернули новую модель в качестве теневого варианта и отслеживали реальный трафик в течение одного месяца. Теневой вариант имеет более высокий показатель recall, но более низкий показатель precision, чем существующая модель. Что должна сделать компания дальше?

Компания должна перевести теневой вариант в полную эксплуатацию, потому что он соответствует их приоритетам. Цель компании — высокий показатель recall, даже ценой ложноположительных срабатываний, и теневой вариант демонстрирует более высокий recall. Продление периода тестирования не изменит фундаментальные характеристики модели. Использование blue/green развертывания не требуется, так как теневой вариант уже показал себя соответствующим бизнес-целям. Отключение теневого варианта было бы контрпродуктивным, поскольку он лучше соответствует заданным критериям.