Een data scientist heeft een nieuw model dat beter presteert dan het huidige productiemodel op testdata. Ze willen A/B-testen uitvoeren in het productie SageMaker-endpoint om de prestaties op echt verkeer te verifiëren voordat het model volledig wordt vervangen. Welke stappen zijn vereist om A/B-testen uit te voeren? (Kies twee.)

Om A/B-testen uit te voeren in Amazon SageMaker, moet u eerst een nieuwe endpoint-configuratie maken. Deze configuratie definieert meerdere productievarianten, waarbij elke variant een ander model vertegenwoordigt (in dit geval het huidige productiemodel en het nieuwe model). Elke variant krijgt een gewicht toegewezen, wat bepaalt welk percentage van het inkomende verkeer naar dat specifieke model wordt gestuurd. Vervolgens moet u het bestaande endpoint bijwerken om deze nieuwe endpoint-configuratie te gebruiken. Dit zorgt ervoor dat het endpoint het inkomende verkeer verdeelt over de gedefinieerde modelvarianten volgens de ingestelde gewichten, waardoor A/B-testen met live verkeer mogelijk wordt. De optie om een nieuwe endpoint-configuratie te maken die twee doelvarianten bevat die naar verschillende endpoints verwijzen, is onjuist omdat A/B-testen op één endpoint plaatsvindt. Het implementeren van het nieuwe model naar het bestaande endpoint of het updaten van het bestaande endpoint om het nieuwe model te activeren, zou het huidige model direct vervangen zonder A/B-testmogelijkheden.