Je moet een nieuw productaanbevelingsalgoritme A/B-testen achter een globale HTTP(S) load balancer en gebruikers randomiseren. Hoe moet je het verkeer routeren?

De juiste methode voor A/B-testen met een globale HTTP(S) load balancer en gebruikersrandomisatie is het splitsen van verkeer tussen versies met behulp van gewichten. Dit stelt je in staat om een percentage van het verkeer naar de nieuwe versie (B) te sturen, terwijl de rest naar de bestaande versie (A) gaat. De load balancer verdeelt het verkeer op basis van deze gewichten, waardoor gebruikers willekeurig worden toegewezen aan een van de versies en je de impact van het nieuwe algoritme kunt meten. Het inschakelen van een feature flag op een enkele instantie is geen A/B-test, maar een beperkte uitrol. Het spiegelen van verkeer is voor schaduwuitrol en test de nieuwe versie met live verkeer zonder de gebruikers te beïnvloeden, wat niet hetzelfde is als A/B-testen. HTTP header-gebaseerde routing is nuttig voor specifieke use-cases (bijv. interne tests), maar niet voor willekeurige gebruikersverdeling in een A/B-test.