Chcesz przeprowadzić testy A/B nowego schematu kolorów dla swojej globalnej aplikacji internetowej Cloud Run na rzeczywistym ruchu produkcyjnym. Jak należy zaprojektować badanie?

Testy A/B wymagają jednoczesnego kierowania części ruchu do różnych wersji aplikacji, aby porównać ich wydajność. Zewnętrzny load balancer HTTP(S) w Google Cloud umożliwia precyzyjne rozdzielanie ruchu między wiele usług Cloud Run (reprezentujących warianty A i B). Analiza statystycznie istotnej różnicy w sprzedaży jest kluczowa dla określenia, czy nowy schemat kolorów faktycznie wpływa na zachowania użytkowników. Druga opcja opisuje wdrożenie kanaryjskie lub niebiesko-zielone, a nie test A/B, ponieważ ruch jest przełączany całkowicie, a nie dzielony jednocześnie. Trzecia opcja, mirroring ruchu, służy do testowania wydajności i stabilności nowej wersji bez wpływu na użytkowników, a nie do pomiaru wpływu na sprzedaż. Czwarta opcja, flaga funkcji, jest metodą implementacji, ale bez zewnętrznego load balancera trudniej jest kontrolować i analizować ruch w kontekście testów A/B na dużą skalę.