A/B-testa utan att lura dig själv
Två varianter, en vinnare — och en massa sätt att dra fel slutsats. En kort guide till signifikans.
Marcus Ek · 11 juli 2026
Ett A/B-test är enkelt att sätta upp och lätt att övertolka. Den vanligaste bristen är inte metoden utan tålamodet.
Vänta ut de första timmarna
De första timmarnas trafik kommer från prenumeranter som redan bestämt sig. De klickar på nästan vad som helst. Ett test som avslutas efter fyra timmar mäter din publiks lojalitet, inte miniatyrens kvalitet.
Vänta minst 48 timmar, och helst tills båda varianterna fått 2 000 visningar var.
En variabel i taget
Byter du både bild och rubrik vet du efteråt att något blev bättre, men inte vad. Det gör resultatet oanvändbart nästa gång.
- Testa placering ELLER färg ELLER rubrik
- Skriv ner din gissning innan testet startar
- Spara resultatet även när det motsäger dig
Skillnaden måste vara stor nog
En klickfrekvens på 6,1 mot 5,9 procent är ingen skillnad, det är brus. Vyra räknar ut om skillnaden är tillräckligt stor för att lita på och säger till när den inte är det.
Det är en obekväm funktion. Den säger ofta "vi vet inte än".
