Derfor fejler gætværk, og derfor vinder test
Det er derfor, gætværk fejler. Uden test kan du ikke skille signal fra støj. Du kan ikke se, om en ændring virkelig rykkede noget, eller om du bare ser normale udsving. Du spilder måneder på at teste ændringer, der ikke virker. Du misser ændringer, der virker, fordi du rullede dem tilbage i den tro, at de ikke gjorde.
A/B-test løser det ved at fjerne uklarheden. Du tester én ændring på halvdelen af din trafik. Den anden halvdel lader du være uændret. Du måler forskellen helt præcist. Statistik fortæller dig, om forskellen er ægte eller held. Du holder op med at gætte. Du begynder at vide.
Hvad A/B-test egentlig er
Version A mod version B
A/B-test sammenligner to versioner af noget ved at vise dem til forskellige personer og måle, hvilken der klarer sig bedst. Version A er din nuværende opsætning. Version B er din ændring. Du viser A til halvdelen af besøgende. Du viser B til den anden halvdel. Alt andet er ens. Den eneste forskel er det ene, du har ændret.
Mål og sammenlign
Når nok besøgende har set begge versioner, analyserer du resultaterne. Konverterede version B bedre end version A? Hvor meget bedre? Er forskellen ægte, eller er den bare tilfældig variation? Statistik svarer præcist på de spørgsmål.
Den rigtige styrke: præcision
Præcisionen er den rigtige styrke. Ikke selve testen. Præcisionen. Du ved helt nøjagtigt, hvad der virker for netop din målgruppe, på netop din hjemmeside, på netop dette tidspunkt. Generelle råd fra andre hjemmesider gælder ikke for dig. Dine data gør.
Den skjulte pris for at gætte
Én dårlig ændring koster måneders omsætning
Lad os sige, at du tjener 100 dollars i overskud pr. kunde. Din hjemmeside får 10.000 besøgende om måneden. To procent, det er 200 kunder om måneden. 20.000 dollars i overskud om måneden.
Du tror, at en ændring kan hjælpe. Du laver den uden at teste. Hvis ændringen i virkeligheden sænker konverteringen med én procent, får du nu kun 100 kunder. Overskuddet falder til 10.000 dollars. Du har tabt 10.000 dollars den måned.
Skjulte tab lægger sig sammen
Måske opdager du det ikke. Måske tror du, at omsætningen bare er lav denne måned af andre grunde. Du lader den dårlige ændring blive. Næste måned er historien den samme. 10.000 dollars i tab. Over et år har du tabt 120.000 dollars, fordi du ikke testede.
Det er den skjulte pris for at gætte. Ikke den enkelte dårlige beslutning. Men den konstante skade i det små fra ændringer, der skader lidt eller hjælper lidt, uden at du aner, hvilken der er hvilken.
Test forhindrer skjulte tab
Test forhindrer det. Én dårlig ændring bliver fanget. Du ser, at den er værre. Du ruller den tilbage. Ét tab i stedet for tolv.
Hvad der adskiller vinderne fra alle andre
Store virksomheder tester hele tiden
Store virksomheder tester hele tiden. De største webshops kører tusindvis af tests om året. Streamingtjenester tester. Rejsesider tester. De tester, fordi test lægger sig oven på hinanden. Én procents forbedring om måneden bliver til tolv procent på et år. Fem procents forbedring om måneden bliver til firs procent på et år.
Små virksomheder tester sjældent
Små og mellemstore virksomheder tester sjældent. De tror, at test er for tech-virksomheder med udviklerteams. De gætter. De taber penge langsomt uden at vide hvorfor.
Test er fordelen
De virksomheder, der vinder, er dem, der tester mere end deres konkurrenter. Ikke klogere. Ikke bedre. Mere test. Det er det hele. Test er en vane, ikke en evne. Alle kan gøre det.
Test eller bare ændringer
At ændre er at gætte
At ændre er at gætte. Du ændrer noget. Du ser, om omsætningen stiger. Hvis den gør, beholder du det. Hvis ikke, ændrer du det tilbage. Det tager måneder. Du aner ikke, om ændringen var årsagen til resultatet. Du kan komme til at rulle en vindende ændring tilbage, fordi du var uheldig med timingen.
At teste er at vide
At teste er at vide. Du ændrer noget systematisk. Du måler før og efter helt præcist. Statistik fortæller dig, om ændringen betød noget. Du ved det med det samme. Du kan køre dusinvis af tests på den tid, det tager at lave ét gæt.
De fleste virksomheder ændrer uden at teste. Nogle få tester. De, der tester, slår dem, der gætter.
Misforståelser, der slår testprogrammer ihjel
Test tager for lang tid
Forkert. De fleste tests er færdige på en til to uger. Hvis din test tager tre måneder, har du ikke nok trafik. Men det er et trafikproblem, ikke et testproblem.
Det er dyrt at teste
Forkert. At teste er gratis eller billigt. Nogle værktøjer er gratis. Betalte platforme starter omkring 500 dollars om måneden. Det er ingenting i forhold til effekten på omsætningen. Én test, der forbedrer konverteringen med én procent, betaler for værktøjerne hele året.
Kun store hjemmesider kan teste
Forkert. Test virker for enhver hjemmeside med mindst 500 besøgende om måneden. De fleste hjemmesider ligger over det. Små virksomheders hjemmesider får mest ud af test, fordi små forbedringer er store procentvise gevinster.
Det kræver en perfekt opsætning
Forkert. En god opsætning slår perfekt planlægning. Begynd at teste i dag med en enkel opsætning. Forbedr processen, mens du lærer.
Det tilsagn, der tæller
Test skaber kun værdi, hvis du indfører vinderne
Spørgsmålet er ikke, hvordan jeg tester, men hvad jeg vil gøre med de vindende tests. Nogle virksomheder tester, men indfører aldrig vinderne. De kører en test. Varianten vinder. De siger, at de indfører den senere. Senere kommer aldrig.
Vindende tests skaber kun værdi, hvis du indfører dem. Og vindende tests giver idéer til nye tests. Hvis en ny knapfarve øger konverteringen med to procent, hvad så med knappens størrelse? Knappens placering? Knappens tekst? Den ene test fører til den næste. Test er ikke en engangsting. Det er løbende arbejde.
Vækst gennem fast praksis
De virksomheder, der får mest ud af test, er dem, der forpligter sig til at indføre vinderne og køre opfølgende tests. De bygger test ind i kulturen. Måned efter måned. År efter år. Små forbedringer lægger sig sammen til massiv vækst.
Ofte stillede spørgsmål
Hvordan ved jeg, om min virksomhed er stor nok til A/B-test?
Hvis du får 500 besøgende om måneden, kan du teste. De fleste virksomheders hjemmesider ligger over det. Hvis du er under 500, så fokuser først på trafik. Når du rammer 500, så begynd at teste. Med WEMASYs hjemmesidebygger kan du sætte det op direkte på din hjemmeside.
Hvis jeg sælger dyre produkter til få kunder, kan jeg så stadig teste?
Det er sværere, men muligt. Tiden skalerer anderledes. Med én kunde om måneden tager en test måneder. Men princippet er det samme. Test ændringer med stor effekt. Undgå ændringer med lille effekt, som ikke vil kunne mærkes ved dit volumen.
Hvad er forskellen på en test, der vinder, og en test, hvor vinderen går i stykker?
Du indfører vinderen. Den virker i en måned. I måned to virker den ikke lige så godt. Det sker. Noget har ændret sig. Målgruppen har flyttet sig. En sæsoneffekt. Kør testen igen. Vinderen kan vende. Notér den læring.
Skal jeg teste på tilbagevendende kunder, nye kunder eller begge dele?
Test på alle. De opfører sig forskelligt, men begge grupper har betydning for forretningen. Nye kunder er det første indtryk. Tilbagevendende kunder er loyalitet. Test på alle. Hvis du vil have flere detaljer, så analyser dem hver for sig bagefter.
Jeg kører en test og taber stort. Skal jeg stoppe tidligt?
Nej. Kør hele perioden. Tidlige resultater er vildledende. Forestil dig, at du ikke er den, der kører testen. Forestil dig, at du ingen interesse havde i udfaldet. Ville du have lyst til at kende de foreløbige resultater efter én uge? Sandsynligvis ikke. Vent på rigtige data.
Hvordan får jeg mit team til at teste i stedet for at gætte?
Vis pengene. Kør en test. Varianten vinder. Beregn effekten på omsætningen. Denne test øgede omsætningen med 5.000 dollars om måneden. Hvis en gennemsnitlig test forbedrer med tre procent, kan vi lægge forbedringerne oven på hinanden til stor vækst. Penge overbeviser.