Til indhold

A/B-test: bevis ændringen, før I bygger den

Alle har en mening om, hvad der virker på en hjemmeside. En A/B-test afgør det. Vi opsætter testene, sikrer at resultatet er troværdigt, og hjælper med at læse, hvad det faktisk betyder.

Kom i gang med at teste

Det får du

Hypoteser der er værd at teste: vi tester der, hvor data viser et problem, ikke tilfældige knapfarver.
Korrekt opsætning: ensartet fordeling, ingen flimren på siden og måling, der ikke forurener resultatet.
Troværdige resultater: test der får lov at køre længe nok, og som ikke bliver afsluttet i utide, fordi tallene ser pæne ud.
Konklusioner I kan bruge: hvad testen viste, hvad den ikke viste, og hvad den næste test bør være.

En A/B-test viser to versioner af den samme side til hver sin halvdel af de besøgende og måler, hvilken der klarer sig bedst. Fordi de to grupper besøger siden på samme tid og under samme vilkår, kan forskellen tilskrives ændringen frem for sæson eller kampagner.

Den største fejl i praksis er at stoppe for tidligt. Små stikprøver svinger meget, og en tidlig føring forsvinder ofte igen. Derfor beslutter vi, hvor længe testen skal køre, før den startes, og holder fast i det.

Sådan arbejder vi

Sådan kører vi en A/B-test

  1. 01

    Hypotese

    Data og brugeradfærd peger på et konkret problem. Vi formulerer, hvad vi tror der sker, og hvad vi forventer af ændringen.

  2. 02

    Byg og valider

    Varianten bygges og kvalitetssikres på tværs af browsere og enheder, så testen ikke måler en fejl.

  3. 03

    Kør og konkludér

    Testen kører til den aftalte grænse. Derefter afgør vi, om varianten skal udrulles, forkastes eller testes videre.

FAQ

Ofte stillede spørgsmål

Hvad er en A/B-test?

En A/B-test er et forsøg, hvor to versioner af en side eller et element vises til hver sin tilfældige halvdel af de besøgende på samme tid. Ved at sammenligne, hvor mange i hver gruppe der konverterer, kan man afgøre, om ændringen rent faktisk gør en forskel.

Hvad er forskellen på A/B-test og split-test?

I daglig tale bruges de to udtryk som synonymer. Hvor der skelnes, betyder A/B-test som regel to varianter af den samme side, mens split-test eller split-URL-test betyder to helt forskellige sider på hver sin adresse. Princippet og kravet til trafik er det samme.

Hvor lang tid skal en A/B-test køre?

Den skal køre, til den har set besøgende og konverteringer nok til, at resultatet ikke bare er tilfældigt, og den bør altid dække hele uger, så hverdage og weekender vægter ens. I praksis betyder det typisk to til fire uger. Vi regner længden ud på forhånd ud fra jeres trafik.

Hvor meget trafik kræver en A/B-test?

Det afhænger af jeres konverteringsrate og af, hvor stor en forbedring I vil kunne opdage. Jo mindre effekt I vil kunne måle, jo mere trafik kræver det. Har siden for lidt trafik til troværdige tests, anbefaler vi i stedet brugertest og rettelse af de åbenlyse problemer.

Hvilke værktøjer bruger I til A/B-test?

Vi er teknologineutrale og vælger værktøj efter jeres platform, trafikmængde og krav til datahåndtering. Vigtigst er, at testen ikke forsinker siden eller får indholdet til at flimre, for det påvirker i sig selv resultatet.

Hvad er I i tvivl om på jeres site?

Lad os teste det