Innhold
For omtrent en måned siden på Everhour, flyttet vi fra privat til offentlig beta. Og vi var i ferd med å hoppe inn i markedsføringssprinten for å fortelle verden hvor kult produktet vårt - et praktisk tidsstyrings- og rapporteringsverktøy - var. For å bedre forberede oss på de kommende kampanjeaktivitetene, bestemte vi oss for å få detaljert og eksplisitt analyse.
Siden vi skulle bruke litt penger, ønsket vi naturligvis å spore hvor effektive investeringene og visse markedsføringsteknikker ville være.
Som en del av vårt analytiske eventyr planla vi å lansere to app-destinasjonssider om gangen for å sjekke hvem av dem som hadde høyere konverteringsfrekvenser:
- A) en med en mer detaljert beskrivelse av appfunksjonene, problemer den løser, skjermbilder for å hjelpe besøkende med å ta en informert beslutning om å registrere seg
eller
- B) en minimalistisk designside med en slående tagline rettet mot å oppfordre besøkende til å prøve verktøyet og se alle fordelene selv.
Vi har undersøkt emnet og har kommet over noen gode historier som følgende blogginnleggsserie av 37Signals: Bak kulissene: A / B-testing del 1; del 2; del 3.
Til slutt har vi kommet med to designalternativer gitt nedenfor og begynte å rotere dem tilfeldig på app-siden vår.
Alternativ A og B
Så hva kostet det oss?
- Mockups for to destinasjonssider inkludert diskusjoner og redigering
- To designversjoner med implementering av responsiv designadferd i widescreen- og bærbar PC-oppløsning
- Skjæring av bilder (klargjør bilder for brede, bærbare og Retina-oppløsninger)
- Koding
- Utvikler A / B-testfunksjonalitet
- Testing på tvers av nettlesere
I tillegg:
- Vi måtte også tilpasse sidene Pricing, About og Sign In til hver designversjon.
- Vi kodet responsive destinasjonssider, selv om vi ikke har utviklet mobildesign spesielt.
- For å få statistikk over hver destinasjonssides ytelse, setter vi opp Google Analytics.
Totalt brukt tid: 96,5 timer.
Resultater
Etter å ha lansert destinasjonssidene startet vi en kampanjekampanje beskrevet her, og etter en måned med aktiv markedsføring var vi klare til å endelig undersøke A / B-testresultatene.
Vi hadde hatt ganske store håp om testingen. Men tallene fikk oss veldig skuffet, som du kan se nedenfor (A er øverst, B nedenfor):
Som du kanskje ser, har hele eksperimentet vist seg å være ubrukelig! Statistikken for begge sidene er nesten den samme bortsett fra en liten forskjell i konverteringsfrekvensen som er for liten til å bli tatt alvorlig i betraktning.
Den eneste konklusjonen vi kan gjøre basert på resultatene, er at vi trenger å øke antallet konverteringer. Og ærlig talt er det klart selv uten hele testingen. Selv om en konverteringsfrekvens på 7-8% faktisk er god nok i de tidlige stadiene når du sender oppstarten til så mange nettsteder som mulig, og som et resultat, få virkelig diverse besøkende. For øyeblikket har vi en gjennomsnittlig konvertering på 10%. Dessuten er påmeldinger bare en måte å måle effektiviteten til promosider på, og ikke et ultimat mål.
Konklusjoner
For oss personlig har all innsats blitt brukt forgjeves. Og vi er ganske sikre på at enhver tidlig oppstart vil komme til samme tanke etter å ha kjørt A / B-testing for deres produkt. Men uansett, hver opplevelse er en god opplevelse.
Prosessen har vært tidkrevende, til og med gitt at vi har få sider på nettstedet. Og hva om du har mange av dem? Forberedelse av design vil bli en heltidsjobb på heltid for deg og teamet ditt. Vel, du kan selvfølgelig bare jobbe med destinasjonssider som lar andre være uendret, men vi mener at du bør følge samme stil på hele nettstedet.
Dessuten, med A / B-testing, må du fortsette å eksperimentere i stedet for å bli fornøyd med et par varianter. Vi er klar over at vi for øyeblikket har andre prioriteringer, for eksempel forbedring av appfunksjonaliteten, samt redesign av destinasjonssiden vår for å presentere Everhour i sitt beste lys.
Vi hevder imidlertid ikke at A / B-testing i det hele tatt er meningsløs. Vi synes det bare er verdt å prøve når du har et stort antall besøkende på nettstedet ditt. I et slikt tilfelle får du nok data til å bestemme hva som faktisk fungerer best for ditt produkt.
Ord: Mike Kulakov
Mike Kulakov er den stolte konsernsjefen for tidsstyrings- og rapporteringsverktøyet Everhour.
