🅱️ A/B test "Slechte match" icoon

Misschien was het je reeds opgevallen op de adviespagina , maar sinds 9 juni stond er een A/B test live.

Er was het vermoeden dat de weergave van “slechte matches” in de herleidbaarheid van producten een negatief effect hadden op de clickthrough rate op de advies pagina (oftewel; hoeveel mensen er doorklikten van de adviespagina op een van de producten). De herleidbaarheid van slechte matches werd namelijk weergegeven met rode kruisjes. We hebben deze tegenover een B variant getest waar de herleidbaarheid werd getoond door een grijs icoon van een cirkel met een minnetje. Een iets subtielere aanpak dus.

‍

En de winnaar is…. 🥁… Variant B!

De details: de A/B test heeft gelopen van 9 tot 19 juni over alle keuzehulpen heen met in totaal meer dan 80.000 sessies. Variant B presteert over alle keuzehulpen 0,96 procentpunt beter dan de huidige rode iconen. Kijken we naar individuele keuzehulpen dan zien we verbeteringen van 0,5% - 5% op de clickthrough rate. dan de huidige rode iconen.

Een duidelijk resultaat dus. Daarom hebben we variant B nu uitgerold voor alle keuzehulpen. Geen rode kruisjes meer!