De pagina Personalizations beantwoordt voor elk segment dat je target één vraag: levert het iets op? Elke personalisatie staat er één keer, met hoeveel klanten hem zagen, wat hij met de conversie deed en hoe zeker dat resultaat is.
Wat telt als personalisatie
Een personalisatie is een set zoekregels voor één segment. Je maakt er een in een zoekconfiguratie onder Ranking & Personalization: klik op Add personalization, kies een segment en geef die klanten eigen pin-, boost-, bury- en exclude-regels. Alle anderen houden de regels onder Everyone. Zie Zoekresultaten personaliseren voor de instellingen.
Zodra een personalisatie bestaat, verschijnt hij op Personalizations, ook als nog niemand hem heeft gezien.
Aanbevelingen en collectiepagina's
Gebruik je Recommendations of Collection pages, dan staan hun personalisaties hier ook. Zet het filter voor het onderdeel op Recommendations om elke segmentversie van een blok en de Behavioural re-rankervan te zien. Collectiepagina's met een gepersonaliseerde productvolgorde verschijnen als rijen Personalized product order (filter op Collection pages), vergeleken met 10% van de terugkerende klanten die je normale volgorde houden. Deze rijen tellen vertoningen in plaats van zoekopdrachten. Zie Resultaten van aanbevelingen meten en Collectiepagina's personaliseren.
Hoe de holdout het meetbaar maakt
Een segment vergelijken met "alle anderen" zou het mooier laten lijken dan het is: je terugkerende kopers converteren toch al beter. Daarom houdt bluebarry een klein deel van de klanten in elk getarget segment achter, standaard 10%. Zij horen bij het segment maar zien je standaard zoekfunctie. Die controlegroep is de eerlijke vergelijking. Het verschil tussen de twee groepen is wat de personalisatie zelf heeft gedaan.
Een klant blijft bij elk bezoek in dezelfde groep, dus niemand springt heen en weer tussen twee versies van je zoekfunctie.
De tabel lezen
- Ga in de zijbalk naar Personalizations.
- Kies rechtsboven een periode. De pagina opent op de afgelopen 30 dagen.
- Kies het doel: Conversion rate (bestellingen) of Click-through rate (klikken op resultaten, die sneller reageren).
- Maak de lijst kleiner met Filter by name of een statusfilter zoals Needs attention of Significant.
- Personalization: het segment, met daaronder de zoekconfiguratie waar het bij hoort. Klik erop om die configuratie te openen.
- Audience: hoeveel profielen er bij de laatste preview in het segment zaten.
- Exposure: zoekopdrachten die de personalisatie kregen, met daaronder de zoekopdrachten van de controlegroep.
- Conv. rate of CTR: de ratio voor gepersonaliseerde zoekopdrachten, met daaronder de ratio van de controlegroep.
- Uplift: de beste schatting van het verschil, als percentage van de controleratio en in procentpunten. Blijft leeg tot beide groepen genoeg data hebben.
- De balk ernaast: het betrouwbaarheidsbereik. Het echte effect ligt vrijwel zeker binnen dat bereik. Loopt de balk over nul heen, dan is het resultaat nog niet bewezen. Beweeg je muis erover voor de exacte cijfers.
- Incremental: de extra omzet en bestellingen die de personalisatie in de periode opleverde, vergeleken met wat dezelfde zoekopdrachten tegen de controleratio zouden hebben opgebracht. Negatief als hij verliest.
Wat elke status betekent
| Status | Wat het betekent |
|---|---|
| Winning | Klanten die de personalisatie kregen, converteren (of klikken) meer dan de controlegroep, en het hele bereik ligt boven nul. |
| Losing | Het hele bereik ligt onder nul: de personalisatie presteert slechter dan wat de controlegroep krijgt. |
| No effect | Er is genoeg data, maar het bereik bevat nog steeds nul. Er is geen verschil aangetoond, de ene of de andere kant op. |
| Collecting | Tot nu toe minder dan 100 zoekopdrachten (of vertoningen) in de gepersonaliseerde groep of de controlegroep. Het percentage laat zien hoe dichtbij het is. |
| Paused | Je hebt de personalisatie uitgezet. De rij blijft staan, zodat je nog kunt zien wat hij deed. |
| No control | Niemand wordt achtergehouden, dus er is niets om mee te vergelijken en er kan geen uplift worden getoond. |
| Orphaned | Het segment waarop hij gericht was, is verwijderd. Hij geldt voor niemand meer. |
De bereiken worden breder naarmate je meer personalisaties toevoegt. Met dertig rijen op de pagina lijkt er puur door toeval wel één een winnaar, dus bluebarry vraagt om sterker bewijs voordat het iets Winning of Losing noemt.
Als iets Losing of No effect is
Losing
De regels maken de zoekfunctie slechter voor die groep. Open de configuratie vanuit de rij en kijk wat het segment krijgt. Veelvoorkomende oorzaken: een pin of boost die producten naar voren haalt die mensen niet willen, of een exclude-regel die populaire artikelen verbergt. Pas de regel aan of verwijder hem, of pauzeer de personalisatie met de schakelaar Active terwijl je erover nadenkt.
No effect
Het segment krijgt andere resultaten, maar klanten gedragen zich hetzelfde. Of de wijziging is te klein om verschil te maken, of het segment is te breed om het te merken. Probeer regels die meer van de eerste resultaten veranderen, of maak het segment specifieker, zoals mensen die op een categorie zochten en niets kochten. Onthoud dat No effect met een smal bereik rond nul ook een antwoord is: je kunt je opzet vereenvoudigen.
Lang op Collecting
Bij een klein segment of een rustige webshop duurt het langer voordat de controlegroep 100 zoekopdrachten heeft. Maak de periode langer, of het segment breder.
Goed om te weten
- Een bestelling telt mee voor een personalisatie als de klant een product kocht dat hij via de zoekfunctie vond, op dezelfde manier als je zoekanalyses die tellen. Voor omzet heb je geïmporteerde of getrackte bestellingen nodig: zie Je bestellingen importeren.
- Zit een klant in meer dan één getarget segment, dan geldt de personalisatie die het hoogst in je lijst staat. Je wijzigt de volgorde in de zoekconfiguratie.
- Verwijder je een segment, dan wordt de bijbehorende personalisatie Orphaned. De eerdere resultaten blijven zichtbaar.
- Wil je liever hele versies van een quiz, je zoekfunctie of een pop-up vergelijken? Experimenten testen een nieuwe versie bij een deel van je klanten en helpen je de winnaar te publiceren. Zie Zo werken experimenten.