Din påverkansrapport är alltså negativ, vad händer nu?

Den här guiden är avsedd att vara ett kompletterande dokument till påverkansrapporten i Tableau. Genom att följa uppmaningarna om ”åtgärdspunkter” (Action Item) (som visas nedan) som anges i rapporten kan du tänka mer storskaligt kring det som sker. Informationen nedan är avsedd som en djupare guide för att ställa de avgörande frågorna.

1. Utöka räckvidden och mäta det uppmätta personaliseringsprogrammet

• Granska listan över ”omärkta” kampanjer, ska några läggas till? 
• Granska listan över kampanjer som använder den gamla utvärderaren, kan du uppdatera dem till den nya?
• Granska listan med kampanjer som inte använder en lokal kontroll. Kan du lägga till en liten för mätändamål?

2. Att förstå mättnad

• Vilken andel av de totala upplevelserna och kampanjerna är taggade i påverkansrapporten? Är rapporten ett representativt urval av personaliseringsprogrammet eller en bråkdel av helheten?
• Finns det en stor klyfta mellan procentsatserna för täckta upplevelser jämfört med kampanjer? Inkluderas bara ett fåtal upplevelser per kampanj i stället för alla? Vad är förklaringen till detta?

3. Granskning av KPI:er på hög nivå

• Öppna rapporten om övergripande effekter och ställ in den på relevant tidsram
• Analysera månad över månad-prestanda för stora dippar eller uppgångar

• Jämför samma tidsperiod med förklaringsmetrikerna i avsnittet nedan – kan du identifiera något som förändrades under den tidsperioden?

• Kan du identifiera ett av dessa strategiska initiativ för att satsa på på grund av det? Fundera på följande frågor när du har identifierat det område som väcker oro:
  • Antal användare:
    • Har strategin för betald kundanskaffning för att öka trafiken förändrats?
    • Fanns det några större förändringar när det gäller hänvisningskällor eller organisk trafik?
    • Har en produktuppdatering eller en händelse i omvärlden lett till minskat användarintresse eller sämre tillgänglighet?
      • Det kan också vara en fördel att använda kontrollpanelen för målgruppsrapporter för att jämföra förändringar i målgruppsstorlek samt kontrollpanelen för den segmenterade tratten för att jämföra nya besökare med återkommande. Ex: Gynnar ert program en specifik målgrupp vars storlek krymper över tid?
  • Antal uppmätta upplevelser:
    • Har färre upplevelser taggats eller inkluderats i rapporten på sistone?
    • Pausades eller togs några kampanjer bort från mätningen?
    • Finns det någon avvikelse mellan live-upplevelser och de som mäts?
    • Finns det tekniska problem som hindrar att upplevelser spåras?
  • Utforska räckvidd:
    • Visas upplevelser för en mindre delmängd av användare än förväntat?
    • Har målgruppsanpassningen Become smalare eller mer exklusiv?
    • Utesluter inriktningslogiken för många användare?
  • Genomsnittligt antal upplevelser:
    • Visar användarna färre upplevelser per användare samtidigt som räckvidden är stabil? Vad kan vara en potentiell förklaring till detta: avvisningsfrekvens, trötthet, irrelevanta upplevelser?
    • Ledde en ändring i personaliseringslogiken till att upplevelsefrekvensen sjönk?
    • Prioriteras vissa upplevelser framför andra?
  • Frekvens för primär målgruppsinriktning:
    • Har målgruppslogiken uppdaterats nyligen? Kan det ha lett till att viktiga målgrupper oavsiktligt har exkluderats?
  • Klickfrekvens för rekommendationer:
    • Har rekommendationernas design eller placering ändrats?
    • Är rekommendationerna mindre relevanta eller engagerande än tidigare?
    • Ändrades rekommendationsalgoritmen eller logiken nyligen?
    • Ser användarna för många repetitiva rekommendationer eller rekommendationer med lågt värde?

Om du har identifierat ett av dessa ovanstående förklarande mätetal som en potentiell anledning till oro kan du överväga att utforska dokumentet med de tio principerna för en övergripande strategi.

• Genom att använda den taggade modulen för kampanjer + upplevelser uppe till vänster kan du växla mellan alla aktiva inom tidsramen och de som är aktuella just nu. Ställ dig själv följande:
  • Har många kampanjer stängts av eller exkluderats sedan tidsintervallet? Hur representativt för ert personaliseringsprogram är det här testet utifrån dess mättnad?

• Innan du dyker ner i kampanjanalysen bestämmer du vilket mått du vill använda för att utvärdera resultatet
  Som standard är det primära måttet för OS Impact valt, och dess namn finns högst upp i filtret

• Börja undersökningen med de upplevelser som visar den mest negativa inkrementella KPI:n. Det här är de upplevelser som troligtvis hade störst negativ inverkan på prestandan för OS Impact under den valda tidsperioden
  
  Exempel:

När du har identifierat kampanjer eller upplevelser att undersöka kan du ställa dig följande frågor:

1. Vad hände med dessa kampanjer över tid?
2. Vad kan göras för att förbättra dess prestanda?

1. Gå på djupet genom att klicka på upplevelsens eller kampanjens namn.

Kontrollera nu prestandagrafen över tid på höger sida:

Och versionshistorik för totalupplevelse:

Nu är det dags att ställa dig själv följande fråga:

• När började resultatet att sjunka?  Vad mer hände vid den tidpunkten?
• Vilka ändringar gjordes i de versionerna? Påverkade någon av dem prestandan?
• Hur länge pågick kampanjen innan ändringen? Ett snabbt tapp i ett tidigt skede kan tyda på konfigurationsproblem. Ett långsamt tapp kan innebära att användarna tröttnade.
• Påverklade något utanför kampanjen resultaten? Tänk på säsongsbetonade förändringar, produktlanseringar eller rea. Överväg överlappande kampanjer på samma sidor där kombinationen av upplevelser ger ett nettonegativt resultat
• Hur förhåller sig tidsplanen för denna kampanj till andra? Visar det en trend eller är den den enda?

2. Om det i stället fanns en version som vände trenden från negativ till positiv kan du ställa dig själv frågan: vad ändrades här? Kan denna metod tillämpas på andra upplevelser?

3. Samla in mer kontext genom att gå till fliken Admin – länken visas när du klickar på ökningen:

Och genom att gå till fliken ”Se den här kampanjen i detalj” kan du kontrollera start- och slutdatum, trafikdata med mera.

Fokusera på upplevelser med hög räckvidd jämfört med andra kampanjer, där det stegvisa nyckeltalet och ökningen är positiva men nära noll. Detta är de upplevelser som har en relativt stor målgruppsräckvidd men som inte verkar utnyttja den fullt ut.

Ställ dig själv följande frågor:

1. Vad har hänt med den här upplevelsen över tid? Kunde den ha presterat mycket bättre i det förflutna?

2. Finns det potential att generera ett högre värde från den här målgruppen? Det kanske är dags att testa!