Så er din indvirkningsrapport negativ, hvad sker der nu?

Denne vejledning er ment som et ledsagedokument til indvirkningsrapporten i Tableau. Ved at følge prompterne "Handlingspunkt" (ses herunder) som angivet i rapporten vil det hjælpe dig med at tænke over det store billede af det, der sker. Detaljerne nedenfor er ment som en dybere vejledning til at stille de kritiske spørgsmål.

1. Udvidelse af rækkevidde og måling af dit målte personaliseringsprogram

• Gennemse listen over “ikke-tagget” kampagner, bør der tilføjes nogen? 
• Gennemgå listen over kampagner, der bruger den gamle evaluator, kan du opdatere dem til den nye?
• Gennemse listen over kampagner, der ikke bruger en lokal kontrol, kan du tilføje en lille en til målingsformål?

2. Forståelse af mætning

• Hvor stor en andel af de samlede oplevelser og kampagner er med i indvirkningsrapporten? Er rapporten et repræsentativt udsnit af personaliseringsprogrammet eller et delvist øjebliksbillede?
• Er der et stort spring mellem de procenter, der dækkes af oplevelser vs. kampagner? Inkluderes der kun få oplevelser pr. kampagne i stedet for dem alle? Hvad er forklaringen på dette?

3. Gennemgang af overordnede KPI'er

• Åbn den overordnede indvirkningsrapport, og indstil til den relevante tidsramme
• Analysér måned-til-måned-performance for store fald eller stigninger

• Sammenlign den samme tidsperiode med forklaringsmålingerne i afsnittet nedenfor – kan du identificere noget, der ændrede sig i løbet af den tidsperiode?

• Kan du identificere et af disse strategiske initiativer, som I kan læne I dig op ad på grund af det? Overvej følgende spørgsmål, når du har identificeret det område, der giver anledning til bekymring:
  • Antal brugere:
    • Er strategien for betalt erhvervelse med henblik på at opnå mere trafik blevet ændret?
    • Var der nogen større skift i henvisningskilder eller organisk trafik?
    • Har en produktopdatering eller en ekstern begivenhed mindsket brugernes interesse eller tilgængelighed?
      • Det kan også være en fordel at udnytte målgrupperapporteringsdashboardet til at sammenligne skift i målgruppestørrelse samt det segmenterede tragtdashboard til at sammenligne nye versus tilbagevendende. F.eks.: Favoriserer dit program en specifik målgruppe, hvis størrelse svinder ind over tid?
  • Antal målte oplevelser:
    • Er færre oplevelser blevet tagget eller inkluderet i rapporten for nylig?
    • Er kampagner blevet sat på pause eller fjernet fra måling?
    • Er der uoverensstemmelse mellem de faktiske oplevelser og dem, der bliver målt?
    • Er der tekniske problemer, som forhindrer, at oplevelser bliver sporet?
  • Experience-rækkevidde:
    • Vises oplevelser til en mindre del af brugerne end forventet?
    • Er målrettningen Become mere snæver eller eksklusiv?
    • Udelukker målgruppelogikken for mange brugere?
  • Gennemsnitligt antal oplevelser:
    • Ser brugere færre oplevelser pr. bruger, mens rækkevidden forbliver stabil? Hvad er en potentiel forklaring på dette: afvisningsprocent, brugertræthed, irrelevante oplevelser?
    • Reducerede en ændring i personaliseringslogikken oplevelsesfrekvensen?
    • Prioriteres visse oplevelser frem for andre?
  • Primær sats for målgruppemålrettet markedsføring:
    • Er målgretningslogikken blevet opdateret for nylig? Kan den utilsigtet have udelukket vigtige målgruppesegmenter?
  • CTR på anbefalinger:
    • Er designet eller placeringen af anbefalingerne ændret?
    • Er anbefalingerne mindre relevante eller engagerende end før?
    • Ændrede anbefalingsalgoritmen eller -logikken sig for nylig?
    • Ser brugere for mange ensformige eller lavværdi-anbefalinger?

Hvis du har identificeret en af ovenstående forklaringsmetrikker som en potentiel kilde til bekymring, kan du overveje at gennemse dokumentet med de 10 principper for en strategisk tilgang på højt niveau.

• Ved at benytte modulet mærket med kampagner og oplevelser øverst til venstre kan der skiftes mellem alle aktive inden for tidsrammen og de, der er live i øjeblikket. Spørg dig selv:
  • Er mange kampagner blevet deaktiveret eller udelukket siden tidsrammen? Hvor repræsentativ for dit personaliseringsprogram er denne test baseret på dens mætning?

• Før du kaster dig ud i kampagneanalyse, skal du beslutte, hvilken métrik du vil bruge til at evaluere performance
  Som standard er OS Impact-primærmétrikken valgt, og dens navn kan findes øverst i filteret

• Start undersøgelsen med de oplevelser, der viser den mest negative trinvise KPI. Dette er de oplevelser, der sandsynligvis havde den største negative indvirkning på OS Impact-performancen i den valgte tidsperiode
  
  Eksempel:

Når du har identificeret kampagner eller oplevelser, der skal undersøges, kan du stille følgende spørgsmål:

1. Hvad skete der med disse kampagner over tid?
2. Hvad kan gøres for at forbedre dens performance?

1. Gå i dybden ved at klikke på oplevelses- eller kampagnenavnet.

Se nu på performancediagrammet over tid i højre side:

Og overordnet versionshistorik for oplevelsen:

Nu er det tid til at spørge sig selv:

• Hvornår begyndte performancen at falde?  Hvad foregik der ellers på det tidspunkt?
• Hvilke ændringer blev foretaget i disse versioner? Skadede nogen af dem performancen?
• Hvor længe kørte kampagnen før ændringen? Et hurtigt fald tidligt kan betyde problemer med opsætningen. Et langsomt fald kan betyde, at brugerne blev trætte af det.
• Har noget uden for kampagnen påvirket resultaterne? Overvej sæsonændringer, produktlanceringer eller udsalg. Overvej overlappende kampagner på de samme sider, hvor kombinationen af oplevelser giver et samlet negativt resultat
• Hvordan er denne kampagnes tidsplan sammenlignet med andre? Viser det en tendens, eller er det den eneste?

2. Omvendt kan du spørge dig selv, hvis der var en version, der vendte præstationstrenden fra negativ til positiv: Hvad blev ændret her? Kan denne tilgang anvendes på andre oplevelser?

3. Indhent mere kontekst ved at gå til fanen Administration – linket vises, når du klikker på løftet:

Og ved at gå til fanen "Se denne kampagne i detaljer" kan du kontrollere start- og slutdatoer, trafikdata med mere.

Fokusér på oplevelser med stor rækkevidde sammenlignet med andre kampagner, hvor den trinvise KPI og stigning er positive, men tæt på nul. Dette er de oplevelser, der har en relativt stor målgrupperækkevidde, men som ikke ser ud til at udnytte den fuldt ud.

Stil dig selv følgende spørgsmål:

1. Hvad er der sket med denne oplevelse over tid? Kunne den have klaret sig meget bedre tidligere?

2. Er der potentiale for at generere større værdi fra dette publikum? Det er måske det rette tidspunkt at eksperimentere på!