A/B testining asosiy g'oyasi oddiy:
Qaysi biri yaxshiroq ishlashini ko'rish uchun biror narsaning ikki (yoki undan ko'p) xil versiyasini taqqoslang va keyin eng maqbul umumiy tajriba uchun g'olibni barcha foydalanuvchilarga tarqating.
Shunday qilib, A/B sinovlari va CRO guruhlarining amaliyoti sayt, mahalliy ilova, elektron pochta yoki boshqa har qanday raqamli kanal bo'ylab turli sohalar va tajribalarni yaxshilash uchun barcha turdagi tajribalarni ishga tushirishga katta mablag 'sarflash va keyin vaqt o'tishi bilan konversiyalar va ma'lum KPI-larni bosqichma-bosqich oshirish uchun ularni doimiy ravishda optimallashtirishdan iborat edi.
Biroq, agar kompaniya juda ko'p trafik yaratmasa va tajriba o'tkazish uchun ulkan raqamli landshaftga ega bo'lmasa, eksperiment natijasi (qancha sinovlar yoki tajriba qanchalik katta va murakkab bo'lishidan qat'i nazar) ushbu jamoalarning ma'lumotlari nuqtai nazaridan maksimal rentabellikka erishadigan pasayish nuqtasi paydo bo'lishi mumkin.
Bu asosan A/B testlariga klassik yondashuv tashrif buyuruvchilarning afzalliklarining ikkilik ko'rinishini taqdim etishi va ko'pincha ularning shaxs sifatida kimligini belgilaydigan omillar va xatti-harakatlarning to'liq doirasini qamrab olmasligi bilan bog'liq.
Bundan tashqari, A/B testlari segmentning ko'pchilik afzalliklariga asoslangan umumlashtirilgan natijalarni beradi. Brend o'rtacha hisobda ko'proq daromad keltiradigan ma'lum bir tajribani topishi mumkin bo'lsa-da, uni barcha foydalanuvchilarga tarqatish turli xil afzalliklarga ega iste'molchilarning katta qismi uchun zararli bo'ladi.
Keling, bir nechta misollar bilan tushuntirib beray:
Agar men va Uorren Baffetning sof boyligi o'rtacha 117,3 milliard AQSh dollarini tashkil etsa, bizga ham xuddi shu mahsulotlarni tavsiya qilish mantiqan to'g'ri keladimi?
Ehtimol, yo'q.
Yoki erkaklar va ayollar mahsulotlarini sotadigan chakana sotuvchi eng yaxshi natija ko'rsatuvchi qahramon banner variantini aniqlash uchun o'z bosh sahifasida klassik A/B testini o'tkazishga qaror qilsa-chi, lekin ularning auditoriyasining 70% ayollar bo'lgani uchun ayollar varianti erkaklarnikidan ustun bo'lsa-chi?
Bu sinov ayollar qahramoni bayrog'ini butun aholiga qo'llashni anglatadi, ammo bu, albatta, to'g'ri qaror bo'lmaydi.
Sodda qilib aytganda:
- Turli foydalanuvchi guruhlarini taqqoslash uchun foydalanilganda o'rtacha ko'rsatkichlar ko'pincha chalg'ituvchi bo'ladi
- Har bir mijoz segmenti va foydalanuvchi uchun eng yaxshi natija ko'rsatuvchi o'zgarishlar
- Natijalarga geografik joylashuv, ob-havo va boshqa kontekstual omillar ham ta'sir qilishi mumkin
Albatta, bu umumlashtirilgan natijalardan foydalanish uchun vaqt va joy yo'q degani emas. Masalan, agar siz yangi veb-sayt yoki ilova dizaynini sinab ko'rayotgan bo'lsangiz, turli foydalanuvchilar uchun o'nlab, yuzlab yoki hatto minglab UI variantlariga nisbatan o'rtacha eng yaxshi ishlaydigan bitta izchil UI ga intilish mantiqan to'g'ri keladi.
Biroq, sahifa dizayni, xabarlar, kontent, tavsiyalar, takliflar va boshqa ijodiy elementlarga "g'olib hamma narsani oladi" yondashuvini sodiqlik bilan qo'llash kunlari tugadi - va bu normal holat, chunki bu endi har bir foydalanuvchiga eng yaxshi variantni taqdim etmaslik bilan bog'liq shaxsiylashtirish imkoniyatlarini boy berishdan pul qolmaydi deganidir.