Баҳсро дар бораи он ки кадом баннер беҳтар аст, A/B-санҷиш бо рақамҳо дар даст ҳал мекунад: вай нишон медиҳад, ки кадом тағйирот воқеан CTR, конверсия ва арзиши дархостро ҳаракат медиҳад ва кадомаш танҳо муваффақ менамояд. Биёед бубинем, ки чунин таҷрибаро барои баннерҳо ва видео чӣ тавр банақша гирифтан, дар танзим хато накардан ва натиҷаро дуруст хондан мумкин аст.
Аз чӣ оғоз кардан: афзалиятҳо барои санҷиш
Аз унсурҳое оғоз кунед, ки рафтори одамро бештар аз ҳама тағйир медиҳанд:
- Пешниҳод ва фоида — нарх, мӯҳлат, кафолат, «имрӯз меорем».
- Оғози ролик ё корти аввали карусел — он чизе, ки нигоҳро дар лаҳзаҳои аввал нигоҳ медорад.
- Ҳалли визуалӣ — замина, контраст, қаҳрамони кадр, кунҷи наворбардорӣ, намуди тугма.
- Давомнокии видео — «қалмоқаки» кӯтоҳ бар зидди версияи дарозтар.
- Матни даъват — «Фармоиш додан» бар зидди «Машварат гирифтан».
- Формат — амудӣ ё мураббаъ, имзои мухтасар ё муфассал.
Қоидаи асосӣ: дар як санҷиш як тағйирёбандаи муҳим иваз мешавад. Агар якбора расм, матн ва тугмаро иваз кунед, дигар намедонед, ки маҳз чӣ натиҷа дод.
Фарзия: ифода ва ҳисобгирӣ
Формулаи қулай: агар мо [тағйирот] кунем, пас [метрика] ба X% зиёд ё кам мешавад, зеро [мушоҳида дар бораи мизоҷон].
Масалан: «Агар нархро дар сонияҳои аввали ролик нишон диҳем, CTR ба 10% зиёд мешавад, зеро шубҳаи асосии аудитория — тарси он аст, ки ин гарон аст».
Ҳамаи фарзияҳоро дар як ҷадвал пеш бурдан қулай аст:
| № | Муқоиса | Тағйирот | Метрика | Таъсири интизоршаванда | Ҳолат |
|---|---|---|---|---|---|
| H-01 | Ролики A ва ролики B | Оғоз: нарх ё кушодани қуттӣ | CTR / CPA | CTR +10% | Санҷиш идома дорад |
Чӣ тавр таҷрибаи одилона танзим кард
- Ҳиссаҳои баробар. Трафикро баробар тақсим кунед ё буҷаҳои якхела ҷудо кунед ва аудиторияро ҳамон як нигоҳ доред.
- Як плейсмент. Дар як санҷиш лента ва сторисро омехта накунед: инҳо шароити гуногуни тамошо мебошанд.
- Давраи ором. Як-ду ҳафта пешбинӣ кунед ва санҷишро дар вақти фурӯши тахфифӣ ё идҳо оғоз накунед.
- Назорати аукцион. Агар CPM ё басомади намоишҳо якбора тағйир ёбад, муқоисаи вариантҳо дақиқии худро гум мекунад.
- Сабр. Санҷишро дар рӯзи дуюм аз сабаби рақамҳои ҷолиб хомӯш накунед — ҳаҷми банақшагирифтаи маълумотро интизор шавед.
Чӣ қадар маълумот лозим аст
Меъёри амалӣ — ақаллан 100–200 амали мақсаднок барои ҳар вариант: кликҳо, агар CTR-ро муқоиса кунед, ё конверсияҳо, агар CVR ва CPA-ро муқоиса кунед.
Барои арзёбии дақиқтар дар сатҳи аҳамиятнокии 95% ва тавоноии 80% формулаи тахминиро истифода мебаранд:
n ≈ 16 · p · (1 − p) / MDE²
Дар ин ҷо p — конверсияи ҷорӣ, MDE — таъсири ҳадди ақалле, ки мехоҳед пай баред (дар ҳиссаҳо), n — шумораи меҳмонон ё намоишҳо барои ҳар вариант.
Мисол: конверсияи асосӣ 3% (p = 0,03), мехоҳем фарқи ним пунктро бинем (MDE = 0,005). Он гоҳ n ≈ 16 · 0,03 · 0,97 / 0,000025 ≈ 18 600 меҳмон барои ҳар вариант, ё тақрибан 560 конверсия. Ҳар қадар таъсир хурдтар бошад, ҳамон қадар интихоби калонтар лозим аст.
Кай натиҷаро боэътимод ҳисобидан мумкин аст
- CTR ва CVR — ҳиссаҳо мебошанд, онҳоро бо z-тест ё меъёри хи-квадрат муқоиса мекунанд. Фарқ аҳамиятнок аст, агар p-value на бештар аз 0,05 бошад ва он дар сегментҳои асосӣ — дар дастгоҳҳо ва минтақаҳои гуногун — нигоҳ дошта шавад.
- CPA-ро бо бутстрэп ё муқоисаи миёнаҳо ҳангоми тақсимоти монанд арзёбӣ мекунанд. Ба CPA якҷоя бо конверсия ва нархи клик нигоҳ кардан боэътимодтар аст.
Дар бораи метрикаҳои назоратӣ, ки ҳангоми афзоиши CTR набояд паст шаванд, фаромӯш накунед: ҳиссаи радкуниҳо, вақт дар сайт, умқи тамошо, конверсия ба дархост.
Ду мисоли шартӣ
Баннер бо нарх
Як ҳафта намоиш аз рӯи шавқу рағбат. Варианти A — бе нарх, варианти B — бо нарх ва қайди «Танҳо имрӯз». B CTR-и баландтар ва дархости арзонтар медиҳад (ҷадвали поёнро бинед). Қарор — B-ро васеъ кардан ва боз ду тарзи пешниҳоди нархро санҷидан: бо диапазон ва тавассути тахфиф.
Ролики кӯтоҳ бар зидди дароз
YouTube In-Stream, даҳ рӯз, муқоисаи версияи кӯтоҳ ва миёна. Ролики кӯтоҳро беҳтар то охир тамошо мекунанд (VTR ба таври шартӣ аз 25% то 33% меафзояд), CTR қариб тағйир намеёбад ва CPA аз ҳисоби тамошои пурра паст мешавад. Хулоса: версияи кӯтоҳ ҳамчун «қалмоқак» кор мекунад, версияи дароз — барои ремаркетинг.
Ҳисобот дар як экран
Рақамҳои шартӣ барои санҷиши баннерии боло:
| Нишондиҳанда | A | B | Тағйирот | p-value | Хулоса |
|---|---|---|---|---|---|
| Намоишҳо | 50 000 | 50 000 | — | — | — |
| Кликҳо | 500 | 600 | +20% | — | — |
| CTR | 1,00% | 1,20% | +20% | 0,002 | B-ро васеъ кардан |
| CPC | 4,00 | 3,40 | −15% | — | — |
| Дархостҳо | 55 | 78 | +41,8% | 0,046 | B қавитар аст |
| CPL | 36,4 | 26,2 | −28% | — | Буҷаро ба B гузаронидан |
Дар зери ҷадвал — ду-се фарзия барои давраи навбатӣ: нарх бо диапазон, заминаи дигар, версияи амудӣ.
Ритми санҷишҳо ва хатоҳои маъмул
Дар оғози маърака ду-се варианти пешниҳод ё оғози роликро муқоиса кунед. Вақте ки нишондиҳандаҳо устувор шуданд, ба ҷузъиёт гузаред: замина, қаҳрамон, ранги тугма, дарозии видео. Мунтазам ҳалқаи заифи воронкаро ҷустуҷӯ кунед: агар кликҳо зиёд, вале дархостҳо кам бошанд, саҳифаи фурудро бояд санҷид, на баннерро. Паёмҳои мавсимиро ҷудо аз паёмҳои доимӣ санҷед.
- Вариантҳои аз ҳад зиёд барои буҷаи хурд. Маълумот барои ягон хулоса намерасад — навбат ба навбат санҷед.
- Тағйирот дар рафти санҷиш. Иваз кардани аудитория ё плейсмент муқоисаро сифр мекунад.
- Қатъ кардан дар авҷ. «Муваффақияти» барвақт аксар вақт тасодуфӣ мебарояд — мӯҳлат ва ҳаҷми пешакӣ муайяншударо риоя кунед.
- Танҳо CTR. Кликҳо бе дархост арзише надоранд — ба конверсия ва рафтор дар сайт нигаред.
- Интиқоли креативҳои «гарм» ба аудиторияи хунук. Он чи дар ремаркетинг кор мекунад, барои одамони нав метавонад фаҳмо набошад.
Пеш аз оғоз санҷед: як тағйирёбанда ва тақсимоти 50/50; метрикаи муваффақият ва MDE интихоб шудаанд; мӯҳлат ва ҳаҷми лозимӣ маълуманд; плейсмент, аудитория ва буҷаҳо якхелаанд; фарзия дар ҷадвал сабт шудааст ва қоидаи қарор — «васеъ кардан, мавқуф гузоштан ё аз нав санҷидан» — пешакӣ мувофиқа шудааст.
Агар ба шумо нақшаи таҷрибаҳо барои буҷа ва каналҳои худ лозим бошад, SKY Central Asia дар доираи пешбурди digital дар сохтани санҷишҳо кӯмак мекунад. Дар бораи ин самт бештар — дар саҳифаи хидматҳои digital.
Шарҳ гузоред