Системаи санҷиши баннерии A/B чӣ гуна сохта мешавад

Як парчами "хушбахт" системаро эҷод намекунад. Системаи озмоишии A/B лӯла аст: мухтасар → истеҳсоли опсияҳо → назорати таассурот → ҷамъоварии ченакҳои дуруст → омор → ҳалли → бойгонӣ → миқёс. Дар зер маҷмӯи ҳадди аққали равандҳо ва артефактҳо барои санҷишҳо такроршаванда ва фоидаовар мебошанд.

1) Ҳадафҳо ва ченакҳо: он чизе ки мо оптимизатсия мекунем

Андозагирии пеш аз клик ва кликро зер кунед - вагарна шумо CTR-ро аз ҳисоби трафики номатлуб "ҷобаҷо мекунед".

Клики пешакӣ:

Намоиш.
vCTR = кликҳо/таассуроти намоён (метрикаи асосӣ барои эҷодкорӣ).
Басомад ва расидан (барои назорат кардани "хастагӣ").
Ҷойгиркунӣ-омехта (платформаҳо/форматҳо).

Пост-клик:

Landing CTR (амали аввал), LPV/ҳаракат, чорабинии асосӣ CVR.
Вақт ба амали аввал, нокомӣ, сифати роҳбарӣ/фармоиш.
Down-funnel (агар дастрас бошад): амонат/харид/такрор.

Маҳдудиятҳо/сиёсатҳо (YMYL/қимор, fintech ва ғайра):

Ҳеҷ ваъдаҳои "натиҷаи кафолатнок", эҳтиром ба масъулият/ҳуқуқӣ.
CTA-ҳои бетараф ("Шартҳои намоиш", "Намоиши кушод"), радкунӣ дар ҷойҳои зарурӣ.

2) Меъмории таҷрибавӣ: система аз чӣ иборат аст

1. Қоидаҳои гипотеза (қолаб): проблема → идея → эффекти пешбинишуда (MDE) → ченакҳо → сегментҳо → хатарҳо.

2. Номгузорӣ ва таҳрири файлҳо/рамзҳо:


2025-10_campaignX_geoUA_format-300x250_offer-A_cta-B_visual-C_v02. вебп

3. Ҷадвали масири ҳаракат: ҷойгиркунӣ → гурӯҳи A/B → ҳиссаи дисплей → истисно.

4. Схема событий (нақшаи пайгирӣ): таассурот, таассуроти намоён, клик, пагевев, cta_click, form_start, form_error, пешниҳод, харид.

5. Қабати нигоҳдорӣ ва тайёрӣ: гузоришҳои хом → нормализатсия (де-дуп, филтрҳои зидди бот) → намоишҳо.

6. Панели панелҳо: пеш аз клик, пост-клик, гузориши ҷудонопазири озмоиш.

7. Бойгонии қарор: гипотеза → давраи → андозаи намуна → p-value/фосилаи эътимод → қарор → таҳия.

3) Тарҳрезии A/B: қоидаҳои сабабҳои "тоза"

Тағйир додани 1 омил дар як вақт (пешниҳод ё визуалӣ ё CTA).

Тасодуфӣ аз ҷониби корбар ба ҷои намоиш (куки/уид), то ки як шахс ҳарду вариантро дар сессия намебинад.

Стратификатсия (аз рӯи сайт/формат/дастгоҳ), агар онҳо ба VCTR сахт таъсир расонанд.

Санҷиш = ҳафтаҳои пурра барои пӯшонидани мавсимӣ.

Пеш аз оғози кор MDE (таъсири ҳадди аққали муайяншаванда) -ро ислоҳ кунед: масалан, мо мехоҳем + 8% -ро ба VCTR гирем.

Ҳолати таваққуф: ба қудрати зарурии оморӣ ва давомнокии N ≥ N рӯз расид. "Peep" накунед ва барвақт бас накунед.

4) Статистикаи бе дард

Интихоб ва давомнокӣ: Ҳар қадаре, ки сатҳи ибтидоии v: CTR/CR камтар ва MDE камтар бошад, трафики бештар ва санҷиш дарозтар аст.

Метрика барои ҳалли: дар эҷодкорӣ - аксар вақт VCTR, аммо ҳалли ниҳоӣ баланд бардоштани CR/CPA мебошад, агар пас аз клик вуҷуд дошта бошад.

Ҳамеша дар ҳисобот фосилаҳои эътимодро нишон диҳед; аз хулосаҳои 1-2 рӯз дурӣ ҷӯед.

Multisequences: агар> 2 вариант бошад, нақшаи Bonferroni/FDR -ро истифода баред ё ҷуфт санҷед.

Санҷишҳои пайдарпай/таваққуфи барвақт: Ҳудудҳоро татбиқ кунед (масалан, О'Брайен-Флеминг) агар асбоб инро карда тавонад.

Бандитҳо vs A/B: бандитҳо барои истифодаи худкори ғолиб бо ҳадафи устувор мувофиқанд; барои фаҳмиши маҳсулот, таҳлили эҷодӣ ва бойгонӣ - классикии A/B шаффофтар аст.

5) Назорати сифати ҳаракат

Филтрҳои анти-бот: суръати шубҳанок баланд, клик бидуни дидан, агенти ғайримуқаррарии корбар/IP.

Бехатарии бренд: истисноҳои сайт/калимаҳои калидӣ, рӯйхати манфӣ.

Geo/Дастгоҳ: Дар сегментҳое, ки шумо нақша доред, озмоиш кунед.

Пӯшидани басомад: басомади намоишро аз ҷониби корбар маҳдуд кунед (масалан, 3-5/рӯз), вагарна "хастагӣ" натиҷаро таҳриф мекунад.

6) Гардиш ва "хастагӣ" -и эҷодкорон

Ҳадди хастагӣ: паст шудани v-CTR ба 30-40% бо тамошои устувор ва фарогирӣ - сигнал барои гардиш.

Тақвими гардиш: ҳар ҳафта тамоюлҳои V CTR/ҷойгиркуниро санҷед; ҳавзи 6-12 вариантро нигоҳ доред (матритса пешниҳод мекунад × визуалӣ × CTA).

Ҷудошавии натиҷа: аломатҳои омили мағоза (пешниҳод, визуалӣ, кта, ранг, тарҳ) бо мақсади ҷамъоварии "дастурҳои" ғолибон бо мурури замон.

7) Раванди ниҳоӣ

1. Банақшагирӣ (душанбе): Кумитаи гипотеза (Маркетинг + Дизайн + Таҳлилгар). Барои як ҳафта 2-4 фарзияро интихоб мекунем.

2. Истеҳсол (1-3 рӯз): бастаҳои тарроҳӣ барои ҳама форматҳо, рӯйхати QA (контрасти CTA, вазн, минтақаи бехатар, мувофиқат).

3. Оғоз: тақсими трафики 50/50 (ё 33/33/33); ислоҳ кардани сегментҳо, гузоришҳои имконпазир.

4. Мониторинг: санҷиши ҳаррӯзаи солимӣ (бидуни қабули қарор): ҳиссаи таассурот, дидан, парчамҳои бот.

5. Таҳлил (охири ҳафта/пас аз расидан ба қудрат): ҳисобот бо фосилаҳо, зерсохторҳои мобилӣ/мизи корӣ, тавзеҳот.

6. Ҳал: ғолиб - амалиёт, зиёнкор - ба бойгонӣ; мо гипотезаи зеринро дар асоси фаҳмишҳо ташкил медиҳем.

7. Бойгонӣ: корти таҷрибавӣ + файлҳои эҷодӣ + sql ҳисоботи дархост + дубора.

8) Маълумот ва панелҳо: чӣ бояд нигоҳ дошт ва чӣ гуна бояд тамошо кард

Модели парвандаи мини (аз рӯи рӯз/эҷодӣ/сегмент):


сана, маърака, гео, дастгоҳ, ҷойгиркунӣ, формат, creative_id, пешниҳод, визуалӣ, кта, вариант,
таассурот, viewable_impressions, клик, вктр, lp_sessions, cta_clicks, form_start, пешниҳод, харид, bounce_rate, avg_scroll, time_to_first_action

Панели панелҳо:

Пеш аз клик: тамошобоб, VCTR, басомад, дастрасӣ, кортҳои ҷойгиркунӣ.
Пост-клик: CR бо қатори ҳалқа, сифати сурб/CPA.
Таҷрибаҳо: нардбони фосилаҳои эътимод, вақти таъсирбахш, бодҳои сегментҳо.

9) QA ва рӯйхати назоратӣ

Форматҳо: 300 × 250, 336 × 280, 300 × 600, 160 × 600, 728 × 90, 970 × 250; мобилӣ 320 × 100/50, 1:1, 4:5, 16:9, 9:16
Вазн ≤ 150-200 КБ (статикӣ/HTML5), Web-P/PNG, бе GIF-ҳои "вазнин"
Контрасти CTA (WCAG), минтақаҳои бехатар (≥ 24 px аз канор)
Бе клик/ваъдаҳо, радкуниҳои дуруст
Трекинг: дидан, клик кардан, lpview, cta_click, form_start, пешниҳод кардан
Тасодуфӣ аз ҷониби корбар, таносуби возеҳи таассуроти A/B
Филтрҳои зидди бот фаъол карда шуданд, истисноҳо ҷойгир карда шуданд

10) Китобхонаи гипотеза: Чиро санҷидан лозим аст

Пешниҳод:

"Шартҳои шаффофи бонус" против "Ҳама истилоҳот дар як саҳифа"
"Демо бидуни сабти ном" vs "Интерфейси намоиш"

CTA:

"Шартҳои намоиш" vs "Тафсилотро омӯзед"
"Open Demo" vs "Ҳоло кӯшиш кунед"

Визуалӣ:

Scene/hero vs интерфейси экран vs иконография
Заминаи гарм vs бетараф; тугмаи контур ва пур кардан

Таркиб:

Лого-чапи против паймон; CTA рост vs поёни
Нишони эътимод дар CTA vs зери сарлавҳа

Микро ҳаракат (HTML5):

Ҳамвории ҳамвор дар PTC vs зарбаи набзи CTA (≤ 12 c, 2-3 марҳила)

11) Қоидаҳои қарор

Ҳадди аҳамият: p ≤ 0. 05 ва/ё фосилаи пурраи эътимод> 0 дар ҷойгоҳи MDE.

Сарҳади ақли солим: агар бурди VCTR вуҷуд дошта бошад, аммо CR/CPA ғарқ шудааст, мо паҳн намекунем.

Ғолибони сегмент: агар фарқият танҳо дар мобилӣ/GEO назаррас бошад - ҳадафи пешбинишуда.

Этика: мо бурдҳоро аз ҳисоби матни манипулятивӣ/clickbait қабул намекунем.

12) Анти-намунаҳо (ки системаро вайрон мекунад)

Бисёр омилҳо дар як санҷиш → хулоса бароварда намешавад.

Қарорҳо "аз рӯи ҷадвал барои 2 рӯз".

Омезиши каналҳо (шунавандагони гуногун) дар як озмоиш.

Набудани тамошобин → мурдаи VCTR.

Бойгонии таҷрибаҳо § такрори хатогиҳо ва "велосипедҳои абадӣ" вуҷуд надорад.

Басомади таассурот → ғалабаҳои қалбакӣ бо сабаби "диққати аввал" ба назар гирифта намешавад.

13) Нақшаи татбиқи 30/60/90

0-30 рӯз - Системаи MVP

Қолаби гипотеза, номгузорӣ, рӯйхати назоратии QA.

Диаграммаи чорабиниҳо ва панели пеш аз клик/пас аз клик.

1-2 таҷриба: пешниҳод ва CTA дар шакли калидӣ (300 × 250/320 × 100).

Фаъол кардани намоиш ва филтрҳои зидди бот.

31-60 рӯз - амиқтар

Васеъ кардан ба ҳамаи форматҳо ва ҷойгиркуниҳои боло; вариантҳои HTML5 илова кунед.

Иҷрои қоидаҳои гардиш ва ҳадди "хастагӣ".

Ҷорӣ кардани стратификатсия аз рӯи дастгоҳ/сайт, тақсимоти сегменти ғолибон.

61-90 рӯз - камолот

Бойгонии таҷрибаҳо ва заминаи омилҳо (пешниҳод/визуалӣ/кта).

Мухтасари саволномаи худкор + тарҳҳои нимтайёр (системаи тарроҳии эҷодӣ).

Ҳисоботи ҳармоҳа: ROI санҷишҳо,% ғолибон, саҳм ба CR/CPA.

Озмоиши бандитҳо барои истифодаи худкори ғолибон дар сегментҳои устувор.

14) Қолабҳои хурд (барои хамираи нусхабардорӣ омодаанд)

Қолаби гипотеза


Барориш: сатҳи пасти VCTR дар мобилӣ дар GEO {X}
Идея: иваз кардани визуалӣ бо саҳна бо интерфейси экран + CTA "Demo Open"
MDE: + 8% k v: CTR
Ченакҳо: v: CTR (ибтидоӣ), CR (миёна), CPA (назорат)
Сегментҳо: мобилӣ, форматҳои 320 × 100/1: 1
Хатарҳо: тарки пас аз клик; чорабинии LP чек

Корти умумӣ


A: VCTR 1. 22% [1. 15; 1. 29], CR 4. 1%
B: v: CTR 1. 34% [1. 27; 1. 41], CR 4. 3%, CPA ↓ 6%
Қарор: B бурд. Иҷроиш: мобилии GEO {X}, 100%
Шарҳ: Таъсир ба ҷойгиркунии Y/Z қавитар аст

Системаи санҷиши баннерии A/B ин "ранги тугма" нест, балки маҷмӯи фанҳо: ченакҳои дуруст (нуқтаи назари → v Сохтани лӯлаи фарзияҳо, пойгоҳи бойгонӣ ва омилҳо - ва эҷодкорӣ лотереяро қатъ хоҳад кард: шумо пайваста самаранокии таблиғотро афзоиш медиҳед ва CPA-ро дар қадамҳои пешбинишаванда коҳиш медиҳед.