Eksperimente dhe flamuj

1. Pyetja që merr përgjigje

Mjeti juaj i eksperimenteve ju tregon se varianti B konverton 12 % më pak. Nuk ju tregon pse dhe nuk mund t'ju tregojë një person të vetëm që has vështirësi me të.

Kjo urë e mbyll atë boshllëk në mënyrën më të lirë të mundshme: lexon caktimin e variantit nga mjeti që përdorni tashmë dhe ia bashkëngjit seancës MousePlayer. Prej atëherë, „më trego seancat që panë variantin B dhe bënë klikime zemërimi“ është filtër, jo projekt kërkimi.

2. Mjetet dhe i vetmi rregull që ndajnë

Gjashtë mjete A/B dhe pesë ofrues flamujsh, të gjithë lexohen në shfletues, të gjithë përmes API-së publike të vetë mjetit.

Lloji	Mjete
A/B dhe eksperimente	Optimizely, VWO, AB Tasty, Kameleoon, pasuesit e Google Optimize, Convert
Flamuj funksionesh	LaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

Vetëm caktime që ndodhën vërtet

VWO është shembulli më i qartë i rregullit: marrim një fushatë vetëm kur gjendja e saj është RUNNING dhe një kombinim i është caktuar vërtet këtij vizitori. Një fushatë që është thjesht e përcaktuar nuk ju thotë asgjë për personin që shikon dhe shkrimi i saj në seancë do ta bënte çdo filtër të mëvonshëm të gënjente.

Disa përgjigje mbërrijnë vonë

ConfigCat zgjidhet në mënyrë asinkrone; Snowplow përgjigjet me callback. Vlerat e tyre vendosen në bufer dhe merren në kalimin pasues në vend që të priten - një urë që bllokon faqen për të mësuar emrin e variantit tashmë ka kushtuar më shumë se sa vlen.

3. Çfarë i kushton faqes suaj

Asgjë të matshme. Nuk ka kërkesë rrjeti nga ne, as skript shtesë dhe asnjë punë kur ura është e çaktivizuar.

Mjeti që integroni tashmë kryen punën e vet pavarësisht nëse lexojmë prej tij. Shtojmë një lexim, disa herë, derisa mjeti të ketë përgjigje ose të kenë kaluar njëzet përpjekje.

Pse njëzet dhe jo përgjithmonë

Mjetet e eksperimenteve shpesh ngarkohen pas nesh. Një lexim i vetëm do të humbiste pothuajse çdo caktim; një kontroll pa fund do të mbante aktiv një kohëmatës në çdo faqe për hir të një vlere që nuk do të vijë. Njëzet përpjekje në intervale gjysmësekondëshe janë kompromisi dhe është i njëjti që bëjnë përshtatësit e pëlqimit për të njëjtën arsye.

4. Ku ia vlen kjo

• Një variant që testohet më dobët për një arsye që askush nuk mund ta emërtojë. Filtroni për atë variant, renditni sipas klikimeve të zemërimit, shikoni tri seanca. Arsyeja zakonisht shihet në të parën.
• Një flamur i aktivizuar për 5 % të përdoruesve. Ato pesë për qind janë pikërisht seancat që dëshironi të shihni dhe pa këtë urë nuk ka mënyrë për t'i gjetur.
• Një test që duket pa ndryshim. Ndonjëherë të dy variantet janë njësoj të këqija në të njëjtin vend dhe mjeti i eksperimentit nuk mund t'jua thotë - ai vetëm krahason totalet.