Majaribio na bendera

1. Swali linalojibiwa

Zana yako ya majaribio hukuambia kuwa toleo B lina ubadilishaji mbaya kwa 12 % zaidi. Haikuambii kwa nini, wala haiwezi kukuonyesha mtu mmoja anayepata ugumu nalo.

Daraja hili huziba pengo hilo kwa njia nafuu zaidi iwezekanavyo: husoma toleo alilopangiwa kutoka zana unayoendesha tayari na kuliambatisha katika kipindi cha MousePlayer. Kuanzia hapo, “nionyeshe vipindi vilivyoona toleo B na kubofya kwa hasira” ni kichujio, si mradi wa utafiti.

2. Zana na kanuni moja wanayoshiriki

Zana sita za A/B na watoa huduma watano wa bendera, zote husomwa katika kivinjari, zote kupitia API ya umma ya zana yenyewe.

Aina	Zana
A/B na majaribio	Optimizely, VWO, AB Tasty, Kameleoon, warithi wa Google Optimize, Convert
Bendera za vipengele	LaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

Ugawaji uliotokea kweli tu

VWO ndiyo mfano wazi zaidi wa kanuni: tunachukua kampeni tu hali yake ikiwa RUNNING na mchanganyiko ukiwa umepangiwa mtembeleaji huyu kweli. Kampeni iliyobainishwa tu haikuambii chochote kuhusu mtu anayetazama, na kuiandika katika kipindi kungefanya kila kichujio cha baadaye kiwe uongo.

Baadhi ya majibu hufika baadaye

ConfigCat hutatua kwa kujitegemea; Snowplow hujibu kwa callback. Thamani zake huwekwa katika bafa na kuchukuliwa katika mzunguko unaofuata badala ya kusubiriwa; daraja linalozuia ukurasa ili kujua jina la toleo tayari limegharimu zaidi ya thamani yake.

3. Gharama kwa ukurasa wako

Hakuna inayopimika. Hakuna ombi letu la mtandao, hakuna hati ya programu ya ziada na hakuna kazi yoyote daraja likizimwa.

Zana unayopachika tayari hufanya kazi yake yenyewe iwe tunaisoma au la. Tunachoongeza ni usomaji mmoja, mara chache, hadi zana iwe na jibu au majaribio ishirini yawe yamepita.

Kwa nini ishirini badala ya milele

Zana za majaribio mara nyingi hupakiwa baada yetu. Usomaji mmoja ungekosa karibu kila ugawaji; ukaguzi usioisha ungeacha kipima muda hai katika kila ukurasa kwa ajili ya thamani ambayo haitafika. Majaribio ishirini kwa vipindi vya nusu sekunde ndiyo maafikiano, nayo ni yaleyale yanayofanywa na adapta za idhini kwa sababu ileile.

4. Mahali linapothibitisha thamani yake

• Toleo lenye matokeo mabaya kwa sababu ambayo hakuna anayeweza kutaja. Chuja hadi toleo hilo, panga kwa mibofyo ya hasira, tazama vipindi vitatu. Kwa kawaida sababu huonekana katika cha kwanza.
• Bendera iliyowezeshwa kwa 5 % ya watumiaji. Asilimia hizo tano ndizo hasa vipindi unavyotaka kutazama, na bila daraja hili hakuna njia ya kuvipata.
• Jaribio linaloonekana bila tofauti. Wakati mwingine matoleo yote mawili ni mabaya sawa mahali pale pale, na zana ya majaribio haiwezi kukuambia hilo; hulinganisha jumla tu.