Esperimenti u flags

Liema varjant ra tassew? Il-bridge jikteb it-tweġiba fuq is-sessjoni, għal filtri mhux suppożizzjonijiet.

1. Il-mistoqsija

L-għodda tgħid B jikkonverti 12 % agħar, mhux għaliex, u ma turix persuna waħda tissielet.

Naqraw l-assenjazzjoni mill-għodda eżistenti u nżiduha mas-sessjoni. "Sessjonijiet li raw B u kklikkjaw bir-rabja" filtru, mhux riċerka.

Xejn jintbagħat lill-għodda. Biss naqraw dak deċiż. Esperiment qatt ma ġera jew persuna mhux assenjata jipproduċi xejn — korrett, mhux falliment.

2. Għodod u regola waħda

Sitt għodod A/B u ħames fornituri flags, fil-browser mill-API pubblika tagħhom.

TipGħodod
A/B u esperimentiOptimizely, VWO, AB Tasty, Kameleoon, suċċessuri Google Optimize, Convert
Feature flagsLaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

Assenjazzjonijiet reali biss

VWO: kampanja biss bi status RUNNING u kombinazzjoni verament assenjata. Kampanja definita biss ma tgħid xejn dwar il-persuna; kitba tagħmel il-filtri kollha gidba.

Tweġibiet jaslu tard

ConfigCat asinkroniku, Snowplow callback. Fil-buffer u jinqraw fil-pass li jmiss, bla stennija — jimblokka paġna għal isem varjant jiswa aktar milli jagħti.

3. Kost għall-paġna

Xejn li jitkejjel. Ebda network request tagħna, skript ieħor jew xogħol meta mitfi.

L-għodda tagħmel xogħolha xorta; aħna qari ftit drabi sakemm twieġeb jew għoxrin tentattiv.

Għaliex għoxrin, mhux għal dejjem

Spiss jitgħabbew wara. Qari wieħed jitlef l-assenjazzjonijiet, bla tmiem iżomm timer għal valur mhux ġej. Għoxrin kull nofs sekonda, bħall-adapters tal-kunsens għall-istess raġuni.

4. Fejn jgħin

  • Varjant agħar bla raġuni magħrufa. Iffiltraw, ordnaw bi klikks ta’ rabja u araw tliet sessjonijiet. Spiss l-ewwel turi r-raġuni.
  • Flag lil 5 % tal-utenti. Dawk il-ħamsa fil-mija eżatt li tridu taraw, bla bridge ma ssibuhomx.
  • Test bla differenza. Forsi t-tnejn ħżiena fl-istess post; l-għodda tqabbel totali biss.

Attribut normali, għalhekk CRM, warehouse u għodod MCP kollha jarawh.

It-trademarks tas-sidien rispettivi. MousePlayer bla relazzjoni kummerċjali ma’ dawn il-fornituri.