Experimenty a příznaky funkcí

Kterou variantu tato osoba skutečně viděla? Most zapíše odpověď k relaci, abyste mohli záznamy filtrovat podle varianty místo hádání.

1. Na jakou otázku most odpovídá

Nástroj pro experimenty vám řekne, že varianta B konvertuje o 12 % hůře. Neřekne vám proča neukáže ani jednoho člověka, který s ní má potíže.

Tento most vyplní mezeru co nejlevněji: přečte přiřazenou variantu z nástroje, který už používáte, a připojí ji k relaci MousePlayer. Od té chvíle je „ukaž relace, které viděly variantu B a měly vzteklá kliknutí“ filtrem, ne výzkumným projektem.

Do nástroje pro experimenty se nic neodesílá. Pouze čteme to, o čem už rozhodl. Experiment, který nikdy neběžel, nebo návštěvník, který nebyl přiřazen do skupiny, nic nevytvoří - a to je správný výsledek, ne selhání.

2. Nástroje a jejich společné pravidlo

Šest nástrojů A/B a pět poskytovatelů příznaků, všechny čtené v prohlížeči přes vlastní veřejné API daného nástroje.

TypNástroje
A/B a experimentyOptimizely, VWO, AB Tasty, Kameleoon, nástupci Google Optimize, Convert
Příznaky funkcíLaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

Pouze skutečná přiřazení

VWO je nejjasnějším příkladem pravidla: kampaň převezmeme jen tehdy, když má stav RUNNING a tomuto návštěvníkovi byla skutečně přiřazena kombinace. Pouze definovaná kampaň nic neříká o osobě na stránce a její zápis k relaci by zkreslil každý pozdější filtr.

Některé odpovědi přicházejí později

ConfigCat vyhodnocuje asynchronně; Snowplow odpovídá zpětným voláním. Hodnoty se uloží do vyrovnávací paměti a převezmou při dalším průchodu místo čekání - most, který blokuje stránku kvůli zjištění názvu varianty, už stojí více, než přináší.

3. Co to stojí vaši stránku

Nic měřitelného. Žádný náš síťový požadavek, žádný další skript a při vypnutém mostu vůbec žádná práce.

Nástroj, který už máte vložený, pracuje stejně bez ohledu na to, zda z něj čteme. Přidáváme jen čtení, několikrát opakované, dokud nástroj neodpoví nebo neproběhne dvacet pokusů.

Proč dvacet pokusů a ne donekonečna

Nástroje pro experimenty se často načítají po nás. Jediné čtení by minulo téměř všechna přiřazení; nekonečné dotazování by udržovalo časovač na každé stránce kvůli hodnotě, která nepřijde. Dvacet pokusů v půlsekundových intervalech je kompromis - stejný jako u adaptérů souhlasu, ze stejného důvodu.

4. Kde to přináší užitek

  • Varianta s horším výsledkem, jehož důvod nikdo nedokáže pojmenovat. Vyfiltrujte variantu, seřaďte relace podle vzteklých kliknutí a přehrajte tři. Důvod bývá vidět už v první.
  • Příznak uvolněný pro 5 % uživatelů. Právě těchto pět procent jsou relace, které chcete sledovat, a bez mostu je nelze najít.
  • Test, který zdánlivě neukazuje rozdíl. Někdy jsou obě varianty stejně špatné na stejném místě a nástroj pro experimenty vám to neřekne - porovnává jen součty.

Varianta se uloží jako běžný atribut relace a přenese se proto do všech dalších mostů: poznámky CRM, exportu do datového skladu i nástrojů MCP.

Všechny uvedené ochranné známky patří příslušným vlastníkům. MousePlayer s těmito poskytovateli nemá obchodní vztah.