प्रयोग और फ़्लैग

1. किस सवाल का जवाब

प्रयोग टूल बताता है वैरिएंट B का रूपांतरण 12 % कम है। नहीं बताता क्यों, और संघर्ष करता एक व्यक्ति भी नहीं दिखा सकता।

यह ब्रिज कम लागत से अंतर भरता है: मौजूदा टूल से वैरिएंट पढ़कर सत्र में जोड़ता है। फिर "B देखने और गुस्से में क्लिक करने वाले सत्र" शोध नहीं, फ़िल्टर है।

2. टूल और साझा नियम

छह A/B टूल और पाँच फ़्लैग प्रदाता, सभी ब्राउज़र में अपनी सार्वजनिक API से पढ़े जाते हैं।

प्रकार	टूल
A/B और प्रयोग	Optimizely, VWO, AB Tasty, Kameleoon, Google Optimize के उत्तराधिकारी, Convert
फ़ीचर फ़्लैग	LaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

केवल वास्तव में हुए आवंटन

VWO स्पष्ट उदाहरण: कैंपेन तभी लेते हैं जब स्थिति यह हो: RUNNING और आगंतुक को वास्तव में संयोजन दिया गया हो। केवल परिभाषित कैंपेन व्यक्ति नहीं बताता और सत्र पर लिखना आगे फ़िल्टर गलत करेगा।

कुछ उत्तर देर से आते हैं

ConfigCat एसिंक्रोनस हल करता है; Snowplow कॉलबैक देता है। प्रतीक्षा के बजाय मान बफ़र में आते और अगले दौर में लिए जाते हैं — वैरिएंट जानने को पृष्ठ रोकना मूल्य से महँगा है।

3. पृष्ठ पर लागत

मापने योग्य कुछ नहीं। हमारा नेटवर्क अनुरोध नहीं, अतिरिक्त स्क्रिप्ट नहीं, बंद होने पर काम नहीं।

मौजूदा टूल अपना काम करता है, चाहे पढ़ें या नहीं। हम कुछ बार पढ़ते हैं जब तक उत्तर या बीस प्रयास पूरे न हों।

बीस क्यों, हमेशा क्यों नहीं

प्रयोग टूल अक्सर बाद में लोड। एक बार पढ़ना लगभग सब चूकता; अंतहीन पूछना न आने वाले मान के लिए हर पृष्ठ पर टाइमर चलाएगा। आधे सेकंड पर बीस प्रयास वही समझौता है जो सहमति एडेप्टर में उसी कारण है।

4. कहाँ उपयोगी है

• अज्ञात कारण से खराब प्रदर्शन वाला वैरिएंट। उसे फ़िल्टर, गुस्से में क्लिक से क्रम और तीन सत्र देखें। कारण आम तौर पर पहले में दिखता है।
• 5 % उपयोगकर्ताओं को दिया फ़्लैग। वही पाँच प्रतिशत देखने वाले सत्र हैं; ब्रिज बिना खोजने का तरीका नहीं।
• समान नतीजे वाला परीक्षण। कभी दोनों वैरिएंट एक जगह समान खराब होते हैं और टूल केवल कुल तुलना के कारण नहीं बता सकता।