பரிசோதனைகளும் கொடிகளும்

1. இது பதிலளிக்கும் கேள்வி

மாறுபாடு B-இன் மாற்ற விகிதம் 12 % குறைவாக இருப்பதாக உங்கள் பரிசோதனைக் கருவி சொல்கிறது. ஆனால் ஏன்என்று சொல்வதில்லை; அதில் சிரமப்படும் ஒரு நபரைக்கூட அது காட்ட முடியாது.

முடிந்தவரை குறைந்த செலவில் இந்த இடைவெளியைப் பாலம் நிரப்புகிறது: நீங்கள் ஏற்கெனவே இயக்கும் கருவியிலிருந்து மாறுபாட்டு ஒதுக்கீட்டைப் படித்து, MousePlayer அமர்வுடன் இணைக்கிறது. அதன் பிறகு “மாறுபாடு B-ஐப் பார்த்து ஆவேசக் கிளிக் செய்த அமர்வுகளைக் காட்டு” என்பது ஒரு வடிகட்டி; ஆராய்ச்சித் திட்டம் அல்ல.

2. கருவிகளும் அவை பகிரும் ஒரே விதியும்

ஆறு A/B கருவிகளும் ஐந்து கொடி வழங்குநர்களும்; அனைத்தும் உலாவியில், அந்தந்தக் கருவியின் சொந்த பொது API வழியாகப் படிக்கப்படுகின்றன.

வகை	கருவிகள்
A/B மற்றும் பரிசோதனைகள்	Optimizely, VWO, AB Tasty, Kameleoon, Google Optimize-க்குப் பிந்தைய கருவிகள், Convert
அம்சக் கொடிகள்	LaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

உண்மையில் நடந்த ஒதுக்கீடுகள் மட்டுமே

இந்த விதிக்கு மிகத் தெளிவான உதாரணம் VWO: ஒரு பிரச்சாரத்தின் நிலை RUNNING ஆகவும், இந்தப் பார்வையாளருக்கு ஒரு சேர்க்கை உண்மையில் ஒதுக்கப்பட்டும் இருந்தால் மட்டுமே அதை எடுத்துக்கொள்கிறோம். வரையறுக்கப்பட்டிருக்கும் பிரச்சாரம் மட்டும் அதைப் பார்க்கும் நபரைப் பற்றி எதுவும் சொல்வதில்லை. அதை அமர்வில் எழுதினால், பின்னர் வரும் ஒவ்வொரு வடிகட்டியும் தவறாகிவிடும்.

சில பதில்கள் தாமதமாக வருகின்றன

ConfigCat ஒத்திசைவின்றி முடிவை வழங்குகிறது; Snowplow பின்னழைப்பு வழியாகப் பதிலளிக்கிறது. அவற்றின் மதிப்புகள் இடையகத்தில் சேர்ந்து அடுத்த சுற்றில் எடுக்கப்படுகின்றன; அவற்றுக்காகக் காத்திருப்பதில்லை. மாறுபாட்டின் பெயரை அறியப் பக்கத்தைத் தடுக்கும் பாலம், அதன் பயனைவிட அதிகச் செலவை ஏற்கெனவே ஏற்படுத்திவிட்டது.

3. உங்கள் பக்கத்திற்கு இதனால் ஏற்படும் செலவு

அளவிடக்கூடிய செலவு எதுவுமில்லை. எங்கள் சார்பில் வலையமைப்புக் கோரிக்கையோ கூடுதல் ஸ்கிரிப்டோ இல்லை. பாலத்தை அணைத்திருக்கும்போது எந்த வேலையும் நடக்காது.

நீங்கள் ஏற்கெனவே உட்பொதித்துள்ள கருவி, நாங்கள் படித்தாலும் படிக்காவிட்டாலும் அதன் வேலையைச் செய்கிறது. கருவி பதிலளிக்கும் வரை அல்லது இருபது முயற்சிகள் முடியும் வரை, சில முறைகள் படிப்பதை மட்டுமே நாங்கள் சேர்க்கிறோம்.

ஏன் இருபது; ஏன் முடிவில்லாமல் இல்லை

பரிசோதனைக் கருவிகள் பெரும்பாலும் எங்களுக்குப் பிறகு ஏற்றப்படுகின்றன. ஒரே முறை படித்தால் பெரும்பாலான ஒதுக்கீடுகள் தவறிவிடும். முடிவில்லாமல் சோதித்தால் வராத மதிப்புக்காக ஒவ்வொரு பக்கத்திலும் நேரங்காட்டி இயங்கிக்கொண்டே இருக்கும். அரை வினாடி இடைவெளிகளில் இருபது முயற்சிகள் என்பதே சமரசம். அதே காரணத்திற்காக ஒப்புதல் ஏற்பிகளும் இதையே பயன்படுத்துகின்றன.

4. இது பயனளிக்கும் இடங்கள்

• காரணம் தெரியாமல் சோதனையில் மோசமாகச் செயல்படும் ஒரு மாறுபாடு. அந்த மாறுபாட்டை வடிகட்டி, ஆவேசக் கிளிக்குகளின் வரிசையில் அமைத்து, மூன்று அமர்வுகளைப் பாருங்கள். காரணம் பொதுவாக முதல் அமர்விலேயே தெரியும்.
• 5 % பயனர்களுக்கு வெளியிடப்பட்ட ஒரு கொடி. அந்த ஐந்து சதவீதத்தினரின் அமர்வுகளைத்தான் நீங்கள் பார்க்க விரும்புகிறீர்கள். இந்தப் பாலம் இல்லாமல் அவற்றைக் கண்டறிய வழி இல்லை.
• வித்தியாசம் தெரியாத ஒரு சோதனை. சில நேரங்களில் இரு மாறுபாடுகளும் ஒரே இடத்தில் சமமாக மோசமாக இருக்கும். பரிசோதனைக் கருவி அதைச் சொல்ல முடியாது; அது மொத்தங்களை மட்டுமே ஒப்பிடுகிறது.