Deneyler ve özellik bayrakları

1. Yanıtladığı soru

Deney aracınız B varyantının 12 % daha düşük dönüşüm sağladığını söyler. Ancak bunun nedenini söylemez ve bu varyantta zorlanan tek bir kişiyi bile gösteremez.

Bu köprü boşluğu mümkün olan en düşük maliyetle kapatır: zaten kullandığınız araçtan varyant atamasını okur ve MousePlayer oturumuna ekler. O andan sonra “B varyantını gören ve öfke tıklaması yapan oturumları göster” bir araştırma projesi değil, bir filtredir.

2. Araçlar ve hepsinin paylaştığı tek kural

Altı A/B aracı ve beş özellik bayrağı sağlayıcısı; tümü tarayıcıda, aracın kendi herkese açık API'si üzerinden okunur.

Tür	Araçlar
A/B ve deneyler	Optimizely, VWO, AB Tasty, Kameleoon, Google Optimize'ın halefleri, Convert
Özellik bayrakları	LaunchDarkly, ConfigCat, Flagsmith, Split, Unleash

Yalnızca gerçekten yapılmış atamalar

VWO bu kuralın en açık örneğidir: bir kampanyayı yalnızca durumu şu olduğunda alırız: RUNNING ve bu ziyaretçiye gerçekten bir kombinasyon atanmışsa. Yalnızca tanımlanmış bir kampanya, görüntüleyen kişi hakkında hiçbir şey söylemez. Bunu oturuma yazmak sonraki her filtrenin yanlış sonuç vermesine yol açardı.

Bazı yanıtlar geç gelir

ConfigCat eşzamansız çözümlenir; Snowplow geri çağırımla yanıt verir. Değerleri arabelleğe yazılır ve beklenmek yerine bir sonraki geçişte alınır. Bir varyantın adını öğrenmek için sayfayı engelleyen köprü, sağlayacağı faydadan daha fazla maliyete zaten yol açmıştır.

3. Sayfanıza maliyeti nedir?

Ölçülebilir bir maliyeti yoktur. Bizim ağ isteğimiz yoktur, ek betik yoktur ve köprü kapalıyken hiçbir işlem yapılmaz.

Zaten sitenize eklediğiniz araç, biz ondan veri okusak da okumasak da kendi işini yapar. Eklediğimiz işlem, araç yanıt verene veya yirmi deneme tamamlanana kadar birkaç kez yapılan tek bir okumadır.

Neden sonsuza kadar değil de yirmi kez?

Deney araçları sıklıkla bizden sonra yüklenir. Tek okuma neredeyse her atamayı kaçırırdı; sonsuz yoklama ise gelmeyecek bir değer uğruna her sayfada bir zamanlayıcıyı çalışır tutardı. Yarım saniye aralıklarla yirmi deneme bu dengedir; onay uyarlayıcıları da aynı nedenle aynı yaklaşımı kullanır.

4. Nerede fayda sağlar?

• Kimsenin adlandıramadığı bir nedenle testte daha kötü sonuç veren bir varyant. O varyanta göre filtreleyin, öfke tıklamalarına göre sıralayın ve üç oturum izleyin. Neden genellikle ilkinde görünür.
• Kullanıcıların 5 %'ine açılmış bir özellik bayrağı. İzlemek istediğiniz oturumlar tam da bu yüzde beşe aittir; bu köprü olmadan onları bulmanın yolu yoktur.
• Sonuçları birbirine yakın görünen bir test. Bazen iki varyant da aynı yerde eşit derecede kötüdür. Deney aracı size bunu söyleyemez; yalnızca toplamları karşılaştırır.