A/B Testi ile Firebase Remote Config Denemeleri Oluşturun

Etkin kullanıcı tabanına sahip bir uygulamanın ayarlarını dağıtmak için Firebase Remote Config kullandığınızda her şeyin doğru yapıldığından emin olmalısınız. Aşağıdakileri en iyi şekilde belirlemek için A/B Testing denemelerini kullanabilirsiniz:

• Kullanıcı deneyimini optimize etmek için bir özelliği uygulamanın en iyi yolu. Uygulama geliştiriciler genellikle uygulamalarının uygulama mağazasındaki puanı düşene kadar kullanıcılarının yeni bir özelliği veya güncellenmiş kullanıcı deneyimini beğenmediğini öğrenmez. A/B testi, kullanıcılarınızın yeni özellik varyantlarını beğenip beğenmediğini veya uygulamayı mevcut haliyle tercih edip etmediğini ölçmenize yardımcı olabilir. Ayrıca, kullanıcılarınızın çoğunu bir referans grupta tutmak, deneme tamamlanana kadar kullanıcı tabanınızın büyük bir kısmının davranışında veya görünümünde herhangi bir değişiklik yapmadan uygulamanızı kullanmaya devam edebilmesini sağlar.
• Bir işletme hedefi için kullanıcı deneyimini optimize etmenin en iyi yolu. Bazen gelir veya elde tutma gibi bir metriği en üst düzeye çıkarmak için ürün değişiklikleri uygularsınız. A/B testi ile işletme hedefinizi belirlersiniz ve Firebase bir varyantın seçtiğiniz hedef için referans değerden daha iyi performans gösterip göstermediğini belirlemek amacıyla istatistiksel analiz gerçekleştirir.

Özellik varyantlarının bir referans değeri ile A/B testi yapmak için aşağıdakileri yapın:

1. Denemenizi oluşturun.
2. Denemenizi bir test cihazında doğrulayın.
3. Denemenizi yönetin.

Deneme oluşturma

Remote Config denemesi, bir veya daha fazla Remote Config parametresinde birden fazla varyantı değerlendirmenize olanak tanır.

1. Firebase konsolunda oturum açın ve denemenin Analytics verilerine erişebilmesi için projenizde Google Analytics öğesinin etkinleştirildiğini doğrulayın.

   Projenizi oluştururken Google Analytics'ü etkinleştirmediyseniz Firebase konsolunda settings> Proje ayarları'nı kullanarak erişebileceğiniz Entegrasyonlar sekmesinden etkinleştirebilirsiniz.

2. Firebase Console gezinme menüsünün Etkileşim bölümünde A/B Testing simgesini tıklayın.

3. Deneme oluştur'u tıklayın ve ardından deneme yapmak istediğiniz hizmet için istendiğinde Remote Config simgesini seçin.

4. Denemeniz için bir Ad ve isteğe bağlı olarak Açıklama girin ve İleri'yi tıklayın.

5. Önce denemenizi kullanan uygulamayı seçerek Hedefleme alanlarını doldurun. Ayrıca, ve simgesini tıklayıp aşağıdaki listeden seçenekler belirleyerek denemenize katılacak kullanıcılarınızın bir alt kümesini hedefleyebilirsiniz:

   • Sürüm: Uygulamanızın bir veya daha fazla sürümü
   • Derleme numarası: Uygulamanın sürüm kodu
   • Diller: Denemeye dahil edilebilecek kullanıcıları seçmek için kullanılan bir veya daha fazla dil ve yerel ayar
   • Ülke/Bölge: Denemeye dahil edilmesi gereken kullanıcıların seçileceği bir veya daha fazla ülke veya bölge
   • Kullanıcı kitlesi: Denemeye dahil edilebilecek kullanıcıları hedeflemek için kullanılan Analytics kitle
   • Kullanıcı özelliği: Denemeye dahil edilebilecek kullanıcıları seçmek için bir veya daha fazla Analytics kullanıcı özelliği

   • İlk açılış: Uygulamanızı ilk açtıkları tarihe göre kullanıcıları hedefleyin

     İlk açılış zamanına göre kullanıcı hedefleme özelliği, bir Android veya iOS uygulaması seçmenizin ardından kullanılabilir. Bu özellik, şu Remote Config SDK sürümleri tarafından desteklenir: Apple platformlar SDK v9.0.0+ ve Android SDK v21.1.1+ (Firebase BoM v30.3.0+).

     Analytics, ilk açık etkinlik sırasında istemcide de etkinleştirilmiş olmalıdır.

6. Hedef kullanıcıların yüzdesini ayarlayın: Uygulamanızın, Hedef kullanıcılar bölümünde belirlenen ölçütlere uyan ve denemenizdeki temel değer ile bir veya daha fazla varyant arasında eşit olarak bölmek istediğiniz kullanıcı kitlesi yüzdesini girin. Bu değer, %0,01 ile %100 arasında herhangi bir yüzde olabilir. Kullanıcılar, yinelenen denemeler de dahil olmak üzere her denemeye rastgele atanır.

7. İsteğe bağlı olarak, denemenizde yalnızca ilk kez bir Analytics etkinliğini tetikleyen kullanıcılara ait verilerin sayılmasını sağlamak için bir etkinleştirme etkinliği ayarlayabilirsiniz. Hedefleme parametrelerinizle eşleşen tüm kullanıcıların Remote Config deneysel değer alacağını, ancak yalnızca etkinleştirme etkinliğini tetikleyenlerin deneme sonuçlarınıza dahil edileceğini unutmayın.

   Geçerli bir deneme sağlamak için seçtiğiniz etkinliğin, uygulamanızın getirilen yapılandırma değerlerini etkinleştirdikten sonra gerçekleştiğinden emin olun. Ayrıca, aşağıdaki etkinlikler her zaman getirilen değerler etkinleştirilmeden önce gerçekleştiği için kullanılamaz:

   • app_install
   • app_remove
   • app_update
   • dynamic_link_first_open

8. Denemenin Hedefleri için izlenecek birincil metriği seçin ve listeden izlemek istediğiniz diğer metrikleri ekleyin. Yerleşik hedefler (satın alma işlemleri, gelir, elde tutma, kilitlenme yaşamayan kullanıcılar vb.) Analytics dönüşüm etkinliği ve diğer Analytics etkinlikleri. İşlemi tamamladığınızda Sonraki'yi tıklayın.

9. Varyantlar bölümünde, deneme için bir referans değer ve en az bir varyant seçin. Deneme yapmak için bir veya daha fazla parametre eklemek üzere Yeni seçin veya oluşturun listesini kullanın. Daha önce Firebase konsolunda kullanılmamış olan bir parametre oluşturabilirsiniz. Ancak bu parametrenin etkili olabilmesi için uygulamanızda bulunması gerekir. Denemenize birden fazla parametre eklemek için bu adımı tekrarlayabilirsiniz.

10. (İsteğe bağlı) Denemenize birden fazla varyant eklemek için Başka bir varyant ekle'yi tıklayın.

11. Belirli varyantlar için bir veya daha fazla parametreyi değiştirin. Değiştirilmeyen parametreler, denemeye dahil edilmeyen kullanıcılar için aynıdır.

12. Denemenin varyant ağırlığını görüntülemek veya değiştirmek için Varyant Ağırlıkları'nı genişletin. Varsayılan olarak her varyant eşit şekilde ağırlıklandırılır. Eşit olmayan ağırlıkların veri toplama süresini artırabileceğini ve ağırlıkların deneme başladıktan sonra değiştirilemeyeceğini unutmayın.

13. Denemenizi kaydetmek için İncele'yi tıklayın.

Proje başına 300'e kadar denemeye izin verilir. Bu deneme, 24 çalışan denemeden oluşabilir. Geri kalan her deneme ise taslak veya tamamlanmış şekilde gerçekleştirilebilir.

Denemenizi bir test cihazında doğrulama

Her Firebase kurulumu için kendisiyle ilişkilendirilmiş yükleme kimlik doğrulama jetonunu alabilirsiniz. Uygulamanızın yüklü olduğu bir test cihazında belirli deneme varyantlarını test etmek için bu jetonu kullanabilirsiniz. Denemenizi bir test cihazında doğrulamak için aşağıdakileri yapın:

1. Yükleme yetkilendirme jetonunu aşağıdaki gibi alın:

   Swift

   do {
     let result = try await Installations.installations()
       .authTokenForcingRefresh(true)
     print("Installation auth token: \(result.authToken)")
   } catch {
     print("Error fetching token: \(error)")
   }

   Objective-C

   [[FIRInstallations installations] authTokenForcingRefresh:true
                                                  completion:^(FIRInstallationsAuthTokenResult *result, NSError *error) {
     if (error != nil) {
       NSLog(@"Error fetching Installation token %@", error);
       return;
     }
     NSLog(@"Installation auth token: %@", [result authToken]);
   }];

   Java

   FirebaseInstallations.getInstance().getToken(/* forceRefresh */true)
           .addOnCompleteListener(new OnCompleteListener<InstallationTokenResult>() {
       @Override
       public void onComplete(@NonNull Task<InstallationTokenResult> task) {
           if (task.isSuccessful() && task.getResult() != null) {
               Log.d("Installations", "Installation auth token: " + task.getResult().getToken());
           } else {
               Log.e("Installations", "Unable to get Installation auth token");
           }
       }
   });
   MainActivity.java

   Kotlin+KTX

   val forceRefresh = true
   FirebaseInstallations.getInstance().getToken(forceRefresh)
       .addOnCompleteListener { task ->
           if (task.isSuccessful) {
               Log.d("Installations", "Installation auth token: " + task.result?.token)
           } else {
               Log.e("Installations", "Unable to get Installation auth token")
           }
       }
   MainActivity.kt

   C++

   firebase::InitResult init_result;
   auto* installations_object = firebase::installations::Installations::GetInstance(
       firebase::App::GetInstance(), &init_result);
   installations_object->GetToken().OnCompletion(
       [](const firebase::Future<std::string>& future) {
         if (future.status() == kFutureStatusComplete &&
             future.error() == firebase::installations::kErrorNone) {
           printf("Installations Auth Token %s\n", future.result()->c_str());
         }
       });

   Unity

   Firebase.Installations.FirebaseInstallations.DefaultInstance.GetTokenAsync(forceRefresh: true).ContinueWith(
     task => {
       if (!(task.IsCanceled || task.IsFaulted) && task.IsCompleted) {
         UnityEngine.Debug.Log(System.String.Format("Installations token {0}", task.Result));
       }
     });

2. Firebase Console gezinme çubuğunda A/B Testi'ni tıklayın.
3. Taslak'ı (ve/veya Remote Config denemeleri için Çalışıyor'u) tıklayın, denemenizin üzerine gelin, bağlam menüsünü (more_vert) ve ardından Test cihazlarını yönet'i tıklayın.
4. Bir test cihazının yükleme kimlik doğrulama jetonunu girin ve söz konusu test cihazına gönderilecek deneme varyantını seçin.
5. Uygulamayı çalıştırın ve seçilen varyantın test cihazında alındığını onaylayın.

Firebase yüklemeleri hakkında daha fazla bilgi edinmek için Firebase yüklemelerini yönetme başlıklı makaleyi inceleyin.

Denemenizi yönetme

Remote Config, Bildirimler derleyicisi veya Firebase In-App Messaging ile deneme oluşturduktan sonra denemenizi doğrulayıp başlatabilir, çalışırken izleyebilir ve çalışan denemenize dahil edilen kullanıcı sayısını artırabilirsiniz.

Denemeniz bittiğinde, kazanan varyantın kullandığı ayarları not edebilir ve bu ayarları tüm kullanıcılara sunabilirsiniz. Dilerseniz başka bir deneme de yapabilirsiniz.

Bir deneme başlat

1. Firebase Console gezinme menüsünün Etkileşim bölümünde A/B Testing simgesini tıklayın.
2. Taslak'ı ve ardından denemenizin başlığını tıklayın.
3. Uygulamanızda denemenize dahil edilecek kullanıcılar olduğunu doğrulamak için taslak ayrıntılarını genişletin ve Hedefleme ve dağıtım bölümünde %0'dan yüksek bir sayı olup olmadığını kontrol edin (örneğin, ölçütlere uyan kullanıcıların %1'i).
4. Denemenizi değiştirmek için Düzenle'yi tıklayın.
5. Denemenizi başlatmak için Denemeyi Başlat'ı tıklayın. Proje başına tek seferde en fazla 24 deneme çalıştırabilirsiniz.

Deneme izleme

Bir deneme bir süre çalıştıktan sonra, denemenizin ilerleme durumunu kontrol edebilir ve denemenize bugüne kadar katılan kullanıcılar için sonuçlarınızın nasıl göründüğünü görebilirsiniz.

1. Firebase konsolu gezinme menüsünün Etkileşim bölümünde A/B Testing simgesini tıklayın.

2. Çalıştırılıyor'u tıklayın, ardından denemenizin başlığını tıklayın veya arayın. Bu sayfada, aşağıdakiler dahil olmak üzere, devam eden denemenizle ilgili çeşitli gözlemlenen ve modellenmiş istatistikleri görüntüleyebilirsiniz:

   • Referans değere göre yüzdelik fark: Belirli bir varyant için bir metriğin referans değere kıyasla iyileşme oranını gösteren bir ölçümdür. Varyantın değer aralığı, referans değerinin değer aralığıyla karşılaştırılarak hesaplanır.
   • Referans değeri geçme olasılığı: Belirli bir varyantın, seçilen metrik için referans değeri geçme olasılığı.
   • Kullanıcı başına observed_metric: Deneme sonuçlarına göre bu, metrik değerinin zaman içinde yer alacağı tahmini aralıktır.
   • Toplam observed_metric: Referans veya varyant için gözlemlenen kümülatif değer. Bu değer, her bir deneme varyantının ne kadar iyi performans gösterdiğini ölçmek için kullanılır ve İyileşme, Değer aralığı, Referans değeri aşma olasılığı ve En iyi varyant olma olasılığı'nı hesaplamak için kullanılır. Ölçülen metriğe bağlı olarak bu sütun "Kullanıcı başına süre", "Kullanıcı başına gelir", "Elde tutma oranı" veya "Dönüşüm oranı" olarak etiketlenebilir.

3. Denemeniz bir süre (FCM ve In-App Messaging için en az 7 gün veya Remote Config için en az 7 gün) çalıştırıldıktan sonra, bu sayfadaki veriler, varsa hangi varyantın "lider" olduğunu gösterir. Bazı ölçümler, verileri görsel biçimde sunan bir çubuk grafikle birlikte gösterilir.

Bir denemeyi tüm kullanıcılara sunma

Bir deneme, hedef metriğiniz için bir "lider" veya kazanan varyant olacak kadar uzun süre çalıştıktan sonra, denemeyi kullanıcıların% 100'üne yayınlayabilirsiniz. Bu sayede, bundan sonra tüm kullanıcılara yayınlanacak bir varyant seçebilirsiniz. Denemeniz net bir kazanan oluşturmamış olsa bile, bir varyantı tüm kullanıcılarınıza yayınlamayı seçebilirsiniz.

1. Firebase Console gezinme menüsünün Etkileşim bölümünde A/B Testing simgesini tıklayın.
2. Tamamlandı veya Çalıştırılıyor'u, tüm kullanıcılara yayınlamak istediğiniz bir denemeyi ve ardından içerik menüsünü tıklayın (more_vert) Varyantı kullanıma sun'u tıklayın.

3. Aşağıdakilerden birini yaparak denemenizi tüm kullanıcılara sunun:

   • Bildirimler derleyicisinin kullanıldığı bir deneme için, mesajı denemeye katılmayan kalan hedef kullanıcılara göndermek üzere Mesajın kullanıma sunulması iletişim kutusunu kullanın.
   • Remote Config denemesi için hangi Remote Config parametre değerlerinin güncelleneceğini belirlemek üzere bir varyant seçin. Denemeyi oluştururken tanımlanan hedefleme ölçütleri, kullanıma sunmanın yalnızca deneme tarafından hedeflenen kullanıcıları etkilemesini sağlamak için şablonunuza yeni bir koşul olarak eklenir. Değişiklikleri incelemek için Uzaktan Yapılandırmasında İncele'yi tıkladıktan sonra, kullanıma sunma işlemini tamamlamak için Değişiklikleri yayınla'yı tıklayın.
   • In-App Messaging denemesi için hangi varyantın bağımsız bir In-App Messaging kampanyası olarak kullanıma sunulması gerektiğini belirlemek üzere iletişim kutusunu kullanın. Bu seçeneği belirlediğinizde, yayınlamadan önce gerekli değişiklikleri yapmak için FIAM oluşturma ekranına yönlendirilirsiniz.

Deneme genişletme

Bir denemenin, A/B Testingbir kazanan belirlemek için yeterli kullanıcı getirmediğini fark ederseniz uygulamanın kullanıcı tabanının daha büyük bir yüzdesine ulaşmak için denemenizin dağıtımını artırabilirsiniz.

1. Firebase konsolu gezinme menüsünün Etkileşim bölümünde A/B Testing simgesini tıklayın.
2. Düzenlemek istediğiniz, çalışan denemeyi seçin.
3. Denemeye genel bakış'ta içerik menüsünü (more_vert) ve ardından Çalışan denemeyi düzenle'yi tıklayın.
4. Hedefleme iletişim kutusunda, çalışan denemeye katılan kullanıcıların yüzdesini artırma seçeneği görüntülenir. Mevcut yüzdeden yüksek bir sayı seçin ve Yayınla'yı tıklayın. Deneme, belirttiğiniz kullanıcı yüzdesine aktarılır.

Deneme kopyalama veya durdurma

1. Firebase Console gezinme menüsünün Etkileşim bölümünde A/B Testing simgesini tıklayın.
2. Tamamlandı veya Çalışıyor'u tıklayın, işaretçiyi denemenizin üzerine getirin, bağlam menüsünü (more_vert) ve ardından Denemeyi kopyala veya Denemeyi durdur'u tıklayın.

Kullanıcı hedefleme

Aşağıdaki kullanıcı hedefleme ölçütlerini kullanarak denemenize dahil edilecek kullanıcıları hedefleyebilirsiniz.

A/B Testing metrik

Denemenizi oluştururken, kazanan varyantı belirlemek için kullanılan birincil veya hedef metriğini seçersiniz. Her deneme varyantının performansını daha iyi anlamanıza yardımcı olması için diğer metrikleri de takip etmeniz ve kullanıcıyı elde tutma, uygulama kararlılığı ve uygulama içi satın alma geliri gibi her varyant için farklı olabilecek önemli trendleri takip etmeniz gerekir. Denemenizde hedef olmayan en fazla beş metriği izleyebilirsiniz.

Örneğin, uygulamanızda iki farklı oyun akışı başlatmak için Remote Config kullandığınızı ve uygulama içi satın alma işlemleri ile reklam geliri için optimizasyon yapmak istediğinizi, ancak her bir varyantın kararlılığını ve kullanıcıları elde tutma oranını da izlemek istediğinizi varsayalım. Bu durumda, uygulama içi satın alma gelirini ve reklam gelirini içerdiği için hedef metrik olarak Tahmini toplam gelir'i seçebilir, ardından İzlenecek diğer metrikler için aşağıdakileri ekleyebilirsiniz:

• Günlük ve haftalık kullanıcı elde tutma oranınızı izlemek için Elde tutma (2-3 gün) ve Elde tutma (4-7 gün) metriklerini ekleyin.
• İki oyun akışı arasındaki kararlılığı karşılaştırmak için Kilitlenme sorunu yaşamayan kullanıcılar metriğini ekleyin.
• Her gelir türünün daha ayrıntılı görünümlerini görmek için Satın alma geliri ve Tahmini reklam geliri bölümlerini ekleyin.

Aşağıdaki tablolarda, hedef metriklerinin ve diğer metriklerin nasıl hesaplandığı hakkında ayrıntılı bilgi verilmektedir.

Hedef metrikleri

Diğer metrikler

BigQuery verilerini dışa aktarma

A/B Testing deneme verilerini Firebase konsolunda görüntülemenin yanı sıra BigQuery'de deneme verilerini inceleyebilir ve analiz edebilirsiniz. A/B Testing için ayrı bir BigQuery tablosu olmasa da deneme ve varyant üyelikleri, Analytics etkinlik tablolarındaki her Google Analytics etkinlikte depolanır.

Deneme bilgilerini içeren kullanıcı özellikleri userProperty.key like "firebase_exp_%" veya userProperty.key = "firebase_exp_01" biçimindedir. Bu biçimlerde 01 deneme kimliği, userProperty.value.string_value ise deneme varyantının (sıfır tabanlı) dizinidir.

Deneme verilerini ayıklamak için bu deneme kullanıcı özelliklerini kullanabilirsiniz. Bu sayede, deneme sonuçlarınızı birçok farklı şekilde dilimleyebilir ve A/B Testing sonuçlarını bağımsız olarak doğrulayabilirsiniz.

Başlamak için bu kılavuzda açıklandığı şekilde aşağıdakileri tamamlayın:

1. Firebase konsolunda Google Analytics için BigQuery dışa aktarma özelliğini etkinleştirin.
2. BigQuery kullanarak A/B Testing verilerine erişme
3. Örnek sorguları inceleyin

Firebase konsolunda Google Analytics için BigQuery dışa aktarma özelliğini etkinleştirme

Spark planını kullanıyorsanız korumalı alan sınırlamalarına tabi olmak kaydıyla BigQuery'a ücretsiz olarak erişmek için BigQuery korumalı alanını kullanabilirsiniz. Daha fazla bilgi için Fiyatlandırma ve BigQuery korumalı alanı başlıklı makaleyi inceleyin.

Öncelikle Analytics verilerinizi BigQuery hedefine aktardığınızdan emin olun:

1. Firebase konsolunda settings> Proje ayarları'nı kullanarak erişebileceğiniz Entegrasyonlar sekmesini açın.
2. BigQuery ürününü diğer Firebase hizmetleriyle zaten kullanıyorsanız Yönet'i tıklayın. Aksi takdirde Bağla'yı tıklayın.
3. Firebase'i BigQuery'e Bağlama Hakkında bölümünü inceleyin, ardından Sonraki'yi tıklayın.
4. Entegrasyonu yapılandır bölümünde Google Analytics açma/kapatma düğmesini etkinleştirin.

5. Bir bölge seçin ve dışa aktarma ayarlarını belirleyin.

6. BigQuery ile bağla'yı tıklayın.

Verileri dışa aktarma şeklinize bağlı olarak tabloların kullanılabilir hale gelmesi bir gün kadar sürebilir. Proje verilerini BigQuery ürününe aktarma hakkında daha fazla bilgi için Proje verilerini BigQuery platformuna aktarma başlıklı makaleyi inceleyin.

BigQuery'da A/B Testing verilerine erişme

Belirli bir denemeyle ilgili verileri sorgulamadan önce, sorgunuzda kullanmak için aşağıdakilerden bazılarını veya tümünü elde etmeniz gerekir:

• Deneme kimliği: Bu kimliği, Deneme genel bakış sayfasının URL'sinden edinebilirsiniz. Örneğin, URL'niz https://console.firebase.google.com/project/my_firebase_project/config/experiment/results/25 gibi görünüyorsa deneme kimliği 25'tir.
• Google Analytics mülk kimliği: 9 haneli Google Analytics mülk kimliğinizdir. Bu adı Google Analytics içinde bulabilirsiniz. Ayrıca, proje adınızı genişleterek Google Analytics etkinlik tablonuzun (project_name.analytics_000000000.events) adını göstermek için BigQuery'te de görebilirsiniz.
• Deneme tarihi: Daha hızlı ve daha verimli bir sorgu oluşturmak için sorgularınızı, deneme verilerinizi içeren Google Analytics günlük etkinlik tablosu bölümleriyle (YYYYMMDD son ekiyle tanımlanan tablolar) sınırlandırmanız önerilir. Dolayısıyla, denemeniz 2 Şubat 2024 ile 2 Mayıs 2024 arasında çalıştıysa _TABLE_SUFFIX between '20240202' AND '20240502' belirtirsiniz. Bir örnek için Belirli bir denemenin değerlerini seçme bölümüne bakın.
• Etkinlik adları: Bunlar genellikle denemede yapılandırdığınız hedef metriklerinize karşılık gelir. Örneğin, in_app_purchase etkinlikler, ad_impression veya user_retention etkinlikler.

Sorgunuzu oluşturmak için gereken bilgileri topladıktan sonra:

1. Google Cloud konsolunda BigQuery'u açın.
2. Projenizi ve ardından SQL sorgusu oluştur'u seçin.
3. Sorgunuzu ekleyin. Çalıştırılacak sorgular için Örnek sorguları keşfetme bölümüne bakın.
4. Çalıştır'ı tıklayın.

Firebase konsolunun otomatik olarak oluşturulan sorgusunu kullanarak deneme verilerini sorgulama

Blaze planını kullanıyorsanız Denemelere genel bakış sayfasında, görüntülediğiniz denemenin adını, varyantlarını, etkinlik adlarını ve etkinlik sayısını döndüren bir örnek sorgu sağlanır.

Otomatik olarak oluşturulan sorguyu almak ve çalıştırmak için:

1. Firebase konsolunda A/B Testing sayfasını açın ve sorgulamak istediğiniz A/B Testing denemesini seçerek Denemeye genel bakış'ı açın.
2. Seçenekler menüsünde, BigQuery entegrasyonu altında Sorgu denemesi verilerini'ni seçin. Bu işlem, projenizi Google Cloud konsol konsolundaki BigQuery içinde açar ve deneme verilerinizi sorgulamak için kullanabileceğiniz temel bir sorgu sağlar.

Aşağıdaki örnekte, "Kış karşılama denemesi" adlı üç varyantı (referans değer dahil) olan bir deneme için oluşturulan bir sorgu gösterilmektedir. Etkin deneme adını, varyant adını, benzersiz etkinliği ve her etkinlik için etkinlik sayısını döndürür. Sorgu oluşturucu doğrudan projenizde açıldığı için tablo adında proje adınızı belirtmez.

  /*
    This query is auto-generated by Firebase A/B Testing for your
    experiment "Winter welcome experiment".
    It demonstrates how you can get event counts for all Analytics
    events logged by each variant of this experiment's population.
  */
  SELECT
    'Winter welcome experiment' AS experimentName,
    CASE userProperty.value.string_value
      WHEN '0' THEN 'Baseline'
      WHEN '1' THEN 'Welcome message (1)'
      WHEN '2' THEN 'Welcome message (2)'
      END AS experimentVariant,
    event_name AS eventName,
    COUNT(*) AS count
  FROM
    `analytics_000000000.events_*`,
    UNNEST(user_properties) AS userProperty
  WHERE
    (_TABLE_SUFFIX BETWEEN '20240202' AND '20240502')
    AND userProperty.key = 'firebase_exp_25'
  GROUP BY
    experimentVariant, eventName

Başka sorgu örnekleri için Örnek sorguları keşfetme bölümüne gidin.

Örnek sorguları keşfedin

Aşağıdaki bölümlerde, Google Analytics etkinlik tablosundan A/B Testing deneme verilerini ayıklamak için kullanabileceğiniz sorgulara örnekler verilmiştir.

Tüm denemelerden satın alma ve deneme standart sapma değerlerini çıkarın

Firebase A/B Testing sonuçlarını bağımsız olarak doğrulamak için deneme sonuçları verilerini kullanabilirsiniz. Aşağıdaki BigQuery SQL ifadesi, deneme varyantlarını ve her bir varyanttaki benzersiz kullanıcı sayısını çıkarır. Ayrıca, _TABLE_SUFFIX başlangıç ve bitiş tarihleri olarak belirtilen zaman aralığındaki tüm denemelerin standart sapmaları ile in_app_purchase ve ecommerce_purchase etkinliklerinden elde edilen toplam geliri ve standart sapmaları toplar. Firebase'ın sağladığı sonuçların kendi analizinizle eşleştiğini doğrulamak için bu sorgudan elde ettiğiniz verileri tek kuyruklu t-testleri için istatistiksel anlamlılık oluşturucuyla kullanabilirsiniz.

A/B Testing'ün çıkarım hesaplama şekli hakkında daha fazla bilgi için Test sonuçlarını yorumlama başlıklı makaleyi inceleyin.

  /*
    This query returns all experiment variants, number of unique users,
    the average USD spent per user, and the standard deviation for all
    experiments within the date range specified for _TABLE_SUFFIX.
  */
  SELECT
    experimentNumber,
    experimentVariant,
    COUNT(*) AS unique_users,
    AVG(usd_value) AS usd_value_per_user,
    STDDEV(usd_value) AS std_dev
  FROM
    (
      SELECT
        userProperty.key AS experimentNumber,
        userProperty.value.string_value AS experimentVariant,
        user_pseudo_id,
        SUM(
          CASE
            WHEN event_name IN ('in_app_purchase', 'ecommerce_purchase')
              THEN event_value_in_usd
            ELSE 0
            END) AS usd_value
      FROM `PROJECT_NAME.analytics_ANALYTICS_ID.events_*`
      CROSS JOIN UNNEST(user_properties) AS userProperty
      WHERE
        userProperty.key LIKE 'firebase_exp_%'
        AND event_name IN ('in_app_purchase', 'ecommerce_purchase')
        AND (_TABLE_SUFFIX BETWEEN 'YYYYMMDD' AND 'YYYMMDD')
      GROUP BY 1, 2, 3
    )
  GROUP BY 1, 2
  ORDER BY 1, 2;

Belirli bir denemenin değerlerini seçin

Aşağıdaki örnek sorgu, BigQuery ürününde belirli bir deneme için verilerin nasıl alınacağını gösterir. Bu örnek sorgu, deneme adını, varyant adlarını (Referans dahil), etkinlik adlarını ve etkinlik sayılarını döndürür.

  SELECT
    'EXPERIMENT_NAME' AS experimentName,
    CASE userProperty.value.string_value
      WHEN '0' THEN 'Baseline'
      WHEN '1' THEN 'VARIANT_1_NAME'
      WHEN '2' THEN 'VARIANT_2_NAME'
      END AS experimentVariant,
    event_name AS eventName,
    COUNT(*) AS count
  FROM
    `analytics_ANALYTICS_PROPERTY.events_*`,
    UNNEST(user_properties) AS userProperty
  WHERE
    (_TABLE_SUFFIX BETWEEN 'YYYMMDD' AND 'YYYMMDD')
    AND userProperty.key = 'firebase_exp_EXPERIMENT_NUMBER'
  GROUP BY
    experimentVariant, eventName