فحص بيانات اختبار A/B باستخدام BigQuery

بالإضافة إلى عرض بيانات تجربة A/B Testing في Firebase، يمكنك فحص بيانات التجربة وتحليلها في BigQuery. على الرغم من أنّ A/B Testing لا يتضمّن جدول BigQuery منفصلاً، يتم تخزين عضويات التجارب والصيغ في كل حدث من أحداث Google Analytics ضِمن جداول أحداث Analytics.

تتّخذ خصائص المستخدِمين التي تحتوي على معلومات التجربة الشكل userProperty.key like "firebase_exp_%" أو userProperty.key = "firebase_exp_01"، حيث يمثّل 01 رقم تعريف التجربة، ويحتوي userProperty.value.string_value على فهرس صيغة التجربة (بدءًا من الصفر).

يمكنك استخدام خصائص المستخدِمين هذه لاستخراج بيانات التجربة. ويمنحك ذلك إمكانية تقسيم نتائج تجربتك بعدة طرق مختلفة والتحقّق بشكل مستقل من نتائج A/B Testing.

للبدء، أكمل الخطوات التالية كما هو موضّح في هذا الدليل:

1. تفعيل ميزة التصدير إلى BigQuery لخدمة Google Analytics في وحدة تحكّم Firebase
2. الوصول إلى بيانات A/B Testing باستخدام BigQuery
3. استكشاف نماذج طلبات البحث

تفعيل ميزة التصدير لـ BigQuery في Google Analytics في "وحدة تحكّم Firebase"

إذا كنت تستخدم خطة Spark، يمكنك استخدام وضع حماية BigQuery للوصول إلى بدون أي تكلفة، مع مراعاة حدود وضع الحماية.BigQuery لمزيد من المعلومات، اطّلِع على التسعير ووضع حمايةBigQuery.

أولاً، تأكَّد من أنّك تصدّر بيانات Analytics إلى BigQuery

1. في وحدة التحكّم Firebase، انتقِل إلى settings الإعدادات > علامة التبويب عمليات الدمج.

2. في بطاقة BigQuery ، انقر على إدارة وتأكَّد من أنّ مشروعك يصدّر بيانات Analytics إلى BigQuery.

   إذا كانت البطاقة تعرض ربط، عليك إعداد عملية التصدير (انتقِل إلى الخطوة التالية).

3. إذا كنت بحاجة إلى إعداد عملية التصدير:

   1. راجِع لمحة عن ربط Firebase بـ BigQuery، ثم انقر على التالي.

   2. في قسم ضبط عملية الدمج ، فعِّل Google Analytics.

   3. اختَر منطقة وإعدادات التصدير.

   4. انقر على الربط بـ BigQuery.

اعتمادًا على طريقة تصدير البيانات التي اخترتها، قد يستغرق ظهور الجداول مدة تصل إلى يوم واحد. لمزيد من المعلومات عن تصدير بيانات المشروع إلى BigQuery، اطّلِع على تصدير بيانات المشروع إلى BigQuery.

الوصول إلى بيانات A/B Testing في BigQuery

قبل طلب بيانات تجربة معيّنة، عليك الحصول على بعض أو كل المعلومات التالية لاستخدامها في طلب البحث:

• رقم تعريف التجربة: يمكنك الحصول عليه من عنوان URL لصفحة نظرة عامة على التجربة. على سبيل المثال، إذا كان عنوان URL يبدو على النحو https://console.firebase.google.com/project/my_firebase_project/config/experiment/results/25، يكون رقم تعريف التجربة هو 25.
• Google Analytics رقم تعريف الموقع: هو رقم تعريف الموقع المكوّن من 9 أرقام Google Analytics. يمكنك العثور عليه ضِمن Google Analytics، ويظهر أيضًا في BigQuery عند توسيع اسم مشروعك لعرض اسم جدول أحداث Google Analytics (project_name.analytics_000000000.events).
• تاريخ التجربة: لإنشاء طلب بحث أسرع وأكثر فعالية، من المستحسن حصر طلبات البحث في أقسام جدول الأحداثGoogle Analytics اليومية التي تحتوي على بيانات تجربتك، وهي الجداول التي يتم تحديدها باللاحقة YYYYMMDD. على سبيل المثال، إذا كانت تجربتك قيد التشغيل من 2 فبراير 2024 إلى 2 مايو 2024، عليك تحديد _TABLE_SUFFIX between '20240202' AND '20240502'. للاطّلاع على مثال، يُرجى مراجعة اختيار قيم تجربة معيّنة.
• أسماء الأحداث: تتطابق عادةً مع مقاييس الأهداف التي ضبطتها في التجربة. على سبيل المثال، أحداث in_app_purchase أو ad_impression أو user_retention.

بعد جمع المعلومات التي تحتاج إليها لإنشاء طلب البحث:

1. في Google Cloud Console، انتقِل إلى BigQuery.
2. اختَر مشروعك، ثم انقر على إنشاء طلب بحث SQL.
3. أضِف طلب البحث. للاطّلاع على نماذج لطلبات البحث التي يمكنك تنفيذها، اطّلِع على استكشاف نماذج طلبات البحث.
4. انقر على تشغيل.

طلب بيانات التجربة باستخدام طلب البحث الذي تم إنشاؤه تلقائيًا في "وحدة تحكّم Firebase"

إذا كنت تستخدم خطة Blaze، توفّر صفحة نظرة عامة على التجربة نموذج طلب بحث يعرض اسم التجربة والصيغ وأسماء الأحداث وعدد الأحداث للتجربة التي تعرضها.

للحصول على طلب البحث الذي تم إنشاؤه تلقائيًا وتنفيذه:

1. في وحدة التحكّم Firebase، انتقِل إلى DevOps والتفاعل > اختبار A/B.
2. اختَر التجربة A/B Testing التي تريد طلب بياناتها لفتح نظرة عامة على التجربة.
3. من قائمة "الخيارات"، ضِمن BigQuery عملية الدمج، انقر على طلب بيانات التجربة. يؤدي ذلك إلى فتح مشروعك في BigQuery ضِمن Google Cloud Console وتقديم طلب بحث أساسي يمكنك استخدامه لطلب بيانات تجربتك.

يعرض المثال التالي طلب بحث تم إنشاؤه لتجربة تتضمّن ثلاث صيغ (بما في ذلك الصيغة الأساسية) باسم "تجربة الترحيب بالشتاء". ويعرض اسم التجربة النشطة واسم الصيغة والحدث الفريد وعدد الأحداث لكل حدث. يُرجى العِلم أنّ أداة إنشاء طلبات البحث لا تحدّد اسم مشروعك في اسم الجدول، لأنّها تفتح مباشرةً ضِمن مشروعك.

  /*
    This query is auto-generated by Firebase A/B Testing for your
    experiment "Winter welcome experiment".
    It demonstrates how you can get event counts for all Analytics
    events logged by each variant of this experiment's population.
  */
  SELECT
    'Winter welcome experiment' AS experimentName,
    CASE userProperty.value.string_value
      WHEN '0' THEN 'Baseline'
      WHEN '1' THEN 'Welcome message (1)'
      WHEN '2' THEN 'Welcome message (2)'
      END AS experimentVariant,
    event_name AS eventName,
    COUNT(*) AS count
  FROM
    `analytics_000000000.events_*`,
    UNNEST(user_properties) AS userProperty
  WHERE
    (_TABLE_SUFFIX BETWEEN '20240202' AND '20240502')
    AND userProperty.key = 'firebase_exp_25'
  GROUP BY
    experimentVariant, eventName

للاطّلاع على نماذج إضافية لطلبات البحث، انتقِل إلى استكشاف نماذج طلبات البحث.

استكشاف نماذج طلبات البحث

تقدّم الأقسام التالية أمثلة على طلبات البحث التي يمكنك استخدامها لاستخراج A/B Testing بيانات تجربة من Google Analytics جداول الأحداث.

استخراج قيم الشراء والانحراف المعياري للتجربة من كل التجارب

يمكنك استخدام بيانات نتائج التجربة للتحقّق بشكل مستقل من Firebase A/B Testing النتائج. يستخرج بيان SQL التالي صيغ التجربة وعدد المستخدِمين الفريدين في كل صيغة ويجمع إجمالي الإيرادات من in_app_purchase وecommerce_purchase والانحرافات المعيارية لكل التجارب ضِمن النطاق الزمني المحدّد كتاريخَي البدء والانتهاء لـ _TABLE_SUFFIX.BigQuery يمكنك استخدام البيانات التي تحصل عليها من طلب البحث هذا مع أداة إنشاء الأهمية الإحصائية لاختبارات t أحادية الطرف للتحقّق من أنّ النتائج التي يقدّمها Firebase تتطابق مع تحليلك الخاص.

لمزيد من المعلومات عن كيفية احتساب A/B Testing للاستنتاج، اطّلِع على تفسير نتائج الاختبار.

  /*
    This query returns all experiment variants, number of unique users,
    the average USD spent per user, and the standard deviation for all
    experiments within the date range specified for _TABLE_SUFFIX.
  */
  SELECT
    experimentNumber,
    experimentVariant,
    COUNT(*) AS unique_users,
    AVG(usd_value) AS usd_value_per_user,
    STDDEV(usd_value) AS std_dev
  FROM
    (
      SELECT
        userProperty.key AS experimentNumber,
        userProperty.value.string_value AS experimentVariant,
        user_pseudo_id,
        SUM(
          CASE
            WHEN event_name IN ('in_app_purchase', 'ecommerce_purchase')
              THEN event_value_in_usd
            ELSE 0
            END) AS usd_value
      FROM `PROJECT_NAME.analytics_ANALYTICS_ID.events_*`
      CROSS JOIN UNNEST(user_properties) AS userProperty
      WHERE
        userProperty.key LIKE 'firebase_exp_%'
        AND event_name IN ('in_app_purchase', 'ecommerce_purchase')
        AND (_TABLE_SUFFIX BETWEEN 'YYYYMMDD' AND 'YYYMMDD')
      GROUP BY 1, 2, 3
    )
  GROUP BY 1, 2
  ORDER BY 1, 2;

اختيار قيم تجربة معيّنة

يوضّح نموذج طلب البحث التالي كيفية الحصول على بيانات تجربة معيّنة في BigQuery. يعرض نموذج طلب البحث هذا اسم التجربة وأسماء الصيغ (بما في ذلك الصيغة الأساسية) وأسماء الأحداث وعدد الأحداث.

  SELECT
    'EXPERIMENT_NAME' AS experimentName,
    CASE userProperty.value.string_value
      WHEN '0' THEN 'Baseline'
      WHEN '1' THEN 'VARIANT_1_NAME'
      WHEN '2' THEN 'VARIANT_2_NAME'
      END AS experimentVariant,
    event_name AS eventName,
    COUNT(*) AS count
  FROM
    `analytics_ANALYTICS_PROPERTY.events_*`,
    UNNEST(user_properties) AS userProperty
  WHERE
    (_TABLE_SUFFIX BETWEEN 'YYYMMDD' AND 'YYYMMDD')
    AND userProperty.key = 'firebase_exp_EXPERIMENT_NUMBER'
  GROUP BY
    experimentVariant, eventName