[إحصاءات Google‏ 4] ميزة BigQuery Export

Exporting Data from Google Analytics 4 Properties to BigQuery

أداة BigQuery هي مستودع بيانات في السحابة الإلكترونية يتيح لك تنفيذ طلبات بحث عالية الأداء لمجموعات البيانات الكبيرة.

يمكنك تصدير جميع الأحداث الأوّلية من مواقع "إحصاءات Google‏ 4" (بما في ذلك المواقع الفرعية ومواقع البيانات المجمّعة) إلى BigQuery، ثمّ استخدام بنية تشبه لغة الاستعلامات البنيوية (SQL) لإجراء طلبات بحث تخصّ هذه البيانات. وفي BigQuery، يمكنك اختيار تصدير بياناتك إلى وحدة تخزين خارجية أو استيراد البيانات الخارجية لأغراض دمجها في بيانات "إحصاءات Google".

عند تصدير البيانات إلى BigQuery، تصبح أنت مالك هذه البيانات، ويمكنك استخدام قوائم ACL في BigQuery لإدارة أذونات المشاريع ومجموعات البيانات.

ملاحظة: بعد تصدير البيانات من "إحصاءات Google" إلى BigQuery، لا يمكنك إعادة تصديرها.

يحدث التصدير الكامل للبيانات مرّة واحدة في اليوم. ويتمّ تصدير هذه البيانات أيضًا بصفة مستمرّة على مدار اليوم (راجِع تصدير بيانات البثّ أدناه).

يمكنك التصدير إلى نسخة افتراضية مجّانية من BigQuery (وضع الحماية على BigQuery)، ولكن ستُفرض رسوم على عمليات التصدير التي تتجاوز حدود وضع الحماية.

للمواقع العادية حدّ يومي في BigQuery Export يبلغ مليون حدث. مزيد من المعلومات عن حدود BigQuery Export الأخرى

أنواع BigQuery Export

تقدّم "إحصاءات Google" خيارات تصدير BigQuery التالية، التي يختلف كلٌّ منها في مدى توفّر البيانات لليوم الحالي، ويجب تحديد الخيار وفقًا لاحتياجاتك من البيانات وبما يتناسب مع ميزانيتك:

أنواع عمليات التصدير	يُنصح باستخدام هذا النوع في حال كنت بحاجة إلى...	تفاصيل التصدير	الحدود	المحاذير
التصدير اليومي (الإصدار العادي، الإصدار 360)	مجموعة كاملة من البيانات لليوم السابق ولا تحتاج إليها بسرعة أو لست من عملاء الإصدار 360	تصدير جميع بيانات الأحداث الأوّلية غير المستندة إلى عيّنات مرّة واحدة في اليوم من اليوم السابق الوقت المحدّد غير مضمون يتمّ عادةً تصدير البيانات في منتصف فترة ما بعد الظهر في المنطقة الزمنية لموقعك، ولكن يمكن تأخيرها إلى وقت لاحق من اليوم أو اليوم التالي النقرة الأخيرة المُسجَّلة، بدون وضع نماذج	المواقع العادية: ما يصل إلى مليون حدث في اليوم، مع خيارات فلترة للبقاء ضمن الحدّ المسموح به مواقع "إحصاءات Google‏ 360": ما يصل إلى 20 مليار حدث في اليوم	قد يتأخّر ظهور بعض البيانات، مثل بيانات تحديد مصدر المستخدِم، لمدّة تصل إلى 24 ساعةً. ننصح باستخدام التصدير اليومي بدلاً من البثّ للحصول على بيانات تحديد مصدر المستخدِم.
معدّل تكرار عمليات التصدير الجديدة يوميًا (الإصدار 360)	بيانات أسرع وأكثر اكتمالاً على مدار اليوم	عادةً ما تصل البيانات بحلول الساعة 5 صباحًا تعديلات مجمَّعة على مدار اليوم، عادةً في غضون 60 دقيقة المخطّط نفسه المستخدَم في التصدير اليومي تبدأ عملية التصدير استنادًا إلى المنطقة الزمنية للموقع النقرة الأخيرة المُسجَّلة، بدون وضع نماذج أسرع بكثير من التصدير اليومي	لا تتوفّر اتّفاقية مستوى الخدمة للمواقع القليلة الكبيرة جدًّا	لا يتوفّر إلّا لمواقع "إحصاءات Google‏ 360" العادية والكبيرة.
البثّ (الإصدار العادي، الإصدار 360)	بيانات قريبة من الوقت الفعلي (خلال دقائق)	تصدير بيانات اليوم الحالي في الوقت الفعلي أفضل خدمة ممكنة	ما مِن حدود للحجم	يتمّ استبعاد بيانات مصادر الزيارات للمستخدمين الجدد والجلسات الجديدة من التصدير

ملاحظة: يفرض BigQuery تكاليف مقابل تخزين البيانات ومعالجتها في كل عملية تصدير.. ستتحمّل تكاليف إضافية من BigQuery لإجراء عملية تصدير بيانات البثّ بسعر 0.05 دولار أمريكي (أو ما يعادله بالعملة المحلّية) لكلّ غيغابايت من البيانات. ويساوي 1 غيغابايت حوالي 600,000 حدث في "إحصاءات Google"، إلا أنّ هذا العدد سيختلف اعتمادًا على حجم الأحداث. مزيد من المعلومات عن تسعير BigQuery

الاختلافات بين واجهة "إحصاءات Google" و"BigQuery Export"

يوفِّر تصدير الأحداث إلى BigQuery إمكانية الوصول إلى البيانات على مستوى المستخدِم وبيانات الأحداث الأوّلية، باستثناء أيّ إضافات في القيمة تُجريها "إحصاءات Google" للبيانات الواردة في الاستكشافات والتقارير العادية. ولهذا السبب، قد تختلف البيانات الواردة من تصدير الأحداث إلى BigQuery عن البيانات الواردة في واجهة "إحصاءات Google".

للتعرّف على الاختلافات بين الأحداث المُصدَّرة إلى BigQuery وواجهة "إحصاءات Google"، واكتشاف طرق التخفيف من حدّة هذه الاختلافات قدر الإمكان، اطّلِع على المقالة سدّ الفجوة بين واجهة مستخدِم "إحصاءات Google" وتصدير BigQuery.

تصدير بيانات البثّ

يمكنك تحديد خيار تصدير بيانات البثّ عند ربط موقع "إحصاءات Google‏ 4" وBigQuery.

يتيح تصدير أحداث البث إلى BigQuery بيانات لليوم الحالي في غضون دقائق قليلة، وذلك من خلال ميزة BigQuery Export.

عند استخدام خيار التصدير هذا، تحصل أداة BigQuery على معلومات أكثر حداثة يمكنك تحليلها حول المستخدمين وزياراتهم في موقعك.

في كل يوم، تُنشئ عملية تصدير بيانات البث جدولاً جديدًا واحدًا:

• ‫events_intraday_YYYYMMDD: جدول تقسيم مرحلي داخلي يحتوي على سجلات نشاط الجلسة التي حدثت خلال اليوم. وتصدير بيانات البثّ هو عملية تستنِد إلى أفضل جهد وقد لا تتضمّن جميع البيانات لأسباب مثل معالجة النتائج المتأخّرة و/أو عمليات التحميل التي تعذّر إتمامها. ويتم تصدير البيانات بصفة مستمرة على مدار اليوم. ويمكن أن يتضمّن هذا الجدول سجلّات الجلسة عندما تمتد تلك الجلسة على مستوى عمليات تصدير متعددة. ويتم حذف هذا الجدول عند اكتمال events_YYYYMMDD.

في حال تحديد الخيار اليومي عند إعداد ميزة BigQuery Export، يتم أيضًا إنشاء الجدول التالي كل يوم.

• ‫events_YYYYMMDD: التصدير اليومي الكامل للأحداث.

عليك إجراء طلب البحث events_YYYYMMDD بدلاً من events_intraday_YYYYMMDD بحيث ترسل طلبات بحث عن مجموعة بيانات ثابتة خلال اليوم.

يمكنك الاطّلاع على مخطّط BigQuery Export لمزيد من المعلومات عن الجدولَين events_YYYYMMDD وevents_intraday_YYYYMMDD.

إنّ تصدير بيانات بثّ BigQuery لا يتضمّن بيانات تحديد مصدر المستخدم التالية للمستخدمين الجدد:

• ‫traffic_source.name (سمة إعداد التقارير: حملة المستخدم)
• ‫traffic_source.source (سمة إعداد التقارير: مصدر المستخدم)
• ‫traffic_source.medium (سمة إعداد التقارير: وسيط المستخدم)

يتمّ تضمين بيانات مصدر المستخدِم، وذلك في ما يخصّ المستخدِمين الحاليين، إلّا إنّ تلك البيانات تتطلّب 24 ساعة تقريبًا لمعالجتها بالكامل. لذا ننصح بعدم الاعتماد على تلك البيانات من تصدير بيانات البثّ وبدلاً من ذلك الحصول على بيانات تحديد مصدر المستخدِم من التصدير اليومي الكامل.

ستتحمّل تكاليف إضافية من BigQuery لإجراء عملية تصدير بيانات البثّ بسعر 0.05 دولار أمريكي (أو ما يعادله بالعملة المحلّية) لكلّ غيغابايت من البيانات. ويساوي 1 غيغابايت حوالي 600,000 حدث في "إحصاءات Google"، إلا أنّ هذا العدد سيختلف اعتمادًا على حجم الأحداث. اطّلِع على مزيد من المعلومات عن تسعير BigQuery.

معدّل تكرار عمليات التصدير الجديدة يوميًا

يمكنك الآن تحديد خيار التصدير "معدّل تكرار عمليات التصدير الجديدة يوميًا" بالإضافة إلى خيارَي "التصدير اليومي" و"تصدير بيانات البثّ". يتوفّر خيار "معدّل تكرار عمليات التصدير الجديدة يوميًا" في الوقت الحالي لمواقع "إحصاءات Google‏ 360"، ويمكن تفعيل كلّ خيار من خيارات التصدير الثلاثة بشكلٍ مستقلٍّ عن الآخر.

لضبط خيار "معدّل تكرار عمليات التصدير الجديدة يوميًا"، يجب إعداد الفوترة على Google Cloud Platform.

القيود

يتوفّر خيار "معدّل تكرار عمليات التصدير الجديدة يوميًا" للمواقع المميّزة العادية والكبيرة. ولا يتوفّر هذا الخيار للمواقع المميّزة الكبيرة جدًّا.

يحتوي خيار "معدّل تكرار عمليات التصدير الجديدة يوميًا" على جميع حقول البيانات والأعمدة التي يُفترض أن تكون في عملية التصدير اليومية، بما في ذلك بيانات تحديد مصدر المستخدِم المسجلة وبيانات مرّات ظهور الإعلان. تعرَّف على مزيد من المعلومات عن مخطّط BigQuery Export.

الجدول الزمني لتعديلات الجداول

إنّ توقيت التعديلات على الجداول التي يتم إنشاؤها كجزء من BigQuery Export مرتبط بالمنطقة الزمنية لموقع "إحصاءات Google" الذي يتم تصدير البيانات منه.

يتم تعديل جداول تصدير بيانات البث (events_intraday_YYYYMMDD) بشكل مستمر على مدار اليوم (مثلاً من الساعة 12:00:00 صباحًا إلى 11:59:59 مساءً بتوقيت المنطقة الزمنية للموقع). وبعد أن يبدأ يوم جديد في المنطقة الزمنية للموقع، يتم إدخال الأحداث في جدول جديد خلال اليوم الواحد.

يتم إنشاء جداول التصدير اليومية (events_YYYYMMDD) بعد أن تجمع "إحصاءات Google" جميع الأحداث خلال اليوم. وستعمل "إحصاءات Google" على تعديل الجداول اليومية لمدّة تصل إلى 72 ساعة بعد تاريخ إصدار الجدول الذي يتضمّن أحداثًا تحمِل طوابع زمنية بتاريخ الجدول، مثل مجموعات الأحداث التي ترِد متأخّرة من Measurement Protocol أو حِزم تطوير البرامج (SDK) لمنصّة Firebase. على سبيل المثال، إذا كان تاريخ الجدول هو 2022/01/01، ستعمل "إحصاءات Google" على تعديل الجدول إلى 2022/01/04 مع تضمين الأحداث التي تحمِل طابعًا زمنيًا بتاريخ 2022/01/01.

في بعض الأحيان، يمكن أن تعدِّل خدمة "إحصاءات Google" الجداول اليومية في أيّ وقت بعد فترة الاثنين وسبعين ساعةً في ظلّ ظروف تتطلّب من الخدمة إعادة معالجة البيانات السابقة (مثل إصلاح خطأ يساعد على تصحيح خطأ في المعالجة).

يتمّ تعديل خيار "معدّل تكرار عمليات التصدير الجديدة يوميًا" كلّ 60 دقيقة تقريبًا على مدار اليوم.

إشعارات بدون ملفّات تعريف الارتباط وبيانات مقدَّمة من العملاء

عند تنفيذ وضع الموافقة، ستكون الإشعارات بدون ملفّات تعريف الارتباط التي تجمعها "إحصاءات Google" متوفّرة في BigQuery Export، بالإضافة إلى البيانات المقدَّمة من العملاء مثل user_id والسمات المخصّصة.

"إحصاءات Google‏ 4" - دمج Firebase وBigQuery

في حال دمج موقع "إحصاءات Google‏ 4" ومشروع على Firebase، لا يمكن ربطهما بمشاريع BigQuery منفصلة.

مقارنة BigQuery Export في كلٍّ من "إحصاءات Google‏ 4" وUniversal Analytics

إحصاءات Google‏ 4	Universal Analytics
تتوفّر في الإصدار العادي (المجاني) وإصدار 360 (المدفوع) الحد الأقصى للأحداث في الإصدار العادي: مليون حدث في اليوم الحد الأقصى للأحداث في إصدار 360: مليارات الأحداث في اليوم	تتوفّر في إصدار 360 (المدفوع)
التكلفة تصدير مجاني إلى وضع الحماية في BigQuery ضمن حدود هذا الوضع وفقًا لبنود العقد، تُفرض رسوم على البيانات التي يتم تصديرها وتتجاوز حدود وضع الحماية	التكلفة تصدير مجاني إلى وضع الحماية في BigQuery ضمن حدود هذا الوضع وفقًا لبنود العقد، تُفرض رسوم على البيانات التي يتم تصديرها وتتجاوز حدود وضع الحماية
عملية الإعداد يمكن تضمين مصادر بيانات معيَّنة واستبعاد أحداث معيَّنة لكل موقع (إتاحة إمكانية التحكم في حجم التصدير وتكلفته)	عملية الإعداد يمكن ربط ملف شخصي واحد لكل موقع (يتم تصدير جميع البيانات في هذا الملف الشخصي)
تصدير بيانات البث 0.05 دولار أمريكي (أو ما يعادله بالعملة المحلية) لكل غيغابايت (مزيد من المعلومات عن أسعار BigQuery) اسم الجدول الذي يتم إنشاؤه: events_intraday_YYYYMMDD يتم حذف الجدول كل يوم في الحالات التالية: إذا كنت تستخدِم أيضًا خيار التصدير اليومي بالإضافة إلى البث عند اكتمال الجدول اليومي بالبيانات لا يتم تضمين بيانات حملة المستخدِم أو مصدر المستخدِم أو وسيط المستخدِم في ما يتعلق بالمستخدِمين الجدد	تصدير بيانات البث 0.05 دولار أمريكي (أو ما يعادله بالعملة المحلية) لكل غيغابايت (مزيد من المعلومات عن أسعار BigQuery) اسم الجدول الذي يتم إنشاؤه: ga_realtime_sessions_YYYYMMDD اسم الملف الشخصي الذي يتم إنشاؤه من BigQuery: ga_realtime_sessions_view_YYYYMMDD
التصدير اليومي اسم الجدول الذي يتم إنشاؤه: events_YYYYMMDD	التصدير اليومي اسم الجدول الذي يتم إنشاؤه: ga_sessions_intraday_YYYYMMDD يتم تعديل بيانات الجدول 3 مرات على الأقل يوميًا يعمل كل تعديل على استبدال البيانات السابقة في الجدول يتم حذف الجدول عند اكتمال عملية الاستيراد الكامل من اليوم التالي ga_sessions_YYYYMMDD استيراد البيانات بالكامل يوميًا
معدّل تكرار عمليات التصدير الجديدة يوميًا يتوفّر في مواقع "إحصاءات Google‏ 360" "العادية" و"الكبيرة" يحتوي على جميع حقول البيانات والأعمدة التي يُفترض أن تكون في عملية التصدير اليومية، بما في ذلك بيانات تحديد مصدر المستخدِم المرصودة وبيانات مرّات ظهور الإعلان.	غير سارٍ
إعدادات التصدير العامة إضافة بيانات سابقة: غير سارية مجموعة البيانات: لكل موقع مرتبط، يتم تخصيص مجموعة بيانات واحدة باسم analytics_<معرِّف الموقع> إذا تم تنفيذ وضع الموافقة، ستتضمن عملية التصدير ما يلي: إشعارات بدون ملفات تعريف الارتباط البيانات المقدَّمة من العملاء (user_id، السمات المخصَّصة)	إعدادات التصدير العامة إضافة بيانات سابقة: عند الربط، تتم إضافة بيانات سابقة منذ 13 شهرًا أو إضافة بيانات 10 مليارات نتيجة سابقة، أيهما أقل (قد تتعذّر إضافة البيانات السابقة إلى وضع الحماية في BigQuery) مجموعة البيانات: لكل ملف شخصي مرتبط، يتم تخصيص مجموعة بيانات واحدة باسم الملف الشخصي نفسه
مخطط التصدير لا تُصدِّر "إحصاءات Google‏ 4" سوى مصدر الزيارات الذي اكتسب المستخدِم للمرّة الأولى لا يتيح تصدير بيانات Universal Analytics إلى BigQuery كل صف في جدول BigQuery يمثِّل حدثًا بيانات الأحداث مخصَّصة لخدمة "إحصاءات Google‏ 4" فقط مع أنّ هناك بعض حقول "إحصاءات Google‏ 4" التي تشبه حقول Universal Analytics بشكلٍ أساسي (مثل device.category وdevice.deviceCategory)، فإنّ هناك أوجه اختلاف أكثر من أوجه التشابه بين بيانات أحداث "إحصاءات Google‏ 4" وبيانات نتائج Universal Analytics	مخطط التصدير تحديد المصدر على مستوى الجلسة في نقاط اتصال متعدّدة كل صف في جدول BigQuery يمثِّل جلسة بيانات النتائج مخصَّصة لخدمة Universal Analytics فقط مع أنّ هناك بعض حقول Universal Analytics التي تشبه حقول "إحصاءات Google‏ 4" بشكلٍ أساسي (مثل device.deviceCategory وdevice.category)، فإنّ هناك أوجه اختلاف أكثر من أوجه التشابه بين بيانات نتائج Universal Analytics وبيانات أحداث "إحصاءات Google‏ 4".

مراجع ذات صلة

يمكنك زيارة دليل المطوِّر في BigQuery لمعرفة المزيد عن ما يلي:

• "إحصاءات Google"‏ (إحصاءات Google‏ 4) وBigQuery
• Google BigQuery
• قوائم ACL في BigQuery
• بنية BigQuery