Когда данные о расходах появятся в Google BigQuery и как происходит загрузка?

Как быстро данные появляются в Google BigQuery

При создании потока OWOX BI Pipeline загружает из вашего представления Google Analytics исторические данные:

• при использовании схемы GA_ONLY — за последние 90 дней; 
• при использовании схемы GA_NATIVE_PLUS_GBQ — за последние 30 дней.

В Google BigQuery таблицы с данными будут появляться постепенно, начиная с ближайшей даты. На загрузку всех данных уйдёт до 48 часов, в зависимости от их объема.

При регулярных загрузках обновление обычно занимает до 2 часов — с 10 до 12 утра. В случае, если данные в Google Analytics ретроспективно изменились за большой промежуток времени, обновление таблиц и загрузка новых может занять до 24 часов.

Как происходит загрузка данных

Загрузка и обновление данных происходит ежедневно по часовому поясу, указанному в настройках представления Google Analytics:

• импорт данных о расходах за предыдущие сутки начинается в 10:00 часов;
• для схемы GA_ONLY — обновление ранее импортированных данных за предыдущие 90 дней начинается в 12:00 часов;
• для схемы GA_NATIVE_PLUS_GBQ — обновление ранее импортированных данных за предыдущие 30 дней начинается в 04:00 часа.

Такое время выбрано для загрузки потому, что к этому моменту данные становятся доступны в API всех рекламных источников. Например, данные Яндекс.Директ появляются после 08:00 часов утра и с учетом обработки в Google Analytics становятся доступны до 10:00 часов утра.

Процесс загрузки начинается с проверки, за какие дни сумма расходов была изменена в Google Analytics. Это обычно занимает до 10 минут. После проверки составляется список дней, для которых необходимо обновить данные и загружаются данные только по этим дням.

Обратите внимание:Если расходы в Google Analytics появились после 10:00 часов утра, то в обновлении за текущий день эти расходы не будут учтены, так как не успеют пройти проверку на разницу суммы. Они будут учтены только на следующий день — при очередном обновлении данных.
Если вы не видите расходы по определенным каналам в OWOX BI, причина может быть во времени загрузки этих данных в Google Analytics

Задержка в загрузке данных может также произойти, если превышен лимит запросов к Google Analytics API. Например из-за того, что запросы к данным вашего представления совершают другие сервисы помимо OWOX BI. В таком случае данные за некоторые дни могут загрузиться не сразу, но они появятся в вашем наборе данных BigQuery при обновлении данных на следующий день.