Как быстро данные появляются в Google BigQuery

При создании потока OWOX BI Pipeline загружает из вашего представления Google Analytics исторические данные за полгода. В Google BigQuery таблицы с данными будут появляться постепенно, начиная с ближайшей даты. На загрузку всех данных уйдёт до 48 часов, в зависимости от их объема.

При регулярных загрузках обновление обычно занимает до 2 часов — с 10 до 12 утра. В случае, если данные в Google Analytics ретроспективно изменились за большой промежуток времени, обновление таблиц и загрузка новых может занять до 24 часов.

Как происходит загрузка данных

Загрузка данных о расходах начинается каждый день в 10 часов утра по часовому поясу, указанному в настройках представления Google Analytics. Также каждый день в 10:00 начинается обновление загруженных данных за предыдущие полгода.

Такое время выбрано для загрузки потому, что к этому моменту данные становятся доступны в API всех рекламных источников. Например, данные Яндекс.Директ появляются после 8 утра и с учетом обработки в Google Analytics становятся доступны до 10 утра.

Процесс загрузки начинается с проверки, за какие дни сумма расходов была изменена в Google Analytics. Это обычно занимает до 10 минут. После проверки составляется список дней, для которых необходимо обновить данные и загружаются данные только по этим дням.

Обратите внимание:Если расходы в Google Analytics появились после 10 утра, то в обновлении за текущий день эти расходы не будут учтены, так как не успеют пройти проверку на разницу суммы. Они будут учтены только на следующий день — при очередном обновлении данных.
Если вы не видите расходы по определенным каналам в OWOX BI, причина может быть во времени загрузки этих данных в Google Analytics

Задержка в загрузке данных может также произойти, если превышен лимит запросов к Google Analytics API. Например из-за того, что запросы к данным вашего представления совершают другие сервисы помимо OWOX BI. В таком случае данные за некоторые дни могут загрузиться не сразу, но они появятся в вашем наборе данных BigQuery при обновлении данных на следующий день.