Привет! Судя по обращениям в чат поддержки, далеко не весь функционал нашего сервиса известен и понятен пользователям. В частности, функционал сверки данных, который хоть и малозаметен в интерфейсе, но включается по умолчанию для многих базовых выгрузок.
Итак, этот модуль производит сверку исторических данных, загруженных в БД mybi connect, и данных в источнике - это позволяет нам найти «инциденты» изменения данных «задним числом» и загрузить актуальные данные из источника. Это бывает, к примеру, в случае пересчета статистики рекламным кабинетом, в рамках пресечения фрода и прочих механизмов «скликивания». Глубина сверки данных зависит от тарифа пользователя, а принципы работы подробнее описаны в Справке mybi connect.
Сверка может быть недоступна в интерфейсе, если она была отключена при настройке источника или, если пользователь отключил выгрузку тех таблиц, которые участвуют в сверке.
При этом, даже если вы зайдете в соответствующий раздел, вы можете не увидеть результаты ее работы за текущий месяц. Данные перезагружаются, только если замечены расхождения в них. Но для того, чтобы результаты сверки были наглядны, мы подготовили небольшой статистический срез о том, как часто она запускается.
Мы рассмотрели 246 источников за месяц. Среди них - рекламные кабинеты и CRM системы. Сверка данных затронула треть из них! Для многих перезагрузка запускалась больше одного раза.
Статистика говорит, что в среднем каждый третий источник за месяц попадает под условие перезагрузки, то есть для них меняются данные «задним числом» в самом источнике, а сервис находит такие инциденты и обновляет данные в БД.
Таким незаметным для многих образом мы стараемся обеспечить актуальность данных в базах. Это означает, что исторические данные в хранилище могут меняться и это необходимо учитывать и при работе с отчетами, и при попытках реплицирования нашей БД.