В этой статье Х5 Retail Group — ведущая розничная мультиформатная компания — поделилась опытом использования решения с открытым кодом для аналитической обработки больших объёмов данных Greenplum, ставшей основой распределённой СУБД Arenadata DB (ADB).
Культура работы с данными внутри X5 Retail Group
В 2016 году X5 Retail Group начала делать первые шаги по созданию комплексной аналитической системы, работающей на основе массива больших данных. Внедрение системы стало основой принципиально нового data-driven подхода к бизнесу, который позволяет принимать решения, исходя из всего объёма данных и применённых к ним алгоритмов. Автоматизация таких задач позволяет уйти от, зачастую, узкой человеческой экспертизы к экспертизе данных и быстрому принятию решений. В результате анализа первых шагов работы системы было выбрано несколько целевых технологий. В ноябре 2017 года в X5 Retail Group были заложены основы для будущего технологического рывка.
АНДРЕЙ МОЛЧАНСКИЙ, директор департамента разработки и сопровождения продуктов больших данных Х5 Retail Group:
«Главной целью для нас стало построение платформы, которая позволила бы собрать в одном месте все данные X5, структурировать и описать их, привязать к ним систему Data Governance, и с помощью этого инструмента начать менять культуру работы с данными внутри компании По рекомендациям коллег мы обратились в Arenadata, и уже по итогам первой встречи поняли, что готовы протестировать её распределённую СУБД Arenadata DB (ADB), использующую концепцию MPP на основе Greenplum. А также разобраться, какие кейсы на ней сможем реализовать. Таким образом, мы стали первыми в российском ритейле, кто начал применять Greenplum как технологию».
Сотрудничество способствует развитию всей экосистемы Arenadata. Например, благодаря ему, в портфолио компании появилась кластерная колоночная система управления базами данных Arenadata QuickMarts (ADQM).
Arenadata DB в X5 Retail Group
Цель использования ADB в X5 Retail Group оказалась весьма практична: ритейлеру была нужна MPP база данных, которая бы выдерживала большую нагрузку от пользователей. Показатели и возможности системы должны были соответствовать высоким требованиям, чтобы ею могли одновременно пользоваться более 2000 аналитиков, задающих порядка 800 конкурентных запросов. Обычная база данных справиться с таким напором была не в состоянии. Именно для выполнения этой задачи было принято решение протестировать Arenadata DB.
На ней команда Big Data X5 начала строить аналитический слой детальных данных с описанной моделью, бизнес-владельцами доменов, правильно привязанной Data Governance и Classic Data-Dictionary. В результате у ритейлера получился надёжный сервис, доступный любому аналитику компании. Используя ADB, X5 Retail Group планирует анализировать все основные домены данных в ритейле: товары, чеки, клиентов, контрагентов. Используя ADB, X5 Retail Group планирует анализировать все основные домены данных в ритейле: товары, чеки, клиентов, контрагентов. Проект, развёрнутый Arenadata и X5 Retail Group, продолжает развиваться, и затрагивает не только Arenadata DB. Помимо построения самой технологии, команды X5 Retail Group и Arenadata проводят регулярные обмены опытом в рамках workshop, митапов, а также осуществляют совместные выступления на конференциях.
АНДРЕЙ МОЛЧАНСКИЙ:
«Нам важно, чтобы используемые нами BI-инструменты давали возможность людям принимать быстрые решения на основе Big Data. И Arenadata DB — та самая база, с помощью которой мы могли недорого и эффективно реализовать первые кейсы Open Source решения дают возможность не завязываться на вендорах, которые развиваются медленнее ваших потребностей. Другой важный момент заключается в том, что никто не хочет отдавать сторонним подрядчикам золото 21 века — данные, а вопрос сохранности и защищённости Big Data всегда стоит для нас на первом месте Нам нравится то, что сотрудничество с Arenadata лежит в плоскости совместного развития. Если у нашего бизнеса появляется необходимость в новом инструменте, например, мониторинге запросов и отслеживании их выполнения, то мы просто обсуждаем с коллегами из Arenadata, когда он появится в road map».
Познакомиться подробнее с возможностями аналитической СУБД Arenadata DB (ADB) можно на нашем сайте.
#arenadata #arenadatadb #adb #x5 #x5retailgroup #аналитическаясубд