Наши устройства и другие системы генерируют большие объемы данных самого разного рода. Необходимо совместно с командой дата-платформы упорядочить данные, настроить процессы и превратить их в удобный инструмент для анализа и визуализации. Твои основные заказчки - это аналитики данных. Что вам предстоит делать? ▶️ Разрабатывать и поддерживать ETL/ELT процессы с использованием dbt/airflow. ▶️ Проектировать и оптимизировать модели в витринном слое. ▶️ Разрабатывать и поддерживать процессы по заполнению мета-данных в дата-каталоге. ▶️ Контролировать качество данных: писать тесты в dbt, осуществлять мониторинг аномалий. ▶️ Документировать данные и процессы (data documentation). ▶️ Адаптировать dbt-core для продуктовых аналитиков. Мы ожидаем, что вы: ▶️ Знаете dbt-core, имеете опыт доработки core/адаптеров. ▶️ Умеете осуществлять оркестрацию с помощью airflow/dagster. ▶️ Хорошо знаете Python. ▶️ Знаете основы хранения данных, различий между БД. ▶️ Отличное знаете SQL и особенности Clickho