Вопрос из комментариев решил еще раз подсветить о ролях DA и DE
Грань между DA и DE бывает сильно размыта, мне ли это не знать если у меня позиция называется аналитик-инженер 😅
На самом деле расскажу например как у нас делится в Сравни
DE (инженеры данных) отвечают за:
- поддержание инфраструктуры и сервисом DWH (само хранилище, ETL, очереди сообщений и все что с этим связано)
- выполнение дата-контрактов по загрузке сырых данных из систем-источников
- написание витрин по запросу продуктовых команд, где нет своих ресурсов аналитиков
DA (аналитики данных) отвечают за:
- проверку данных в сыряке и написание дата-контрактов
- описание бизнес-логики и разработку витрин
- автоматизацию витрин
- создание BI отчетов
- создание своих нужных бизнесу и команде автоматизаций (джобы различные, отправки уведомлений с данными, алертинг по данными)
поэтому вот таким задачам DA и будем учиться на курсе
