По аналогии с DevOps в дата инжиниринге родилась новая область DataOps, которая ориентирована на повышение качества работы с данными. И спрос на специалистов, которые умеют работать с ней на всем жизненном цикле данных, растет с каждым днем.
18 августа в 20:00 ждём всех на Demo day курса «DataOps Engineer». В рамках вебинара вы сможете подробно узнать о курсе и программе обучения, а также задать интересующие вас вопросы.
┏━━━━━━━━━━━━━┓
Чтобы создать команду DataOps, далеко не всегда следует нанимать новых специалистов. Дело в том, что во многих компаниях костяк DataOps-группы уже имеется — в этом качестве могут выступать специалисты из уже существующих DevOps-команд. Следующим этапом будет выбор проектов, которые сопряжены с разработкой механизмов анализа Big Data. Вдобавок к этому, надо будет найти специалиста, который имеет опыт исследования данных. Таким экспертом может выступать как специалист из сферы Data Science, так и инженер по подготовке данных.
Когда речь идет о крупномасштабных проектах, то некоторые DataOps-роли можно распределить между несколькими участниками. Нередки ситуации, когда какой-нибудь специалист берет на себя больше одной роли. К примеру, какой-нибудь член команды способен иметь как навыки эксплуатации, так и навыки программной инженерии или, например, участники с опытом разработки могут обладать квалификацией инженеров по подготовке данных. Нередко соответствующий опыт имеется и у исследователей данных. Если же говорить о том, что встречается реже всего, то это совмещение навыков эксплуатации программного обеспечения и навыков исследования данных.
На что еще стоит обратить внимание? К примеру, если говорить об обычных инженерных командах, то тут зачастую достаточно просто четко обозначить цели. Далее, видя общую цель, группа самоорганизуется и решает поставленные задачи. А вот в случае с DataOps все не так просто, ведь разные участники рассматривают одну и ту же задачу с различных точек зрения. Допустим: — специалисты по эксплуатации будут беспокоиться, в первую очередь, о надежности и о том, дабы отклик на запрос обязательно поступал в течение какого-нибудь конкретного промежутка времени; — исследователи данных уже будут большую важность придавать точности поступающих ответов, следовательно, и фокусироваться они будут на обеспечении этой точности.
Однако когда все участники готовы к компромиссам и стремятся к решению общей задачи, то и выстроить нужную организационную структуру будет просто.
Источники:
• https://www.osp.ru/cw/2018/03/13054002.