Качество данных

Делали мы как-то первую очередь большого проекта по разработке системы проверки данных на всю страну. В ходе проекта нужно было разработать определенные правила проверки данных и собственно разработать информационную систему для выполнения этих правил надт терабайтами данных. Методологи вгрызлись в законы, аналитики написали постановки, программисты написали тысячи строк кода. И были дни, и были месяцы на то… Были разработаны около 1000 инструкций проверки данных. Вскипели котлы процессоров и проверка данных началась и будет продолжаться еще много месяцев...

В своей карьере я постоянно занимался пресейлами и продолжаю это, наверное сейчас даже активнее, чем раньше. В ходе пресейлов постоянно общаешься с новыми людьми и очень хорошо становятся видны текущие тренды. Так, например, различные CXO ставят перед своими аналитиками и ИТ-отделами вполне верные цели относительно правильного решения задач управления данными. Но при этом либо “стратеги”, либо те, на кого возложены эти задачи, вводят ограничения финансового или технического характера, препятствующие эффективному достижению намеченных целей...

Data Quality 101 (https://acl.gov/sites/default/files/programs/2020-12/DataQ101_11.20.20_508.pdf) гласит, что объем имеющихся данных ничтожен по сравнению с их качеством. В нашем распоряжении может быть почти бесконечное количество данных, но будет практически невозможно извлечь из них какую-либо полезную информацию, а тем более сделать какие-либо выводы и прогнозы на их основе, эти данные - мусор. В условиях стремительного роста количества фейков и данных, сформированных с помощью ИИ, качество...

C развитием технологий и ростом объема информации в нашей жизни прочно укоренился термин «фейк». Распространение ложной информации в интернет-пространстве способно навредить во многих случаях: из-за него можно попасться на уловки мошенников, потерять часть доходов и даже подвергнуться уголовному преследованию. Рассмотрим, как можно обезопасить себя и свой бизнес. Что такое дипфейки? Среди множества намеренно искаженной информации сегодня часто встречаются не только текстовые, но и аудио и видео-фейки...

Успех современного бизнеса во многом зависит от эффективности использования данных. Качественные данные – это горючее любой организации и основа ее коммерческого прогресса. Ведь выполнение каждой задачи напрямую зависит от точности предоставленной информации. Если же она недостоверная, это может привести к поистине фатальным ошибкам (например, в медицине или авиастроении). Поэтому организации всего мира активно внедряют сегодня концепцию data governance. Это деятельность по управлению данными, объединяющая операционные и стратегические аспекты. Высококачественные данные – обязательный элемент data governance...