Статья подготовлена для студентов курса «Data Engineer» в образовательном проекте OTUS.
Сегодня термином Big Data описывают наборы данных большого объёма, которые растут с течением времени. Ценность Big Data стали понимать уже давно, поэтому многие компании, в том числе и отечественные, не жалеют денег на соответствующие проекты и специалистов. Big Data-инженеры владеют специальными инструментами для работы с большими данными, поэтому они способны собирать и обрабатывать огромные массивы информации, что необходимо для решения разнообразных прикладных задач. В этой статье мы рассмотрим, в каких именно областях сегодня востребовано популярное направление Big Data.
1. Геотаргетинг
В обмен на данные о местоположении пользователя, современные сервисы предоставляют пользователям свои услуги. Зная, где обычно бывают люди, появляется возможность предложить им наиболее релевантный контент и вариант.
Простой пример: у вас установлено программное приложение какого-нибудь банка. Банк в итоге знает, где вы чаще бываете, в какие заведения ходите. Результат: вам предлагается покупка банковской карты с кэшбеком в ваших любимых заведениях.
2. Климат и погода
Для прогноза погоды, изучения характера природных явлений и т. д. широко используются данные со спутников, которые собирают данные по всему миру. В частности, таким образом удалось добиться максимальной достоверности по части тех же краткосрочных прогнозов.
3. Медицина
Используя истории болезней пациентов, врачи более точно ставят диагноз и как можно раньше назначают эффективное лечение либо профилактику, что особенно важно в случае с генетическими заболеваниями.
К примеру, современные нейротехнологи способны диагностировать болезнь Паркинсона всего лишь на основе данных ЭЭГ. Большое значение имеет Big Data и при анализе пандемий и эпидемий.
4. Виртуальные помощники
Если собрать данные всех пользователей, можно давать более ожидаемые и логичные ответы. А используя паттерны поведения и информацию пользователя, можно обеспечить персонализированное общение с ним.
5. Банковская система
Банковские системы сегодня генерируют очень много данных. Они используются в разных целях: выявление краж, рассмотрение заявок на кредит и т. п. Система рассмотрит кредитную историю и другие данные, сравнит информацию с другими клиентами и подскажет вероятность того, вернёт ли человек средства.
6. Транспорт
Подробный анализ о водителях, их транспортных средствах и местоположении используется сегодня для предсказания спроса и предложения, а также расчёта тарифов на поездки.
7. Сфера развлечений, интернет
Если проанализировать ваше поведение и контент, который вы просматриваете, можно будет показать вам более правильные персонализированные рекомендации и сделать более подходящие предложения. Естественно, это широко используется сегодня и в поисковых системах, и в интернет-магазинах, и в онлайн-кинотеатрах, и на сайтах знакомств и т. д.
Материал подготовлен на основании статьи специалистов из компании «МегаФон».