Большие данные

Человек, работающий в сфере информационных технологий или бизнеса, наверняка слышал о феномене больших данных. Возможно, он даже сталкивался с профессионалами, которые называли себя аналитиками данных. Следовательно, он задавался вопросом, что же представляет собой эта новая развивающаяся область знания. Какими знаниями и навыками решения проблем обладают специалисты по анализу данных? Какие проблемы решают исследователи, изучающие данные, с помощью технологий больших данных?

Каждый день человечество создаёт десятки и сотни тысяч квинтиллионов байт данных. Человеку наверняка интересно узнать, что же такое квинтиллион. Это число с 18 нулями. И такое количество данных создаётся каждый день. С таким огромным потоком данных потребность в их осмыслении становится всё более острой и быстро увеличивает спрос на понимание области больших данных. Владельцы бизнеса, большого или малого, должны обладать базовыми знаниями в области больших данных.

Большие данные — одна из последних технологических тенденций, которая оказывает глубокое влияние на то, как организации пользуются информацией для улучшения качества обслуживания клиентов, совершенствования своих товаров и услуг, создания новых источников дохода, трансформации бизнес-моделей и даже эффективного управления медицинскими услугами. Актуальность этой темы заключается в том, что эффективное пользование большими данными почти всегда приводит к значительным результатам. Однако ирония состоит в том, что никто толком не знает, что же на самом деле означают большие данные.

Несомненно, большие данные — не просто модное выражение из сферы информационных технологий. Скорее, это быстро развивающаяся концепция в области информационных технологий и управления данными, которая революционизирует способы ведения бизнеса компаниями. Самое печальное состоит в том, что этот термин во многих случаях также оказывается настоящей загадкой, потому что никто, даже группа лучших экспертов по информационным технологиям и компьютерных гениев, не может дать точного объяснения, что же это такое. Им никак не удаётся придумать приемлемое для всех определение больших данных. В лучшем случае большинство этих компьютерных экспертов смогут предложить лишь приблизительные объяснения и единичные примеры для описания. Попробуйте спросить у нескольких экспертов по информационным технологиям, что же такое большие данные, и получится столько же разных ответов, сколько будет отвечающих.

Ещё более сложным и трудным для понимания является тот факт, что то, что считается большим сейчас, может оказаться не таким уж и большим в ближайшем будущем из-за быстрого развития программных технологий и систем управления данными, предназначенных для их обработки.

Также нельзя не учитывать того факта, что сейчас мы живём в цифровом мире, где всё, что мы делаем, оставляет цифровой след, который мы называем данными. В центре этого цифрового мира находится Интернет, из которого ежесекундно поступает поток данных, захлёстывающих наше сознание. При наличии нескольких триллионов веб-страниц (сотни миллиардов из которых уже проиндексированы и доступны для поиска в различных крупных поисковых системах) Интернет предлагает нам беспрецедентную взаимосвязь, которая позволяет нам взаимодействовать с кем угодно и чем угодно в рамках сети, частью которой мы сами и являемся. Каждое из этих взаимодействий также генерирует данные, которые проходят через сеть и записываются в ней, что увеличивает размытость и без того нечёткой концепции больших данных. Как следствие, сеть постоянно переполнена массами данных, настолько огромными, что их практически невозможно переварить или разбить на сегменты, пригодные для практического применения — если они вообще кому-то пригодны. Эти огромные, постоянно растущие массы данных, проходящие через Интернет и хранящиеся в нём, а также развивающиеся технологии, предназначенные для их обработки, и есть то, что в совокупности называют большими данными.