Для того, чтобы не просто разбираться в работе поисковых систем, но понимать их развитие и вовремя реагировать на него, важно знать, как все начиналось.
В данной статье мы не будем говорить о факторах ранжирования, оптимизации сайтов и закупке ссылки. Мы расскажем немного об истории поисковых систем, а также о тенденциях дальнейшего развития мирового и российского поиска.
История развития классических поисковых систем
Первые мировые поисковые системы (тогда это называлось индексная база) появились в 1993 году:
- Wandex (воскрес 1 января 2012 года),
- Aliweb.
В названии Wandex вы уже можете заметить знакомый слог “ndex”. Это важный кусочек слова «индекс».
Если вы откроете Википедию и посмотрите определение поисковой системы, вы узнаете, что фундаментальная часть ее — это хранилище данных, которое на сленге (с английского языка) называют “index”, индексное хранилище, индексная база. В некоторых поисковых системах по традиции можно заметить такую аббревиатуру (например, Yandex — Yet Another Indexer — еще один индексатор).
Тогда, в 1993 году, это были первые индексные базы данных, в которых сайты размещали, как в каталоге, а потом внутри запускали поиск. В 1994 появились новые поисковики Webgrawler и Lykos с системами краулер — веб-пауками, поисковыми роботами.
Сбор данных и пополнение базы сайтами в системах такого типа происходит автоматически, в режиме реального времени. Пауки обходят страницы в интернете, проходят по ссылкам и заносят новые данные в базу.
Поисковые пауки стали второй важной составляющей современной поисковой системы.
Первые российские поисковые системы
В России первая поисковая технология была презентована 8 октября 1996 года. Это была поисковая система Рамблер, отметившая в 2016 году свое 20-летие. В рамках презентации системы было проиндексировано более 100 000 документов.
Параллельно с компанией Рамблер развивалась компания Апорт, но ее развитие затормозилось. Рамблер быстрее выкладывал свои релизы, что сказалось на его популярности. Презентация Апорта же произошла только спустя год, 11 ноября 1997.
Подробнее о начальном этапе развития российских поисковых систем можно почитать в книге Игоря Ашманова «Жизнь внутри пузыря». В ней рассказывается об истории компании «Рамблер» глазами одного из топ-менеджеров: как в конце 90-х строились поисковые системы, и о чем думали их создатели.
Некоторое время Рамблер был поисковиком №1 в России, самым посещаемым сайтом и порталом номер. Однако с годами он уступил свое место Яндексу и Google. В настоящее время, у Рамблера больше нет своего поискового движка. Используя поиск Рамблера, вы на деле видите поисковую выдачу Яндекса, поэтому целенаправленно работать с поисковыми алгоритмами Рамблера и продвигать в нем сайт - уже не имеет смысла.
Наглядная история рунета
Наглядно история развития рунета крайне занимательно представлена в виде квадратов на сайте rukv.ru.
На данном ресурсе вы можете посмотреть в ретроспективе, как развивался рунет, как быстро прирастал мир сайтов. Каждый квадрат — это набор пикселей, где каждый пиксель — отдельный сайт. Чем больше квадрат, тем больше сайтов в экосистеме рунета.
Также на ресурсе есть интерактивный квадрат настоящего, который можно открыть и, случайным образом
нажав несколько точек квадрата, перейти на среднестатистические сайты рунета. К слову, если вы комплексуете по поводу своего сайта, считая его недостаточно хорошим, вам непременно стоит проделать это.
Мы привыкли к сайтам, типа ВКонтакте, Facebook, Яндекс, РБК. И это хорошие сайты, как, скорее всего, и у вас. Но сайтов много, (сейчас их активных в рунете порядка трех миллионов) и среди них есть огромное количество, которые даже не попали в индексную базу поисковика. Одни сайты не откроются, на других вы увидите верстку конца 90-х, старые системы управления и т. д. Некоторые рассчитаны на узконаправленные запросы и при этом находятся далеко не на первой строчке в поиске. Сравнив несколько случайных сайтов, можно сделать вывод, что среднестатистический сайт не так уж и хорош.
Это не значит, что необязательно стремиться сделать свой сайт хорошим. Но, по крайней мере, вы больше не будете считать его таким плохим.
Современные поисковые системы России — борьба за первое место
На данный момент, самой популярной российской поисковой системой является Яндекс.
Поисковик был анонсирован 23 сентября 1997 и являлся четвертой поисковой системой в мире. В основе Яндекса российская поисковая технология, краулер система (с пауками).
Долгое время Яндекс держал позиции поисковика №1 в России, однако уступил лидерство корпорации «Google», которая была образована 2 сентября 1998 года.
Приятный для соотечественников факт - одним из основателей компании «Google» является выходец из Советского союза Сергей Брин.
На данный момент именно поисковая система Google является ведущим поисковиком на территории РФ.
Как определяется ведущий поисковик
Статистики по расчету доли поисковых систем в интернете много, вопрос в том: по какой методологии считается эта самая доля. Согласно какому исследованию и по какой метрике рассчитывается, кто первый поисковик?
Самый доступный вариант узнать, какой поисковик самый популярный - посмотреть данные статистики онлайн на LiveInternet.
Это один из самых старых счетчиков статистики, который установлен на большом количестве сайтов, в том числе на сайтах популярных СМИ и на сайте ВКонтакте). Счетчики собирают основные данные с сайтов рунета и дают возможность посмотреть агрегированную статистику, с каких поисковиков на сайты переходят чаще всего. Ниже представлен график динамики доли поисковых систем в рунете за последние годы.
Статистику доли различных поисковых систем по доменной зоне .ru можно получить по ссылке:
- ru/stat/ru.
Нажав вкладку «трафик из поисковых систем», вы увидите, из каких поисковых систем получают трафик сайты, на которых стоит счетчик LiveInternet.
Почему российские поисковики уступают
Признаки того, что Яндекс уступит в поиске Google, проявлялись уже несколько лет назад. Как же вышло, что российский поисковик не предпринял достаточные меры, чтобы удержать позиции?
И ответ здесь более чем очевиден — рост использования мобильных устройств. За счет того, что все больше пользователей стали использовать поиск на мобильных устройствах и гаджетах, выросла и доля запросов в Google. Ведь на устройствах, на которых стоит иностранная операционная система с иностранным бразуером, и поисковая система по умолчанию будет не российская.
Интернет — это сложный организм, который начинается с каналов связи и гаджетов. На них основываются: операционная система, браузер, поисковая система, социальная сеть.
И если страна хочет быть независимой в сети интернет, то на каждой ступени должны быть свои системы. В России есть свои каналы связи, однако гаджеты и операционные системы, как и сопутствующий софт являются заимствованными. Потому ничего удивительного, что со временем российские компании стали двигать и на верхнем уровне, на уровне поисковиков и социальных сетей.
Яндексу тяжело соперничать в поиске с Google, тем более что, как поисковая машина, Google более совершенен. Однако Яндекс не теряется, и развивает другие сервисы: те же Яндекс браузер, Яндекс Маркет, Яндекс Такси, Яндекс Авиабилеты, максимально стараясь использовать свое преимущество на локальном рынке.
Будущее поиска и поисковых систем
Согласно статистике по рынку SEO от Russian Internet Week, где RAEX совместно с высшей школой экономики докладывают о динамике отрасли, доля классического SEO в мире услуг интернет-маркетинга неукоснительно снижается.
Раньше поисковая оптимизация была чуть ли не единственной услугой, контекстная реклама появилась куда позже, и еще не было социальных сетей. В самом начале сайты стремились попасть в поисковик и для этого был лишь один инструмент — SEO.
Сейчас же мир рекламы достаточно пестрый, и многие каналы развиваются куда более динамично, что приводит к выводу, что поисковая оптимизация уже прошла свою лучшую эпоху уже прошло. Тревожные цифры — это сокращение бюджетов на СЕО, убыль поискового продвижения в доле бюджета компаний на интернет-маркетинг.
Классический SEO в поисковых системах Яндекс и Google считается старым каналом, который уже, возможно, не будет так динамично расти. Впрочем, это не значит, что он пропадет совсем.
Куда уходит поиск и что с этим делать
Бюджеты в SEO выделять стало уже не так модно, но это не значит, что профессия сео-оптимизатора потеряла актуальность. Просто приходится признать, что поиск уходит в другие миры. Пользователи теперь ищут не сайты и данные внутри сайта, но иную информацию: ролики на Youtube, посты в Инстаграме, группы ВКонтакте и т. д.
Посмотрите на карту эпохи интернет-империй от 2013 года. На ней страны мира раскрашены в разные цвета, в зависимости от того, какой сайт является в ней первым по посещаемости.
В 2013 году 112 стран были закрашены в цвет Google, однако темпы роста социальных сетей (того же Facebook) позволили им сместить поисковые системы с первого места. Что касается, проводимого времени на сайте, поисковые системы давно уступают соцсетям.
Данное развитие касается не только Facebook, так же происходит эволюция поиска внутри ВКонтакте.
Социальная сеть имеет свой текстовый поисковик, который работает и развивается, и которым пользуется огромное количество людей. И если прежде ВКонтакте пользователи искали друзей, группы и музыку, то теперь все чаще ищут ответы на запросы: «купить айфон» или «заказать цветы».
Карточки товаров в группах социальных сетей позволяют искать товары и, если вы хотите купить смартфон или пиццу, вам уже необязателен Яндекс. Пользователь может совершить покупку, не покидая социальной сети. И это правильная стратегия.
Mail.ru замерял статистику по Одноклассникам и Вконтакте и отмечал, что люди, перемещаясь в группу внутри социальной сети чувствуют себя гораздо спокойней, чем перемещаясь на сторонний сайт. Страница интернет-магазина плохо грузится, верстка не адаптирована под мобильные, тяжелые изображения и видео жрут трафик - и люди возвращаются в социальную сеть, где им комфортно.
Так что социальные сети стараются аккумулировать аудиторию внутри себя и не выпускать трафик на сторонние сайты. Стоит отметить развитие полноценного поиска и на других порталах: в YouTube, Инстаграме, на Авито и различных досках объявлений.
Как особенности поисковых систем России влияют на интернет-маркетинг
На представленной выше карте нельзя не отметить такой момент, как борьбу за информационный государственный суверенитет: страны СНГ и страны Азии окрашены в свои цвета.
То есть, на уровне поисковых систем и социальных сетей в данных странах представлены свои популярные сайты, будь это связано с рубильником на уровне государственной политики, где запрещают иностранные сайты, или с тем, что хватило мозгов сделать свои поисковые системы и соцсети.
И несмотря на то, что Google все-таки стал поисковиком №1, доля Яндекса все равно остается весьма внушительной. Так же, как и Facebook не смог сместить российские социальные сети. Такое многообразие ведущих систем отличает нашу страну от европейских и американских. Это влияет на особенности российского интернет-маркетинга, делает его более сложным и многокомпонентным, чем на Западе.
В рамках СЕО-оптимизации, интернет-рекламы и работы с социальными сетями приходится учитывать особенности каждой поисковой системы и соцсети: целевую аудиторию, механизмы воздействия. С каждой системой приходится работать немного по-своему, корректируя контент и используя различные инструменты.