Новую страницу в индекс!
Проблема индексации и попадания материалов в поисковую выдачу актуальна для молодых сайтов. Если у сайта высокие показатели посещаемости (от 1000 уникальных в сутки), то роботы поисковиков живут на таких сайтах постоянно и мигом схватывают новую информацию.
Как же быть молодому проекту?
Сразу дам ручной способ оповещения поисковиков напрямую о выходе новой статьи. Из практики Гугл реагирует в течение 2-3 часов, в Яндекс в течение суток. Это данные для не оптимизированного сайта и с периодичностью появления статей "как напишу, так и опубликую" (от несколько статей за раз до одной статьи в год).
Итак. Прямое сообщение в поисковик адреса новой статьи.
Пинг о статье Яндексу и Гуглу
Добавляем урл статьи напрямую в Яндекс https://webmaster.yandex.ru/addurl.xml.
Добавляем урл статьи прямиком в Гугл https://www.google.com/webmasters/tools/submit-url?hl=ru.
Это сервисы вынесенные из вебмастеров соответствующих поисковых систем. Позволяет напрямую указать адрес статьи новой. Почти гарантирует, что в ближайшее время придет бот и прочтет материал.
Пару лет назад способ практически гарантировал попадание в поисковую выдачу после прохождения быстроботом поисковика. Сейчас это только прочтение материала и приблизительная его оценка. Есть небольшая вероятность, что качественная и уникальная статья попадет в выдачу по свежему и актуальному запросу (по которому поисковик не имеет других данных). Это может быть отзыв о только что появившемся в интернете проекте, как пример, или подробности недавно случившегося события.
На своем опыте. Попадание в основную выдачу Яндекса происходит от пяти дней до месяца (для трастовых сайтов /смотри статью о трасте может быть совсем не так всё плохо). Гугл в основную выдачу отправляет новую статью через 2-3 дня, иногда срок затягивается до недели.
Если Вам нужно только время от времени отправлять в поисковики свежие статьи, то на этом чтение можно и прекратить. Далее расскажу как привязать поисковых ботов к сайту и использовать ручной способ только для наиболее важных материалов, требующих ускоренной индексации.
Бесплатный способ быстро попасть в поисковую выдачу
Универсальный. Работает и для Яндекса и для Гугла. Даже больше скажу - для Яндекса этот способ работает быстрее и лучше. Он очень прост и понятен. Вот о реализации его делайте вывод сами.
Опубликовали матриал. Добавили его в поисковики. В яндекс вебмастер добавили в "оригинальные тексты". И...
Привлекли порядка 50 человек (больше - лучше), которые зайдут на страницу и прочитают её.
Важные моменты:
1. На сайте на всех страницах должен быть установлен счетчик Яндекс метрики и Гугл аналитикс.
2. Посетители должны прочитать материал. Не просто открыть страницу и закрыть её, а "прочитать". То есть поведенческие факторы быть на уровне.
3. Это колочество посетителей должно прийти в течение 1-3 часов с момента публикации. Если поисковик обработает (касается яндекса) материал до учета его популярности, то скорее всего отправит на долгую обработку основному боту. А вот приход "через счетчик" бота даст высокую гарантию попадания в "быструю" выдачу да ещё и на высокие позиции.
Как это сделать - другой вопрос. Использую для этого такой способ привлечения посетителей. Можете использовать на свой страх и риск.
Платный способ в индекс Яндекса
Сервис getbot.guru за 2 рубля гарантированно вгоняет страницу в индекс Яндекса (с Гуглом не работают). Моя статья про опыт использования этого сервиса тут. Статьи с этого сайта попадают в индекс через быстробота за считанные минуты. В основной выдаче уникальные материалы через неделю-две. Для Яндекса - отличные результаты.
Естественным путем на не популярные сайты быстробот не приходит и статьи в основную выдачу попадают в срок от недели до месяца. Этот сайт бот посещает ежедневно, но без гетботгуру в быстровыдачу не попадают. Однако в основную выдачу влетают от двух недель до месяца.
Предупреждение. Инструмент очень хороший, но используйте не часто и не для всех материалов. Прогоняйте через него только важные и интересные посетителям материалы. Подозреваю, что постоянное использование инструмента может привести к изменению (какое оно будет положительное или отрицательное - не известно) траста сайта от Яндекса.
Используйте на свой страх и риск. Я использую, но только для особо удачных материалов, которые мне действительно хочется загнать в индекс моментально, а не ждать пару недель.
Попадание в индекс Гугла с помощью фида
У Гугла есть замечательная штука по обработке сайтов. Это feed. Настройки его указал у себя в блоге. Как она работает. Указывается адрес сайта и его некоторые параметры. Далее сервис или сам периодически обходя обнаруживает новый материал или сам фид оповещает о новой статье. Поисковый бот гугла тут же прибегает и глотает новый материал. В отличае от тормозного Яндекса поисковик Гугл быстро обрабатывает в этом случае статью и почти тут же выкладывает в дополнительный индекс поиска. Через пару-тройку дней уже и в основном поиске статью можно найти. Настраивать обязательно.
Заманивание роботов через социальные сети
Спорный пункт. Раньше отлично работал. Сейчас так же отлично работает, но при одном условии. По ссылкам из социальных сетей должны приходить читатели и читать статьи (не просто ткнули по ссылке и тут же закрыли, а именно прочли материал). Очень важный момент. Просто опубликовать ссылку уже не достаточно.
Опять же это верно для молодого ресурса. Если ссылка идет на старый и доверенный сайт, то боты отнесуться к ней с уважением и мигом обработают её.
Капитальные способы привлекать ботов
Собсвтенно способ то один. Улучшить сайт. Как его улучшить кратенько обозначу:
0. Увеличивайте количество читателей и посетителей. Больше посетителей - выше доверие. Выше доверие - выше траст сайта. Выше траст - больше посетителей.
1. Используйте разметку данных. Роботы ценять уже подготовленные и структурированные данные. В награду получите и снипеты красивые.
2. Ускорьте работу сайта. Чем быстрее загружается сайт, тем больше статей робот проверит при приходе (для каждого сайта устанавливается лимит посещений и глубина просмотра). Способов много. Включите кеширование, поместите сайт на более быстрый хостинг, оптимизируйте движок..
3. Закройте от индексирования мусор. Служебные данные и файлы движка, как и разнообразные формы и данные пользователей поисковикам не нужны - закройте их.
4. Дубли страниц удалить. Или закрыть от индексации.
5. Используйте сервис "уникальные тексты" от Яндекса.
6. Публикуйте только оригинальные тексты. Или, в крайнем случае глубоко переработанные. Синонимайзеры уже не работают.
Помог материал - поставьте лайк, оставьте комментарий. Это поможет и другим пользователям интернета найти решение аналогичной проблемы.
Если темы интересны - подиписывайтесь на канал!