Найти тему

Яндекс.Толока как инструмент оценки - не работает? Разбираем статистику.

Приветствую всех!

Вот уже больше месяца я веду свой блог на Дзене, присматриваюсь к тому, как Яндекс делает показы статьям, и вообще, изучаю платформу. И так как неплохо разбираюсь в веб-мастеринге, естественно подключил себе Яндекс.Метрику и создал несколько настраиваемых отчётов, что бы следить за настроениями читателей и удовлетворять их :) Вижу что посещения пошли вниз - стараюсь разнообразить контент в следующей статье, пишу о ином жанре книги. Если несколько статей с примерно похожей тематикой идут вверх - так же стараюсь их повторить через две-три публикации, как в стилистике написания, так и в жанре. В общем, по полной работаю с отказами.

И, конечно, параллельно я читаю блоги тех кто уже давно пишет на Дзене. Всё-таки опыт, это не то что стоит сбрасывать со счетов. Многие пишут о том что Великий Алгоритм сам строго судит статьи и только он решает - жить блогеру или нет :) И если с ним всё понятно (достаточно просто писать в его рамках), то с другой частью проверки статей не всё так однозначно. Не секрет, что Яндекс, в рамках системы Толока, выдаёт задания на оценку текстов её пользователям. И цену за выполнение таких заданий ставит довольно высокую. И, похоже, что такие задачи просто "прощёлкиваются" :(

Задания Яндекс.Толоки, среди них - на проверку соответствия статьи и заголовка. Скриншот с интернета.
Задания Яндекс.Толоки, среди них - на проверку соответствия статьи и заголовка. Скриншот с интернета.

В общем, заметил я вот что: отказы из рекомендательной системы Яндекс.Толока составляют почти 75%! Что это значит? Немножко поясню и покажу картинки со статистики по детализации.

Отказ в Яндекс.Метрике — это показатель, когда пользователь за 1 визит проводит на сайте меньше 15 секунд, не идет дальше одной страницы и не совершает никаких действий.

Т.е. пользователь Толоки при "отказе" провёл на странице меньше 15 секунд, никуда не нажал и вышел. Как за это время можно оценить статью? Да никак. Если посмотреть на мои статьи (да и у всех похожая картина), то сверху видна только вводная часть, которая может быть не очень соответствовать заголовку. Теперь картинки (слева посещения, справа отказы):

Как мы видим из десяти "толокеров" семь уходят за 15 секунд не совершая действий. Вебвизор я не подключал, поэтому посмотреть, что оставшиеся трое там делают, не могу. Возможно, они делают один "клик" и один же "скрол" и уходят со страницы через 10 секунд. И поделать с этим ничего не получится, обычно анализирующие алгоритмы принимают "ответ" живого человека гораздо выше ответа автоматизированных систем.

Поэтому хочу узнать у читателей: а что думаете по этому поводу вы? У вас наблюдается похожая картина или кардинально другая? И если вы "толоковец", то можете ли поделиться тем, как вы проверяете статьи (если это, конечно, не секрет)?