Яндекс научил нейросеть Yandex GPT (модель YALM 2.0) кратко пересказывать видеоролики с Youtube. Доступна эта возможность в Яндекс.Браузере, поиске на ya.ru и на сайте 300.ya.ru.
Зачем это нужно? Не всегда есть возможность посмотреть видео. Зато можно посмотреть краткий текстовый пересказ и понять, интересует тебя это видео или нет. Или так. Ты ищешь наглядную инструкцию, либо тебя интересуюит характеристики нового гаджета, а многие авторы видео уж очень склонны растекаться мыслью по древу, снимая длинные ролики. Yandex GPT изложит содержимое видео и аккуратно, четко и с расстановкой показывает таймкод. По клику на нем можно перейти в интересующее тебя место.
Краткий пересказ от Yandex GPT полезен и авторам роликов. С помощью нейросети можно добавить таймкод и описание видео, а также ключевые слова.
Нейросеть работает с русскоязычными роликами длительностью от 2 минут до 4 часов. В поиске Яндекса пересказ работает пока только для популярных видео с не менее популярными тематиками.
В Яндекс поиске имеется возможность пересказа содержания видео не только с Youtube, но и с других сервисов. На скриншоте ниже видно, что опция краткого пересказа доступна для роликов с VK Видео и Rutube.
Разумеется, в пересказе видео могут быть неточности. Нейросеть может неправильно понять и интерпретировать слова.
На сервисе 300.ya.ru возможен пересказ роликов только с Youtube. Вы скажете, что на этом сервисе есть свой краткий пересказ текста с таймкодом. И будете правы. Однако давайте посмотрим, какова разница в интерпретации слов в Youtube и Yandex GPT.
Для примера - несколько эмоциональное видео от известного байкера Константина Сёмина о вреде компьютерных игр и пользе катания по лесу на мотоцикле.
Прокручу расшифровку видео еще немного.
Расшифровка видео от Youtube выглядит как бессмысленный набор фраз (так оно и есть), местами неправильно расслышанный. А теперь краткий пересказ от Yandex GPT.
Что можно сказать? Краткий пересказ текста от Yandex GPT обстоятельный, наглядный и удобный для прочтения. Кстати, нейросеть не наврала. Здесь все правильно.
Краткий текст от Youtube... По нему сразу и не поймешь, о чем ролик. Но так оно и есть. Первые двадцать минут (это хорошо видно на скриншоте выше) автор критикует любителей компьютерных игр, общается с козлами, ругается, падает с мотоцикла и поднимается. Короче, старательно критикует.
Остается восхититься нейросетью Yandex GPT, что она смогла обобщить набор слов из ролика в удобочитаемый текст. Нейронка оказалась на высоте.
Надеюсь, на сайте 300.ya.ru со временем появится возможность анализировать видеоролики с других сервисов.
Возможно, вам понравится: