TwelveLabs: выпустили Marengo 3, индексатор видео контента для поиска в нём персонажей/объектов/сказанных фраз, итд

TwelveLabs: выпустили Marengo 3, индексатор видео контента для поиска в нём персонажей/объектов/сказанных фраз, итд. Подойдёт для: нахождения слов и действий персонажа; моментов как спортсмен N забивает мяч в ворота; блогер появляется в кадре с продуктом бренда; итд. Я писал о них ранее.

Что нового:

* Индексация видео файлов длиной до 4 часов

* Мультимодальный поиск одновременно и по тексту и рефу с картинки

* Возможность создать сущность по 1-5 фото, которую можно тегать в поле поиска

* Работает на 36 языках, включая русский

* Понимает специфичные термины для спорта и кино (zooms, pan, tracking shot, итд)

Есть SDK для интеграции в сторонний пайплайн и API для оплаты за каждый запрос.

На бесплатном тарифе у вас 600 минут. Я закинул 40+ мин файл для теста и сделал сущность по 5 фото. Индексация идёт очень быстро за считанные минуты, а нужный момент с персонажем ищется моментально.

Сайт

Анонс