Помимо Recall Microsoft работает над новым поиском Windows Search, основанным на семантическом индексе, который может решить проблемы с текущим поисковым индексом. Новая поисковая система Windows 11 может использовать искусственный интеллект для создания результатов локального поиска и даже для просмотра аудио- и видеофайлов.
Функция Recall в Windows 11 была одним из флагманов Microsoft Copilot PC, но все пошло не так, как рассчитывала компания. После возмущения, вызванного проблемами конфиденциальности и безопасности, Microsoft отозвала функцию Windows Recall и пообещала вернуть ее в октябре.
Исследователь Microsoft Xeno недавно обнаружил упоминания «Интеллектуального поиска мультимедиа» в Windows 11 Build 27695. В ней содержится несколько ссылок на функции, которые указывают на наличие искусственного интеллекта, способного искать содержимое в видео- и аудиофайлах.
Эта магия ИИ будет работать после загрузки соответствующих моделей, которые сделают этот подвиг возможным. Судя по всему, сначала функция расшифрует все видео/аудиофайлы на вашем компьютере. После этого можно будет выполнить поиск по содержанию.
Вы сможете искать конкретные слова, сказанные в разговоре. Например, вы можете искать такие детали, как название проекта или важные статистические данные, и в результатах поиска появятся соответствующие видео/аудиофайлы.
Можно даже не ограничиваться этим, а представить точную временную метку появления слова в файле или подчеркнуть его значимость в разговоре.
Интеллектуальный медиапоиск может быть связан с семантическим поиском
Возможно, интеллектуальный медиапоиск может быть связан с семантическим поиском, о котором Microsoft объявила на мероприятии Copilot.
Microsoft указала в недавнем сообщении в блоге, что «Recall AI работает на основе Windows Semantic Index».
Преимущество этого индекса в том, что вы можете взаимодействовать с ним, используя естественный язык. Вскоре разработчики смогут получить доступ к Vector Embeddings и RAG API в библиотеке Windows Copilot Library.
Напомним, что в ранних демонстрациях AI показывал, что он будет использовать снимки, чтобы помочь вам найти все, что вы ранее делали на своем ПК. Интеллектуальный медиапоиск будет на ступень выше. Нам нравится эта идея, но, как и Recall AI, она будет эксклюзивной для Copilot PC, которые дебютировали в июне 2024 года.
Copilot PC имеют необходимое оборудование для локального запуска моделей ИИ с 40 NPU TOPS и выше. Мы не ожидаем появления этой функции на обычных ПК с Windows 11, поскольку они не имеют необходимой мощности.
Интеграция Dev-party в Windows 11 AI
Microsoft также хочет расширить возможности поиска на естественном языке для сторонних разработчиков приложений.
Разработчики смогут предлагать аналогичные возможности поиска на естественном языке в своих приложениях. Представьте себе финансовое приложение, в котором вы можете искать прошлые действия с помощью естественного языка. Отклик на поиск будет быстрее, поскольку все данные будут присутствовать на компьютере.
Recall AI вернется в октябре 2024 года для тестеров после четырехмесячного перерыва. Если он вам не нужен, его можно будет удалить через диалоговое окно «Дополнительные возможности» панели управления.