Google Lookout — приложение, доступное на телефонах и устройствах Android, — предлагает функции, призванные помочь слепым или слабовидящим людям. В этом руководстве рассматривается функция Lookout Image Q&A, которая улучшает работу пользователя, обеспечивая более интерактивное и детальное понимание содержимого изображения.
Это лишь одна из функций Lookout. Приложение может похвастаться целым набором инструментов, которые предоставляют голосовую информацию об окружающей обстановке и помогают выполнять такие задачи, как чтение текста, сканирование этикеток продуктов и распознавание банковских купюр.
Использование Google Lookout Image — это простой процесс: загрузите или откройте изображение, и искусственный интеллект приложения сгенерирует описательный рассказ о визуальном контенте. Однако появление функции Image Q&A открывает новый уровень функциональности. Эта функция позволяет задавать последующие вопросы об элементах изображения, чтобы получить более глубокое понимание и ответы о конкретных аспектах изображения.
В этом пошаговом руководстве мы рассмотрим, как это работает.
В этой статье:
Как использовать вопросы и ответы Google Lookout Image Q&A
Google Look Out Image Q&A доступен на Android версий 6 и выше и в настоящее время находится в бета-версии.
1. Установите и откройте приложение Lookout
Чтобы воспользоваться Google Lookout, вам нужно загрузить приложение из магазина Play и установить его на свой телефон. При первом открытии приложения вы попадете на страницу Welcome to Lookout и получите краткое представление о том, что оно делает. Когда вы закончите чтение, выберите Далее.
2. Согласие с условиями использования
Перед началом работы вам нужно будет согласиться с информацией об использовании и соглашением о согласии. Выберите Я согласен, если вы согласны с условиями.
3. Выберите в меню пункт Изображения
Выберите значок трехстрочного меню в верхней левой части экрана. В меню есть следующие пункты: Текст, Документы, Исследовать, Валюта, Этикетки продуктов и Изображения. Выберите Изображения.
4. Выберите изображение
На следующем экране выберите Выбрать изображение. Вы можете выбрать изображения, сохраненные на телефоне в Фото и других приложениях.
5. Описание изображения
Чтобы проверить описание изображения, я загрузил свою фотографию из сохраненных на телефоне фотографий.
Описание изображения, созданное Lookout, выглядит следующим образом:
«На этой картинке мы видим, что стоит человек, а сбоку — деревянный предмет, за ним — машина и еще несколько вещей, а на ней — надпись tea shack. Стоит человек и что-то держит в руках. Позади него — растения и флаги. На заднем плане — небо.
Человек: Может быть, один человек.
Персона 1: Взрослый.
Детали: Дерево, платье
Текст: TEA SHACK
Это описание не идеально. Lookout не заметил, что на заднем плане есть еще один человек, и упоминает небо, хотя на картинке его не видно. (Там есть белое здание, которое, возможно, сбило его с толку).
Тем не менее, это довольно насыщенная картина, и Lookout удалось заметить все основные особенности, а именно: человек в одежде стоит рядом с деревянной хижиной для чая, а на заднем плане видны деревья и флаги.
6. Произнесите свой вопрос
Теперь перейдем к самому интересному. Мы зададим Lookout несколько дополнительных вопросов. Сделать это можно двумя способами. Первый — просто задать вопрос вслух.
Для этого выберите «Произнести вопрос», расположенный рядом со значком микрофона, а затем задайте свой вопрос. Я спросил «Какого цвета платье?», и Lookout точно ответил мне, что платье на картинке темно-синее.
Вы можете продолжать задавать вопросы, выбрав значок микрофона в правом нижнем углу экрана.
7. Введите свой вопрос
Второй способ задать вопрос — ввести его в текстовое поле. Я ввел вопрос: «Улыбается ли человек?», и Lookout ответил: «Да, похоже, что человек улыбается». (На фотографии я действительно улыбаюсь).
И снова вы можете задавать столько вопросов, сколько захотите, вводя новые вопросы в текстовое поле.
Текстовое поле и значок микрофона остаются в нижней части страницы во время сеанса вопросов и ответов, поэтому при желании вы можете переключаться между этими двумя методами.
Чтобы выйти из сеанса вопросов и ответов, выберите стрелку назад в верхней левой части экрана.
Функции изображения в Lookout все еще находятся в разработке, и его искусственный интеллект будет совершенствоваться по мере того, как все больше людей будут пользоваться им, и он научится лучше отвечать на вопросы. В последующих обновлениях мы ожидаем улучшений в его работе.
Тем не менее, на данный момент он работает довольно хорошо. Он быстро и точно отвечает на вопросы. Язык, используемый в описаниях, понятен, и хотя он звучит не совсем так, как будто вы разговариваете с человеком, в нем все равно чувствуется натуралистичность.
Даже в текущей бета-версии это ценный инструмент для людей с ограниченным зрением, предоставляющий персонализированный интерактивный сервис, который дает вам ту информацию, которая вам действительно нужна.
Если вы хотите узнать, что еще можно делать с фотографиями на телефоне Android, читайте наши статьи о лучших альтернативах Google Photos, о том, как делать фотографии с рук на Google Pixel, и об искусственном интеллекте Google Pixel 8 Pro для редактирования фотографий.
По новым правилам Дзена свежие материалы показываются в первую очередь подписчикам, которые реагируют на публикации. Поэтому не забывайте подписаться, поставить лайк и оставить комментарий, так вы будете первым узнавать о всех новых статьях на нашем канале!
