Google запустила Guided Vision в Gemini Live на Android — режим, в котором Gemini описывает происходящее перед камерой в реальном времени и подсказывает, как навести телефон. Функция создана для незрячих и слабовидящих людей, впервые её показали в сентябре вместе с другими инструментами доступности Android, сообщает блог Google.
Если камера смотрит слишком высоко, близко или мимо, Gemini голосом просит повернуть телефон вправо, наклонить вниз или отойти. Guided Vision читает мелкий текст на упаковках и меню, ищет упавшие предметы, описывает цвета и узоры одежды и планировку незнакомой комнаты. Модель обучали вместе с сервисом Aira: десятки тысяч часов разметки и более 1000 тестировщиков.
Включается режим в профиле приложения Gemini переключателем Use Guided Vision in Live, через ярлык в Настройки → Специальные возможности или из меню TalkBack. Google предупреждает: это не замена трости и не средство навигации.
Guided Vision доступен на Android 9 и новее в странах и на языках, где работает Gemini Live.
