Компания Google объявила о широком распространении функции Gemini Live с возможностью обмена изображениями и экраном на устройствах под управлением Android. Впервые представленная в январе, эта функция позволяет пользователям показывать Gemini содержимое своего экрана, в том числе файлы, изображения и видео с YouTube, а также вести голосовые диалоги на основе полученной информации. После обновления она стала доступна на более широком спектре устройств, включая модели Pixel 6 и новее, а также на смартфонах серии Galaxy S24 и S25.
Для использования новой функции достаточно открыть приложение Gemini, активировать режим камеры или загрузить нужный файл с помощью кнопки «+». В дальнейшем пользователи могут задавать вопросы, связанные с содержимым экрана или файлами, анализировать видео или получать краткие сведения о изображениях, что существенно расширяет возможности взаимодействия с ИИ в мобильных устройствах. В частности, Gemini может помочь в определении одежды, подборе диеты или получении информации о видео на YouTube, используя его субтитры.
Помимо этого, Google продемонстрировала интеграцию с другой популярной платформой — Perplexity, которая в скором времени получит функцию, аналогичную «Circle to Search». В демонстрационном видео показывается, как с помощью этого инструмента пользователь сможет выделить на экране отдельную информацию, например, о теннисисте Роджере Федерере, и получить подробный ответ о его состоянии и карьере, что значительно ускорит поисковые запросы и взаимодействие с информацией.
Как отмечают эксперты, новая функциональность расширяет возможности мобильных ИИ и делает их более удобными и доступными для пользователей. Внедрение таких технологий потенциально может изменить подходы к поиску информации, а также оказать влияние на развитие мобильных ассистентов и приложений для обработки мультимедийных данных на Android.