Gemini AI теперь предлагает взаимодействие с экраном в реальном времени на Pixel 9
Google улучшает своего помощника Gemini AI, добавляя возможность взаимодействовать в реальном времени с контентом, отображаемым на смартфонах Pixel 9, предлагая новый уровень контекстной помощи.
Google представил революционную функцию для своего помощника Gemini AI, позволяющую ему взаимодействовать с контентом, отображаемым на экранах смартфонов Pixel 9. Эта новая возможность, известная как Gemini Live, позволяет пользователям вести разговоры в реальном времени об изображениях, файлах и видео на YouTube прямо с экрана их устройства.
С Gemini Live пользователи Pixel 9 теперь могут получить доступ к плавающему оверлею, который предлагает ИИ ‘Обсудить видео в реальном времени’ на YouTube, ‘Обсудить PDF в реальном времени’ в приложении Файлы от Google и ‘Обсудить это в реальном времени’ для изображений. Эта функция предоставляет Gemini контекст контента на экране, устраняя необходимость для пользователей вручную описывать или загружать контент для обсуждения.
Функциональность Gemini Live распространяется на предложение идей для путешествий на основе видео, резюмирование контрактов в формате PDF и объяснение аллегорий в искусстве эпохи Возрождения, среди других возможностей. Для тех, кто беспокоится о конфиденциальности, функция может быть отключена, чтобы предотвратить автоматический анализ контента.
Google объявил о планах расширить доступность Gemini Live на смартфоны Samsung Galaxy S24 и S25, с дальнейшим распространением на другие устройства Android в планах. Этот шаг является частью более широкой стратегии Google по более глубокой интеграции Gemini в повседневную жизнь пользователей, особенно на мобильных платформах.
В перспективе Google разрабатывает Project Astra, набор инструментов, предназначенных для расширения возможностей Gemini Live, позволяя пользователям делиться своим экраном и транслировать видео в реальном времени, взаимодействуя с ИИ. Эта инициатива подчеркивает приверженность Google предоставлению помощи в реальном времени, в контексте, позиционируя Gemini как центральную фигуру в мобильном опыте.