Обновление Project Astra от Google улучшает приложение Gemini с возможностью понимания мира в реальном времени
Project Astra от Google, футуристический помощник на основе ИИ, начинает свое распространение, улучшая приложение Gemini возможностями понимания мира в реальном времени.
На MWC 2025 Google объявила о широкомасштабном запуске своего экспериментального помощника Project Astra, начиная с марта, первоначально ориентируясь на смартфоны Android. Пользователь Reddit продемонстрировал демонстрационное видео, выделяющее новую функцию ‘Поделиться экраном в реальном времени’ в помощнике Gemini, наряду с обновлениями интерфейса Gemini Live, представляющими опции обмена видео и экраном в реальном времени. Google подтвердила The Verge, что эти функции уже начинают распространяться.
Project Astra представляет собой передовой край ИИ, способный к пониманию текста, аудио, изображений, видео и потоков с камеры в реальном времени. Грег Уэйн из Google Deepmind описал его как ‘маленького попугая на вашем плече’, который разговаривает с вами о мире. Это обновление позволяет Gemini анализировать содержимое на экране и отвечать на запросы, предлагая описания, резюме или обсуждения просматриваемого контента.
Одной из выдающихся функций является система понимания мира. Активация режима Live в Gemini открывает видео поток с камеры, позволяя ИИ видеть, понимать и отвечать на вопросы о реальном мире. Будь то интерпретация отрывка из книги, предоставление информации о памятнике, советы по декору или решение задач из книги или настольной игры, обновление Project Astra в Gemini Live разработано для всего этого.
Этот прогресс напоминает Visual Intelligence от Apple и приложение с открытым исходным кодом HuggingSnap, оба предлагающие возможности ИИ для понимания мира в автономном режиме. Digital Trends испытали демонстрацию Project Astra на MWC, предварительно ознакомившись с улучшенным опытом использования ИИ-помощника на смартфонах. Однако доступ к обновлению Project Astra в Gemini Live в настоящее время ограничен для тех, у кого есть подписка Gemini Advanced, и распространение, похоже, происходит постепенно, так как некоторые пользователи еще не видят обновления на своих устройствах.