Google представила Project Astra: ассистента, работающего через камеру смартфона

17.05.2024, 23:103,511

На конференции Google I/O был представлен Project Astra – инновационный ИИ-помощник, разработанный Google DeepMind.

Project Astra использует камеру смартфона для взаимодействия с пользователем в реальном времени, предлагая широкий спектр возможностей. Разработчики считают, что в будущем он станет незаменимым помощником людей в ежедневной жизни.
Основанный на мощной мультимодальной модели Google Gemini, Project Astra не только анализирует визуальную информацию, но и может вести диалог с пользователем. В ходе демонстрации приложение продемонстрировало ряд впечатляющих функций:

  • Распознавание объектов: Astra смог идентифицировать музыкальную колонку, увиденную камерой смартфона, и даже назвать отдельную ее деталь, когда пользователь указал на нее.
  • Понимание контекста: Astra распознал город по панораме из окна и рассказал о его достопримечательностях.

По словам генерального директора Google DeepMind Демиса Хассабиса, Project Astra станет незаменимым помощником в повседневной жизни. В будущем он будет доступен не только на смартфонах, но и на «умных» очках.