Google Gemini научат «видеть» мир из Volvo EX60

Google Gemini научат «видеть» мир из Volvo EX60

На конференции I/O компании Google и Volvo представили новую функцию: голосовой ассистент Gemini, работающий на основе искусственного интеллекта, получит доступ к внешним камерам готовящегося к выходу кроссовера EX60. Это позволит ему анализировать и интерпретировать окружающую обстановку для водителей. Внедрение стало возможным благодаря использованию Volvo автомобильной операционной системы Android Automotive от Google, встроенной непосредственно в автомобиль.

Gemini распознает дорожные знаки парковки

По словам Google, первым сценарием использования станет распознавание и перевод сложных дорожных знаков, касающихся парковки. Однако компания рассматривает и другие перспективы для Gemini с функцией видеоанализа. Предполагается, что ассистент сможет распознавать дорожные знаки, интерпретировать разметку полос движения или даже отвечать на вопросы о близлежащих достопримечательностях и заведениях. По заявлениям Google, система будет информировать владельцев автомобилей о допустимой длительности парковки, необходимости специальных разрешений и других ограничениях.

Как отметил Патрик Брэди, вице-президент по Android Automotive в Google, «в будущем Gemini сделает поездку более информативной, позволяя узнавать больше об окружающей обстановке прямо в пути».

Реализация этой функции не ограничивается только возможностями Gemini. Она также задействует собственную вычислительную мощь EX60, обеспечиваемую платформой Nvidia Drive AGX Orin, предназначенной для автономного вождения, а также поддержку беспроводных обновлений программного обеспечения (OTA), что позволяет обновлять систему «по воздуху».

Интерпретация дорожных знаков парковки выглядит действительно полезной функцией, при условии её высокой точности. Предварительные тесты покажут, насколько эффективно система работает в реальных условиях, как заявляет Google. Эксперты отмечают, что в некоторых крупных городах, например, в Нью-Йорке, знаки парковки крайне запутаны. Однако существует риск неверной интерпретации, которая может привести к дорогостоящим штрафам или даже эвакуации автомобиля. Google необходимо обеспечить максимальную точность этой функции, иначе пользователи могут отказаться от её использования.

Улучшенная навигация с Google Картами

Благодаря новому «зрению», Google также обещает улучшить навигационные возможности Карт. Volvo станет одним из первых автопроизводителей, которые получат новую функцию «Иммерсивной навигации» (Immersive Navigation) для Google Карт. В ней маршрут будет отображаться в трёхмерном формате с улучшенной графикой, максимально приближенной к реальности. Доступ к внешним камерам позволит Google Картам предоставлять более «разговорные» инструкции, учитывающие близлежащие ориентиры, например: «проедьте этот светофор и поверните налево у библиотеки».