Google Gemini научится управлять смартфоном — в коде уже раскрыта новая функция

Возможности современных моделей ИИ постоянно расширяются, и в обозримом будущем ИИ начнет управлять мобильными устройствами. Google развивает эти возможности в рамках программы Project Astra, и вскоре это может принести первые ощутимые плоды.

В бета-версии приложения Google 17.4.66 компания Android Authority нашла упоминания об этой функции и ее возможное название. Кодовое имя бонобоно официальное название, вероятно, будет «автоматизация экрана» (автоматизация экрана). Может использоваться для оформления заказов в интернет-магазинах и заказа такси. Встроенная ссылка на данный момент ведет на общую страницу поддержки Gemini, а значит, это всего лишь заполнитель.

При первом запуске функции на Android-устройстве появится предупреждение с рекомендацией следить за действиями AI-агента на смартфоне. Пользователям рекомендуется внимательно следить за действиями Gemini, хотя это несколько умаляет ценность новой функции. С другой стороны, «Близнецы могут совершать ошибки‘, поэтому пользователь будет нести ответственность за все свои действия.

Наконец, Google предупреждает, что когда функция «Сохранить активность» включена, снимки экрана с вашего устройства будут просматриваться «обученные модераторыИз-за этого рекомендует не вводить конфиденциальную информацию или платежные реквизиты в приложении. Пока неясно, нужно ли будет вручную ставить Gemini на паузу для ввода такой информации или же агент ИИ будет обрабатывать ее автоматически. Наконец, поскольку Gemini будет обрабатывать заказы пользователей, они могут появиться в приложении; в интерфейсе переключения аккаунтов Google появилась ссылка на раздел «Мои заказы«, но сейчас это никуда не денется.

Какими конкретно приложениями Gemini сможет управлять, пока невозможно определить, но предполагается, что к ним будут относиться заказ еды, такси и тележки для покупок. Также тестируется создание 3D-аватаров и возможность добавления контекста из Google Maps.

Помните, что вскоре Gemini сможет заказывать для вас еду прямо со смартфона Galaxy.