Google вскоре может позволить Gemini объяснять что угодно на экране… не обводя это
Что случилось? Сообщается, что Google работает над новым инструментом Gemini (предположительно, под названием «Circle Screen»), который может анализировать экран вашего телефона и автоматически давать пояснения или краткие выводы.
- Этот инструмент может эффективно заменить одну из самых популярных и известных функций на базе искусственного интеллекта на смартфонах: Circle to Search (через Android Authority ).
- Новый инструмент распознавания экрана от Google позволяет вам спрашивать Gemini обо всем, что появляется на дисплее вашего телефона, включая текст, изображения и математические формулы, среди прочего.
Почему это важно? Сейчас пользователям нужно вызвать инструмент «Круг для поиска» , выделить часть экрана, чтобы получить релевантные ответы и возможность задать уточняющие вопросы.
- Однако новое обновление основано на интерфейсе жестов и расширяет его.
- Вместо того чтобы запускать поиск, Gemini теперь интерпретирует выборку и выдает сводки или пояснения на основе искусственного интеллекта.
- Это знаменует собой переход от простого визуального поиска к опыту на базе искусственного интеллекта, в котором ваш телефон предоставляет больше информации о том, что вы видите, без вызова Circle to Search и переключения интерфейсов.
Почему меня это должно волновать? Это дополнение является частью более масштабных усилий Google по интеграции Gemini в большинство устройств Android (и даже Wear OS ).
- Новый инструмент Gemini может упростить потребление информации на смартфонах, избавив нас от необходимости копировать/вставлять, переключать приложения или использовать инструмент поиска Circle to Search.
- Например, представьте, что вы читаете сообщение в социальной сети на другом языке и с помощью жеста мгновенно получаете перевод или объяснение на экране, не выходя из приложения.
- Студенты или исследователи могут сделать снимок экрана диаграммы, цитаты или абзаца и попросить Джемини резюмировать или объяснить их.
Итак, что дальше? Стоит ожидать, что больше Android-смартфонов, а не только флагманы высокого класса или устройства Pixel, получат функцию анализа экрана на базе Gemini.
- Со временем это может изменить то, как мы используем Gemini, поскольку они смогут получать объяснения от ИИ с помощью одного жеста.
- Однако эта функция также поднимает вопросы о конфиденциальности и UX-контроле, поскольку устройства все лучше понимают, что находится на экране.
- Совсем недавно было замечено, что Google интегрирует режим искусственного интеллекта в функцию Circle to Search для предоставления ответов на последующие запросы .