Использование Gemini для обеспечения работы ИИ на iPhone — это здорово, но я хочу, чтобы Apple сначала исправила проблему с функцией «Быстрые команды».

Apple запустила в технологической индустрии непрерывный поток обсуждений благодаря своей выгодной сделке с Google. Упустив первоначальный ажиотаж вокруг ИИ и используя временное решение в виде ChatGPT, Apple наконец-то выводит Gemini (настроенную версию без какой-либо брендовой символики) на передний план. Идея состоит в том, чтобы исправить Siri, Apple Intelligence и весь пакет Foundation Models .

Итак, что это значит для вас? Во-первых, Siri станет такой же разговорчивой и умной, как ChatGPT или Gemini. Она больше не будет сталкиваться с ситуациями, когда ей приходится перенаправлять ваши запросы в ChatGPT. И, будем надеяться, наконец-то получит полезные аналитические данные для других приложений. Google только что сделал это с помощью функции Personal Intelligence .

Довольно иронично, что Apple рекламировала концепцию «более персонализированной Siri» задолго до Google, но затем отозвала рекламу и заявила, что для совершенствования всезнающей Siri потребуется время. С появлением Gemini Apple может сделать гораздо больше, и меня это очень радует. Но больше всего я хочу, чтобы Apple исправила приложение «Быстрые команды».

Столько упущенного потенциала

Приложение «Быстрые команды» — один из самых недооцененных уголков вашего iPhone . Это мощный инструмент, который удивит вас невероятным разнообразием многоэтапных задач, которые он может выполнять. А теперь, когда в приложение интегрирован Apple Intelligence , оно может проделывать невероятно крутые трюки.

Одним нажатием кнопки приложение может сделать скриншот видео, воспроизводимого на экране, определить фильм или сериал и сообщить, где его можно посмотреть онлайн. Достаточно одного касания, чтобы превратить скриншот в воспоминание с настраиваемыми поисковыми тегами, кратким описанием контента и URL-адресом источника в приложении «Заметки».

Эти задачи, выполняемые с помощью ИИ, могут обрабатываться ChatGPT или даже собственными встроенными моделями Apple, работающими полностью в автономном режиме. Вы видите огромный потенциал, не так ли? Что ж, на этом радужная картина заканчивается. Создание ярлыков в одноименном приложении — это сложная задача для новичков.

Даже для опытных пользователей создание длинной автоматизации — это испытание терпения. Система скриптов с её переменными и нечётким потоком управления довольно запутанна. Вам почти наверняка придётся прочитать длинное объяснение, чтобы разобраться в них. И даже после этого вы запутаетесь, когда начнёте создавать ярлыки.

Вся система основана на кодах и ключевых словах, о существовании которых вы даже не догадаетесь. И только если вы найдете конкретное приложение, в котором нужно выполнить задачу, вы поймете: «О, есть связанное с этим действие». Почему бы не использовать ChatGPT для описания шагов и просто повторить их в приложении «Ярлыки»?

Что ж, я бы хотел сказать, что это работает. Но в реальности ChatGPT запутает вас ещё больше, предлагая расплывчатые шаги и часто вводящие в заблуждение инструкции, которых просто нет в приложении «Ярлыки». Неудивительно, что большинство писем от читателей, которые я получаю, касаются именно «Ярлыков», просьб предоставить инструкции или поделиться прямой ссылкой на iCloud.

Ингредиенты уже здесь.

«Привет, Siri, создай ярлык, который автоматически включает режим фокусировки в 16:00, отключает все уведомления, кроме Slack, и отправляет мне краткое изложение групповых разговоров». Представьте, что вы это говорите, а Siri создает для вас ярлык. В нынешнем состоянии приложения «Ярлыки» (и Siri) это несбыточная мечта.

Но есть и хорошие новости, которые развивают идеи, заложенные в сделке с Gemini по Siri. У Apple уже есть система, позволяющая Siri и Apple Intelligence взаимодействовать с приложениями. Проще говоря, встроенный ИИ знает, какие действия он может совершать внутри приложений, не открывая их.

«Благодаря Apple Intelligence и усовершенствованиям App Intents, Siri будет предлагать действия вашего приложения, чтобы помочь людям узнать о его функциях, а также получит возможность выполнять действия внутри приложений и между ними», — поясняет Apple.

Gemini уже умеет это делать, и не только в собственных приложениях Google (таких как Gmail или Календарь), но и в сторонних приложениях, например, WhatsApp. Вы можете просто попросить Gemini выполнить задачу, и он сделает это, как описано. Siri тоже умеет. Технически, конечно.

Но на самом деле мне нужна система «переход от разговора к действию», реализованная в приложении «Ярлыки». Или, точнее, пусть Siri создает ярлыки напрямую с описаниями на естественном языке. При наличии соответствующей структуры это не должно вызвать особых проблем.

Я считаю, что Siri пока представляет собой большую проблему, не из-за её способности понимать язык и рассуждать, которая значительно уступает тому, что вы видите в ChatGPT или Gemini. Или же Apple может предложить агента, который поможет создавать и изменять ярлыки с помощью текстовых или голосовых команд.

Мы уже живем в эпоху, когда ИИ-агенты позволяют редактировать видео с помощью голоса на телефонах, создавать веб-сайты, мини-игры и многое другое. Имея прочную основу (или основы), у Apple есть прекрасная возможность наконец-то отдать должное Shortcuts, просто упростив рабочий процесс.

Более удачная (и более амбициозная) идея.

Я только что наткнулся на последнее объявление от Replit. Компания анонсировала инструмент на основе искусственного интеллекта, который может создать полностью функциональное приложение и разместить его в App Store — всего лишь с помощью текстового описания. Это почти как воплотить приложение в жизнь силой мысли.

Идея амбициозна, но не каждый пользователь iPhone хочет возиться с проверкой и публикацией приложения в магазине Apple. Однако приложениям типа Shortcuts определённо может пойти на пользу что-то подобное. Достаточно взглянуть на перспективное Android-приложение Nothing.

Компания недавно запустила инструмент под названием Playground — набор инструментов на основе искусственного интеллекта, позволяющий легко описать приложение и создать его . Это платформа без необходимости написания кода, которая работает исключительно на вашем телефоне. Вам не нужно иметь дело со сложными инструментами для создания приложений на настольном компьютере.

Эти мини-приложения можно распространять среди сообщества, и вы можете свободно выбрать одно из них на общедоступной панели управления и настроить его по своему вкусу. Google, с другой стороны, предлагает аналогичный инструмент под названием Opal для создания веб-приложений с использованием Gemini.

Apple может позаимствовать эту концепцию и позволить пользователям создавать ярлыки, которые можно мгновенно превратить в экземпляр приложения. У Shortcuts уже есть широкое глобальное сообщество, особенно там, где пользователи делятся полезными автоматизациями в виде ссылок на iCloud.

Однако для многих пользователей настройка этих ярлыков может быть проблематичной, особенно если они хотят их персонализировать. Ярлык, который можно использовать как мини-приложение и который позволяет создавать диалоговые окна (и настраивать их), может стать настоящим прорывом.

Вместо того чтобы полагаться на сторонние приложения, работающие на облачном сервере или привязанные к модели подписки, пользователи могут просто выполнить задачу с помощью ярлыков (маскирующихся под приложения). Ключевое преимущество заключается в том, что эти ярлыки могут работать как полностью в автономном режиме, так и с использованием защищенных частных облачных вычислительных ресурсов Apple для задач, выполняемых с помощью искусственного интеллекта.

С появлением Gemini возможности становятся безграничными. Судя по Android, пользовательский опыт на iPhone кардинально изменится. Но если Apple сможет провести аналогичную модернизацию приложения «Ярлыки» с использованием искусственного интеллекта, это не только решит давнюю проблему, но и даст пользователям iPhone уникальное преимущество, недоступное на уровне нативных приложений смартфонов.

Статья "Gemini — это здорово, но я хочу, чтобы Apple сначала исправила Shortcuts" впервые появилась на Digital Trends .