Самое недооцененное приложение Apple может скоро измениться, и вам это понравится
Приложение Apple Shortcuts — мечта опытного пользователя . Я думаю, что это одна из самых недооцененных функций, которые вы можете найти на iPhone и даже Mac. Если вы еще не использовали его, оно позволяет вам выполнить многошаговую задачу за один раз или даже автоматически запускать определенные действия. Одно из моих любимых сочетаний клавиш — это мгновенная генерация QR-кода сети Wi-Fi вместо произнесения сложного пароля.
У меня есть еще один, который автоматически удаляет скриншоты после 30-дневного периода. В моей библиотеке есть несколько, которые активируют режим «Не беспокоить» на определенный временной интервал, превращают любую веб-страницу в PDF, даже прикрепляют окна Mac и активируют мои смарт-устройства, когда я прихожу домой.
Все это звучит удобно, но создание этих сочетаний клавиш — нелегкая задача. Поток пользовательского интерфейса и предустановки действий могут подавить технически подкованных пользователей, когда дело доходит до создания собственных автоматизаций. У Apple может быть удобное для пользователя решение благодаря ИИ, и вы можете получить его в этом году.
У Apple есть готовый фундамент
По данным Bloomberg , Apple готовит обновленную версию приложения Shortcuts, которая будет включать в себя ИИ. «Новая версия позволит потребителям создавать эти действия с использованием моделей Apple Intelligence», — говорится в отчете.
Модели ИИ могут быть собственными для Apple, что означает, что они лучше подходят для интеграции с системными инструментами и приложениями, чем сторонняя модель ИИ. Возьмем, к примеру, интеграцию Siri-ChatGPT.
Чат-бот OpenAI может справиться с широким спектром задач, которые не может выполнить Siri, но ChatGPT не может взаимодействовать с другими приложениями и системными инструментами на вашем iPhone. Это означает, что он также не может помочь вам в создании комбинаций клавиш между приложениями.
Ходят слухи, что на WWDC 2025 Apple представит собственные модели ИИ и откроет их разработчикам приложений. Идея состоит в том, чтобы позволить разработчикам изначально интегрировать функции на основе ИИ в свои приложения, не беспокоясь о проблемах безопасности.
Microsoft уже использует внутренние модели ИИ для широкого спектра возможностей Copilot на ПК с Windows. Более того, компания также предлагает разработчикам свое семейство открытых моделей ИИ Phi для создания приложений.
Apple просто нужно пойти по стопам Microsoft. С принятием разработчиками основ искусственного интеллекта Apple и расширением их компанией до приложения Shortcuts, будет намного проще создавать многошаговые рабочие процессы. Как так? Ну, просто посмотрите на Gemini на телефонах Android.
Shortcuts нуждается в модернизации с помощью искусственного интеллекта
Представьте себе, что вы просто рассказываете Siri о рабочем процессе, и он превращается в ярлык. Это в общих чертах то, на что уже способны инструменты ИИ, но вместо того, чтобы создавать правило на будущее, они просто немедленно выполняют текущую задачу. С ИИ в ярлыках все должно выглядеть так:
«Привет, Siri, создай команду, которая автоматически отвечает на все сообщения, которые я получаю в выходные дни о своей недоступности, и скажи им связаться со мной в понедельник. Запускай действие, когда я скажу слова « меня нет на месте ».
С обработкой естественного языка на моделях ИИ это осуществимо. Посмотрите не дальше, как Gemini работает на устройствах Android, особенно на тех, где есть обработка Gemini Nano на устройстве. С помощью голосовой команды Gemini может погрузиться в данные вашего рабочего пространства и выполнить работу в Gmail, Docs и других подключенных приложениях.
Он даже может обрабатывать рабочие процессы в сторонних приложениях, таких как WhatsApp и Spotify. Список продолжает расти, и по мере того, как возможности, такие как Project Mariner и Astra, развертываются через Gemini Live , будут открываться новые возможности.
С обновленным приложением Shortcuts Apple просто нужно правильно настроить обработку голоса и преобразовать подсказки в команды, которые можно выполнять. Партнер Apple, OpenAI, уже предлагает функцию под названием Operator , которая может автономно обрабатывать задачи в Интернете.
Создание цепочки команд в мобильных приложениях, работающих локально, должно быть проще и менее рискованно по сравнению с просмотром веб-сайтов. С языковыми возможностями ChatGPT, уже заложенными в основу Apple Intelligence, я не удивлюсь, если приложение Shortcuts следующего поколения будет использовать их по полной программе.
О, эй, вот пример.
Говоря о ChatGPT и его интеграции с iOS, уже существует проект с открытым исходным кодом, который может дать приблизительное представление о том, как голосовые команды превращаются в действия на iPhone. Рунак Джейн, инженер iOS в OpenAI, создал агента ИИ, который преобразует аудиоподсказки в действия на iPhone.
Джейн говорит, что демонстрационное видео создано на основе модели ИИ OpenAI GPT-4.1, и оно может работать в нескольких приложениях с помощью одной голосовой команды. Например, пользователи могут управлять фонариком, сдвинув вниз центр управления, нажать и отправить изображение одному из своих контактов или отправить текстовое сообщение с подробностями поездки и заказать такси.
Демонстрация Джейна — явный признак того, что интеграция модели ИИ на системном уровне или выполнение ею задач в приложениях осуществимы. Подобный конвейер можно интегрировать для превращения этих голосовых команд в ярлыки вместо их немедленного выполнения.
Я просто надеюсь, что когда Apple внедрит ИИ в Shortcuts и позволит пользователям создавать собственные процедуры с помощью команд на естественном языке, это обеспечит пользователям возможность гибко изменять их по своему усмотрению.
Я считаю, что наилучшим подходом было бы показать пользователям цепочку команд и позволить им вносить коррективы, прежде чем подсказка превратится в ярлык.