Apple представила новые функции специальных возможностей на основе искусственного интеллекта для iPhone, Mac и Vision Pro.

Компания Apple анонсировала масштабное обновление функций доступности для iPhone, iPad, Mac, Apple Vision Pro и Apple TV, многие из которых работают на базе Apple Intelligence. Компания заявляет, что обновления призваны сделать устройства более полезными для пользователей с нарушениями зрения, слуха, опорно-двигательного аппарата и трудностями в обучении, сохраняя при этом ориентированный на конфиденциальность подход Apple к искусственному интеллекту.

Новые функции для людей с ограниченными возможностями будут внедрены позже в этом году в рамках предстоящих обновлений программного обеспечения Apple.

Apple внедряет искусственный интеллект в функции обеспечения доступности.

Одно из самых значительных обновлений касается функций VoiceOver и «Лупа» для пользователей с нарушениями зрения или слепотой. Apple заявляет, что новая функция VoiceOver «Исследователь изображений» теперь может предоставлять более подробные описания фотографий, отсканированных документов, счетов и другого визуального контента с помощью Apple Intelligence. Пользователи также смогут задавать уточняющие вопросы о том, что видит камера, с помощью кнопки «Действие» на iPhone.

Функция «Лупа» также получит визуальные описания на основе искусственного интеллекта и голосовое управление. Пользователи смогут отдавать голосовые команды, например, «увеличить масштаб» или «включить фонарик», во время использования этой функции.

Apple также улучшает голосовое управление, используя взаимодействие на естественном языке. Вместо запоминания точных названий кнопок пользователи теперь могут описывать то, что видят на экране, с помощью таких фраз, как «нажмите на фиолетовую папку» или «откройте путеводитель по ресторанам». Компания заявляет, что это должно упростить навигацию по приложениям для пользователей с ограниченными физическими возможностями.

Сгенерированные субтитлы и улучшенные функции чтения.

Apple также представляет функцию автоматического создания субтитлов для видео без подписей. Эта функция использует встроенное распознавание речи для создания субтитлов в приватном режиме для личных видео, потокового контента и клипов, которыми делятся друзья или родственники. Сгенерированные субтитлы будут работать на iPhone, iPad, Mac, Apple TV и Apple Vision Pro.

В очередном обновлении расширен функционал функции «Чтение для людей с ограниченными возможностями», предназначенной для пользователей с дислексией или слабым зрением. Теперь эта функция будет поддерживать более сложный контент, такой как научные статьи с колонками, таблицами и изображениями. Также добавляются сгенерированные искусственным интеллектом резюме и встроенные инструменты перевода.

Apple Vision Pro получает поддержку управления глазами в инвалидных колясках.

Одно из наиболее примечательных объявлений касается Apple Vision Pro . Apple заявляет, что пользователи совместимых альтернативных систем привода инвалидных колясок вскоре смогут управлять электрическими инвалидными колясками с помощью системы отслеживания взгляда Vision Pro. Первоначально эта функция будет поддерживаться системами Tolt и LUCI в США.

Компания также анонсировала дополнительные обновления для обеспечения доступности Vision Pro, включая распознавание мимики, улучшенное управление Dwell Control и инструменты для снижения укачивания у пассажиров в движущихся транспортных средствах.

Почему эти функции важны

Доступность уже давно является одним из главных приоритетов Apple, но последние обновления показывают, как искусственный интеллект все чаще становится частью вспомогательных технологий. Вместо того чтобы позиционировать ИИ только как инструмент повышения производительности или чат-бот, Apple интегрирует его в реальные функции обеспечения доступности, такие как визуальное восприятие, навигация, помощь при чтении и общение.

Компания также продолжает уделять особое внимание обработке данных на устройстве и конфиденциальности, особенно с учетом того, что функции, генерируемые искусственным интеллектом, становятся все более распространенными на потребительских устройствах. Apple заявляет, что новые функции доступности будут запущены позже в этом году во всей ее экосистеме. Ожидается, что компания поделится более подробной информацией во время WWDC, где, вероятно, продемонстрирует, как Apple Intelligence обеспечивает эти обновления для iOS, iPadOS, macOS и visionOS.