Углубленная интерпретация Vision Pro: 18 деталей, о которых Apple не рассказала на пресс-конференции

Представьте, в какой позе вы будете читать эту статью еще лет через 5?

Сидеть за компьютерным столом и листать страницы мышкой? Провести пальцем по экрану, стоя в метро?

Все еще в гарнитуре, удобно лежа на диване, перед вами висит 100-дюймовый виртуальный большой экран, ваши руки небрежно лежат на коленях, а веб-страница прокручивается легким движением пальца.

Появление Apple Vision Pro превратило эту сцену из научно-фантастического воображения в реальность обозримого будущего, и мы стоим на поворотном этапе от эры мобильных вычислений к эре космических вычислений.

Высокая цена Vision Pro предназначена не для того, чтобы быть продуктом для широкой публики, что также означает, что нам трудно лично испытать аудиовизуальный опыт следующей эпохи.

Тем не менее, мы можем найти некоторые детали дизайна системы в официальном курсе Apple по разработке, который может помочь нам понять разницу между «пространственными вычислениями» и мобильным телефоном и компьютером, к которым мы привыкли.

Прежде чем мы начнем, давайте вкратце разберемся, что же это за устройство Vision Pro:

Vision Pro имеет 12 внешних камер и 5 датчиков, которые могут захватывать реальное пространство перед вами, записывать информацию о глубине и преобразовывать ее в пространственное изображение.

Затем через встроенный экран micro-OLED со сверхвысоким разрешением (23 миллиона пикселей для обоих глаз) вы сможете видеть изображения, приближенные к реальному миру.

Vision Pro не является ни AR, ни чистой виртуальной реальностью. Он смешивает виртуальную и реальность. Все реальные изображения собираются и визуализируются в режиме реального времени, поэтому вы можете легко переключаться между виртуальными и реальными изображениями. Вот почему Apple определяет его как устройство для пространственных вычислений — ваша комната, все ваше пространство — это интерфейс.

После выяснения этого момента мы относительно легко можем понять логику Apple при проектировании системы.

Начнем с первого интерфейса, который вы видите, когда включаете Vision Pro.

космический интерфейс

Оконная конструкция трансформируется из плоскости

На первый взгляд, интерфейс Vision OS не выглядит таким научно-фантастическим, как весь операционный интерфейс в таких фильмах, как «Железный человек», это очень простое окно.

Это преднамеренный дизайн Apple, который он называет «фамильярным». Это связано с тем, что оконный интерфейс представляет собой интерактивный интерфейс, который большинство людей может сразу понять и быстро приступить к работе.Вы будете инстинктивно нажимать на поле поиска, чтобы искать и находить каталог категорий в столбце, и практически не требует затрат на обучение.

Это особенно важно для совершенно нового интерфейса.

Три основные операции окна

Окно выпрыгнуло из экрана и попало в вашу комнату, и произошли некоторые изменения во взаимодействии.

Apple переработала кнопку закрытия, полосу перетаскивания и кнопку масштабирования, при этом кнопка закрытия и полоса перетаскивания собраны в нижней средней части окна.

Держите глаза на полосе перетаскивания (с отслеживанием взгляда внутри), и одним нажатием вы можете перетащить окно туда, куда вам нужно.

Кнопки масштабирования расположены в углах окон и появляются, когда вы смотрите, те же самые пальцы, которые изменяют размер окон.

Окно, которое меняется вместе с содержимым

Освободившись от ограничений экрана, окно может стать бесконечно большим, пока не заполнит всю комнату на 360 градусов, а также может стать достаточно маленьким, чтобы плавать на вашей ладони.

В настоящее время размер окна должен определяться отображаемым содержимым. Например, при использовании Safari для просмотра веб-страниц окно должно быть тоньше, поэтому Keynote должно быть меньше, а при отображении Keynote или просмотре видео оно должно быть немного крупнее.

Короче говоря, в космосе окна очень гибкие и изменчивые, что является самым большим отличием от плоскостного взаимодействия.

Переработан оконный интерфейс

Внимание пользователя с большей вероятностью будет отвлекаться на пространство, поэтому Apple изменила интерфейс окна, например, разделив панель содержимого и панель операций, чтобы пользователи могли сосредоточиться на содержимом.

При просмотре фильма или отображении Keynote панель управления также отделена и находится ближе к пользователю, чем интерфейс воспроизведения в глубину, чтобы пользователю было легче манипулировать интерфейсом.

Окна, которые движутся вместе с вами

Наголовный дисплей — очень мобильное устройство. Пользователи могут просматривать информацию в разных позах и под разными углами, например, стоя, сидя и лежа. Поэтому окно должно адаптироваться к линии взгляда пользователя.

Вообще говоря, окно будет отображаться прямо перед глазами пользователя.Когда вы лежите на спине, окно будет парить в воздухе и наклоняться к вам.

Кнопка «Домой» на гарнитуре

Пользователи по-прежнему будут носить гарнитуру, чтобы осмотреться или прогуляться. В настоящее время должно ли окно всегда находиться в центре поля зрения пользователя?

Совет Apple: никогда, потому что это может заставить пользователя думать, что он застрял.

Окно должно быть зафиксировано в определенном положении в пространстве, как физический объект, который не меняется в зависимости от направления взгляда пользователя.

Когда пользователю нужно вернуться к содержимому окна, нажмите цифровую головку на Vision Pro, и окно будет повторно зафиксировано перед текущей линией обзора, что эквивалентно кнопке «Домой» на мобильном телефоне. телефон.

Создайте ощущение погружения

Чтобы пользователи могли погрузиться в виртуальный контент из реального мира, Apple предложила эффект под названием «Затемнение» — затемнение яркости за пределами окна, позволяющее пользователям больше сосредоточиться на содержимом в окне.

Например, когда вы пролистываете фотографии или смотрите видео, яркость окружающей среды будет автоматически уменьшаться, давая вам более сильное ощущение погружения.

пространственное картографирование

Создание ощущения погружения, по сути, заключается в том, чтобы убедить мозг пользователя в том, что то, что он видит, реально. Подход Apple заключается в том, чтобы дать виртуальным объектам реалистичное отображение.

Например, когда вы кладете окно на стол, на столе будет слабая тень, а когда вы смотрите фильм в панорамной обстановке, верхняя и нижняя плоскости окна будут иметь небольшое отражение, как обычно. выключите свет, чтобы посмотреть. То же, что и телевизор.

Не стоит недооценивать эти детали, именно эти детали, которые вы можете не замечать, но считать само собой разумеющимися, заполняют «пробел», образовавшийся при встрече виртуального и реальности, позволяя вам погрузиться в нее.

эффективно использовать пространство

Мы рассказали о многих принципах и деталях конструкции, давайте разбавим скучные ощущения практичным применением.

Как упоминалось выше, размер окна в пространстве должен динамически корректироваться в соответствии с содержимым.

Когда вы делаете Keynote, размер окна умеренный, что удобно для вас в работе; при предварительном просмотре Keynote окно становится больше и имеет ощущение объемности, а окружающая яркость будет снижена, чтобы вы погрузились в него. .

А когда вы захотите выступить с речью или репетировать, Keynote войдет в полностью виртуальный сценический интерфейс, и вы встанете посреди сцены и почувствуете ощущение произнесения речи во всех направлениях.

В это время другие пользователи также могут войти в ваше «общее пространство» и послушать вашу речь.Это то, что Apple определяет как «опыт, который могут дать только космические устройства».

Меньше значит больше (делай больше с меньшими затратами)

Как создать ощущение кино? Поставить несколько красных сидений, поставить проектор посередине и сделать несколько аварийных выходов с обеих сторон?

Apple считает, что тонкие блики света на полу и потолке могут создать ощущение реального пространства без необходимости прорисовывать все детали, что является важным принципом дизайна.

Хороший дизайн пространства должен учитывать, как сделать приложение ценным, привлекательным и готовым позволить пользователям «поместить» приложение в свое пространство.

пространственное взаимодействие

то, что вы видите, это то, что вы получаете

В предыдущей статье мы кратко упомянули, как взаимодействовать с интерфейсом пространства, ощущается ли, что все естественно и уместно, чтобы мы не чувствовали существования технологий или железа.

Раньше нам приходилось управлять машиной с помощью кнопок и джойстиков, но в Vision Pro для непосредственного взаимодействия с машиной нужно использовать только глаза, руки и рот.

Сначала поговорим о глазах.

В Vision Pro ваша линия обзора — это ваша мышь.Когда вы проведете взглядом по окну, значки изменят выделение, давая вам обратную связь в реальном времени.

Эти изменения подсветки подобны линиям магнитной индукции, отображающим траекторию движения ваших глаз и всегда напоминающим вам о том, на что вы смотрите.

Поскольку приоритет зрительного взаимодействия очень высок, первая задача всех дизайнов visionOS — радовать глаз.Все кнопки и окна, которые вы здесь видите, будут закруглены, а все грани и углы — стерты.

магия просмотра

Взгляд — это интересное взаимодействие: когда вы смотрите на что-то, это означает, что вы заинтересованы в этом.

Поэтому, когда вы смотрите на элемент, система знает, что вы хотите взаимодействовать с ним, запуская некоторые небольшие функции.

Например, когда вы смотрите в каталог, появляются подробные инструкции, а когда вы смотрите в микрофон, срабатывает ввод Siri.

Это похоже на 3D Touch, когда вы сильно нажимаете на экран iPhone, появляется дополнительное меню.

Отличие в том, что он более естественен и удобен для работы глазами.

магия рук

В 2007 году Джобс представил миру мультисенсорное взаимодействие, увеличивая и уменьшая масштаб фотографий двумя пальцами на iPhone.

Даже сегодня волшебство ваших пальцев остается неизменным.

Apple предоставляет 6 основных жестов, а именно наведение, двойное касание, сжатие, перетаскивание, увеличение и уменьшение масштаба и вращение.

В сочетании с отслеживанием взгляда все взаимодействие становится очень естественным.

Например, если вы хотите увеличить определенную точку на фотографии, вам нужно только смотреть на нее, а затем вытягивать руки.

Когда вы хотите рисовать в пространстве, просто сведите пальцы, смотрите на холст и рисуйте везде, где видите. Это намного проще, чем управление традиционной виртуальной реальностью.

сопоставление сущностей

Взаимодействовать руками удобно, но ложка дегтя в том, что пользователи не могут чувствовать тактильную отдачу.

Чтобы решить эту проблему, Apple сделала соответствующие физические отображения в визуальном и слуховом смысле, создавая у пользователей ощущение реальности, как будто они взаимодействуют с физическими объектами.

Возьмем, к примеру, клавиатуру с очень высокой рабочей частотой. Когда ваш палец скользит по клавиатуре, на клавиатуре возникает эффект подсветки. Звук щелчка клавиатуры iPhone.

В клавиатуре есть и очень футуристическая деталь: при подключении Magic Keyboard по Bluetooth над клавиатурой появляется виртуальное всплывающее окно-напоминание, позволяющее ощутить сочетание реальной виртуальной реальности.

пространственное аудио

Придание направленности аудио

Мы много раз говорили о пространственном звуке, и вот технология пространственного звука наконец-то вышла на сцену — настоящее пространство.

С помощью технологии пространственного звука Apple может восстановить «первоначальный вид» звука: звук должен быть направленным, и где звук, оттуда и будет исходить звук.

Например, когда вы погружаетесь в вид на озеро, из озера доносится звук течения воды, из травы доносится звук насекомых, а из далекого леса время от времени доносится пение птиц.

Все звуки должны быть похожи на реальный мир, что является величайшим значением пространственного звука.

Дайте обратную связь со звуком

Звук также является важной частью интерактивной обратной связи, что отражено и в других продуктах Apple.Как упоминалось выше, при использовании клавиатуры будет слышен стук, а при скольжении фотографии будет легкий щелчок. Звуковой сигнал.

Что касается звука обратной связи, Apple особо подчеркивает, что это звук, который часто слышат пользователи, и дизайнер должен быть к нему равнодушен, иначе он легко наскучит.

сделать картинку со звуком

На пресс-конференции Apple подчеркнула особенность иммерсивного интерфейса: вы можете войти в реальную виртуальную среду и ощутить умиротворение.

Так как же создается этот захватывающий пейзаж? Звукорежиссеры Apple отправились на место, чтобы записать большое количество звуков, убедившись, что они могут записывать звуковые изменения места с утра до ночи.

Но если напрямую использовать живой записанный звук, будет много нежелательных шумов, поэтому дизайнеры используют направленные микрофоны, чтобы отделить нужный звук от шума и сделать его микширование.

Весь процесс похож на рисование: дизайнер расставляет нужные звуки в соответствующих пространственных позициях и в итоге синтезирует умиротворяющую озвучку, способную сделать декорации красивыми и живописными.

начало будущего

Благодаря этим деталям нетрудно увидеть, что Vision Pro или visionOS уже являются хорошо завершенным продуктом, а «пространственные вычисления» — это не иллюзорная научно-фантастическая догадка, а будущее, которое вот-вот наступит.

Vision Pro — это своего рода «телескоп» на пути технологического развития, позволяющий нам заглянуть в уголок будущей жизни.

Но учтите, что это не «ракета» в будущее, и она не может сразу перенести вас в метавселенную в «Первому игроку приготовиться», Apple просто построила самую приличную полку и в качестве наполнения нужно больше контента.

Мы могли бы также с нетерпением ждать, какие изменения произойдут с продуктами и контентом VR под призывом Apple, и как жизнь, к которой мы привыкли, будет разрушена «пространственными вычислениями».

#Добро пожаловать, обратите внимание на официальный публичный аккаунт Айфанер в WeChat: Айфанер (идентификатор WeChat: ifanr), более интересный контент будет представлен вам как можно скорее.

Ай Фанер | Оригинальная ссылка · Просмотреть комментарии · Sina Weibo