Недорогое умное кольцо показывает будущее ввода языка жестов на телефонах

Сегмент умных колец значительно повзрослел за последние пару лет. Мы вступили в эпоху миниатюрных датчиков, готовых к ультразвуковому мониторингу артериального давления . Такие компании, как Circular, используют другой подход с использованием двух датчиков для измерения уровня артериального давления и даже планируют провести анализ тенденций уровня глюкозы к следующему году.

Однако определение здоровья остается преобладающей областью применения умных колец . Теперь эксперты Корнеллского университета разработали платформу «умного кольца», которая может непрерывно отслеживать американский язык жестов в режиме реального времени и отправлять его в качестве входных данных на компьютеры и смартфоны.

Названный SpellRing, он может распознавать весь 26-буквенный диапазон английского алфавита. Это кольцо, которое можно носить на большом пальце, оснащено динамиком и микрофоном. Вместе они позволяют передавать туда и обратно звуковые волны, генерируемые движением руки, в то время как гироскоп измеряет угловые данные.

Доступность для всех

Хотя эта идея уже звучит как крупная победа в области доступности, стоимость может еще больше ускорить ее принятие. Прототип комплекта, разработанный командой, стоит около 30 долларов, но они ожидают, что цена упадет еще больше, когда он перейдет на этап массового производства.

Напечатанное на 3D-принтере кольцо размером примерно с четверть монеты использует специальный алгоритм глубокого обучения для понимания сонара, создаваемого встроенными датчиками. В ходе анализа добровольцы смогли произнести около 20 000 слов из английского лексикона.

При тестировании среди людей, находящихся на ранних стадиях изучения ASL, а также среди опытных тестировщиков, SpellRing показал точность до 92% при преобразовании знаков руки в текст. «ASL — это очень сложный визуальный язык», — говорит Хюнчул Лим, ведущий автор статьи, подробно описывающей SpellRing, добавляя, что сейчас они сосредоточены на настройке алгоритмов для понимания слов и фраз.

Потенциал, которому нужно время, чтобы созреть

Согласно исследовательской работе, это первое носимое устройство, которое объединяет систему инерциальных датчиков с акустикой, чтобы обеспечить удобство дактилоскопического ввода ASL в реальном времени. В ходе испытаний команда продемонстрировала, как его можно использовать для поиска в Интернете на телефоне, управления навигацией по карте и ввода текста в заметках.

Команда SpellRing не продвигает его как универсальное решение, по крайней мере, в его нынешнем виде. Вместо этого они продвигают идею быстрого и доступного инструмента ввода текста со своим набором преимуществ.

«В частности, дактилоскопия ASL может быть значительно быстрее, чем набор текста на виртуальной клавиатуре смартфона», — отмечается в исследовательском документе , который будет представлен на конференции Ассоциации вычислительной техники по человеческому фактору в вычислительных системах в Японии в следующем месяце.

Команда надеется и дальше развивать свою работу, добавив поддержку жестов и способность распознавать слова и фразы. Что касается аппаратного обеспечения, они надеются разместить все ключевые компоненты, включая промежуточный датчик (который в настоящее время установлен на отдельной подключаемой плате) на одной унифицированной плате.

Впоследствии в комплект можно встроить изогнутую батарею и в итоге превратить прототип в нечто похожее на готовое смарт-кольцо, подобное тем, что предлагают Oura или Samsung. Команда также планирует параллельную разработку и интеграцию с очками дополненной реальности, чтобы жесты рук можно было отслеживать наряду с интерпретацией на основе зрения, что обеспечивает еще более плавное общение.