В начале 20 века Уильям Хой, один из самых выдающихся игроков в бейсболе среди глухих, научил свою команду американскому языку жестов (ASL), чтобы общаться на поле, не выдавая своих намерений соперникам. Это наследие продолжает жить, и теперь, с помощью новых технологий, общение стало еще более доступным.
Согласно статистике, около 70 миллионов людей по всему миру используют различные жестовые языки, но лишь небольшая часть общества понимает их. Это создает трудности в повседневной жизни, например, при заказе еды в ресторане или общении на социальных мероприятиях. Чтобы устранить этот барьер, команда из Южной Кореи разработала умные кольца, которые переводят движения пальцев в текст.
В отличие от старых устройств, которые требовали сложных проводных подключений, новые кольца работают по беспроводной технологии, позволяя пользователям использовать естественные движения рук. Они также имеют эластичный дизайн, что делает их удобными для разных размеров пальцев. Каждое кольцо работает на сменной батарее, которая обеспечивает до 12 часов работы.
Флюентные пользователи жестового языка могут общаться со скоростью 100-150 жестов в минуту, что сопоставимо с разговорной речью. Чтобы избежать пауз в общении, разработчики внедрили систему автозаполнения, которая предугадывает следующее слово на основе уже выполненных жестов, создавая фразы и предложения на лету.
Кольца обучены на 100 распространенных слов из ASL и Международного жестового языка (ISL) и показали более 88% точности в тестах, даже среди пользователей без опыта. Это шаг к более "бесшовному взаимодействию" между знающими и незнающими жестовый язык.
Существуют и другие устройства, которые переводят жестовый язык в текст или речь, но многие из них требуют индивидуальной настройки, что ограничивает их использование. Например, WearSign использует сенсоры для захвата электрической активности мышц во время жестов, но такие устройства часто требуют значительных усилий для обучения.
Чтобы решить эти проблемы, команда разработала кольца, которые отслеживают движения семи основных пальцев, исключая мизинцы и большие пальцы. Каждое кольцо сделано из эластичного материала и выглядит как полупрозрачный пластырь. Внутри находятся акселерометры, которые фиксируют движения, такие как сгибание и удерживание.
Кольца передают сигналы на устройство, которое обрабатывает данные и поддерживает хронологию каждого движения, чтобы избежать путаницы в переводе. Система сопоставляет жесты с базой данных из 100 знаков ASL и ISL, обеспечивая высокую точность даже для новичков.
Хотя кольца все еще находятся на стадии экспериментов, они могут стать полезными в других областях, таких как виртуальная и дополненная реальность, бесконтактные интерфейсы и отслеживание движений рук в реабилитации.