Для виртуальной реальности: ученые научили нейросеть распознавать слова, написанные пальцем в воздухе

29 июня 2020 | 06:00
Для виртуальной реальности - ученые научили нейросеть распознавать слова, написанные пальцем в воздухе - фото 1

Ученые из Университета Аризоны создали алгоритм, который распознает слова, написанные пальцем в воздухе. Такой метод создали для шлемов виртуальной реальности.

Об этом говорится в статье, которую представили на Fourth Workshop on Computer Vision for AR / VR.

Ученые выбрали два устройства, которые можно использовать для распознавания текста: рукавица с измерительным прибором на кончике указательного пальца и прибор для отслеживания траектории и устройство Leap Motion, который отслеживает движение кисти и передает эти данные на компьютер.

Leap Motion это небольшой USB-устройство, которое создает невидимое поле для взаимодействия. Он отслеживает движение предметов в невидимом поле с большой точностью и позволяет человеку бесконтактно взаимодействовать с компьютером.

Используя эти устройства, человек должен просто написать слова пальцем в воздухе. Устройства считывают данные о траектории, затем нейросеть сравнивает слова, которые ввела человек, с теми, которые есть в ее базе данных, и показывает слово на экране.

Ученые проверили работу алгоритма на распознавании рукописного текста с 210 словами в базе данных. Для английского языка точность распознавания 79,7% при использовании Leap Motion и 78,5% - при использовании перчатки. Алгоритм лучше распознает китайский язык: точность 87,4% - для Leap Motion и 83,4% - для перчатки.

В то же время в алгоритма пока есть сложности с распознаванием различных почерков. Над этим ученые будут работать в дальнейшем.

Ранее сообщалось, что разработчик Владимир Алексеев из Германии с помощью нейросети создал мини-фильм «Пустая комната». Сценарий, музыку и внешность актеров разработал искусственный интеллект.

Слабое место коронавируса: поможет ли новое открытие ученые в борьбе с ковид
16 января 2021
Морозы в Украине: как завести машину в непогоду - видео
16 января 2021
Нацбанк укрепил курс гривни к доллару
16 января 2021
Погода на сегодня: в Украине ожидается похолодание и гололедица - карта
16 января 2021
16 января 2021: какой сегодня праздник, День ангела и приметы - видео
16 января 2021
Взрыв из другой галактики: на Земле зафиксировали колоссальный выброс энергии
15 января 2021