Новый видеословарь облегчит доступ к изучению жестового языка

Пользователям стал доступен бесплатный и общедоступный словарь русского жестового языка (РЖЯ) с видео в высоком качестве и съёмкой с двух ракурсов.

Сбер и SberDevices при участии АНО ДПО «Центр образования и исследования жестового языка» в Международный день глухих запустили видеословарь русского жестового языка (РЖЯ). Сайт уже содержит 400 жестов (что соответствует примерно 660 словам на русском языке) и будет расширяться. Пользователи могут задавать вопросы, предлагать к добавлению новые жесты и исправлять неточности через форму обратной связи. А в скором времени на сайте появится возможность изучать РЖЯ в интерактивном режиме.

Этот бесплатный и общедоступный сайт, адаптированный для смартфонов, будет полезен всем, кто изучает РЖЯ. Видео в высоком качестве и съёмка с двух ракурсов упрощают изучение языка, причём некоторые жесты представлены в нескольких вариантах, что позволяет охватить все нюансы РЖЯ. В словаре приведён контекст использования жеста и его толкование (лексическое значение).

Проект и дальнейшее развитие технологий распознавания жестов позволяют облегчить доступ к изучению жестового языка всем заинтересованным пользователям, расширить возможности лингвистических исследований, а также систематизировать накопленную информацию об особенностях жестов и использовать людям удобный и привычный язык для общения.

Ранее команда SberDevices первой в России опубликовала в открытом доступе самый большой набор данных Slovo для распознавания РЖЯ. Датасет состоит из 20 400 видео в формате Full HD, разделён на 1000 уникальных классов, включая дактильную азбуку (буквы), и записан с участием 194 носителей языка. Также специалисты разработали SignFlow  — семейство моделей русского и американского жестовых языков. Это первые в стране модели для перевода отдельных жестов в слова в режиме реального времени.