Проекты

Краткое описание

Русский жестовый язык (РЖЯ) является естественным языком, используемым для коммуникации людьми с нарушениями слуха, проживающими на территории Российской Федерации и, частично, на территории ряда стран – бывших республик Советского Союза. Согласно Всероссийской переписи населения 2010 г., число носителей РЖЯ составляет на территории Российской Федерации около 120.5 тыс. человек. Однако проблема поддержки коммуникаций между глухими и слышащими гражданами России не может быть признанной решенной. Это объясняется как острой нехваткой переводчиков РЖЯ, так и отсутствием систем компьютерного сурдоперевода требуемого качества. Особенно это касается систем распознавания жестовой речи (от глухому к слышащему). Поэтому, настоящий проект, направленный на разработку информационного, программного и алгоритмического обеспечения сбора, обработки, нормирования, хранения и обучения жестам РЖЯ для поддержки коммуникаций глухих и слышащих граждан России, является актуальным и социально-значимым.
В процессе реализации проекта, будут решены следующие задачи:
1. Сбор и систематизация видеофайлов жестов в имеющихся словарях русского жестового языка.
2. Разработка алгоритмического и программного обеспечения распознавания траекторий движения и конфигураций отдельных компонент жестов глухих, заданных в форме видеофайлов, а также посредством 2-D камеры.
3. Разработка и наполнение базы жестов РЖЯ.
4. Разработка системы визуализации жестов.
5. Разработка серверного приложения электронной платформы по распознаванию и поддержке РЖЯ.
6. Разработка мобильных приложений.
7. Тестирование электронной платформы по распознаванию и поддержке РЖЯ.
8. Доработка электронной платформы по распознаванию и поддержке русского жестового языка по результатам тестирования.
Освещение проекта будет осуществляться через пресс-службу НГТУ. Кроме того, носители РЖЯ будут информированы о созданном программном продукте в профильных группах в соцсетях, через организации ВОГ, фонд «Со-единение».
Реализация данного проекта даст возможность создания "полного" переводчика русского жестового языка (от глухого к слышащему и наоборот).

Цель

1. Разработка информационного, программного и алгоритмического обеспечения сбора, обработки, нормирования, хранения и обучения жестам русского жестового языка для поддержки коммуникаций глухих и слышащих граждан.

Задачи

1. Сбор и систематизация видеофайлов жестов в имеющихся словарях русского жестового языка.
2. Разработка алгоритмического и программного обеспечения распознавания траекторий движения и конфигураций отдельных компонент жестов глухих, заданных в форме видеофайлов, а также посредством 2-D камеры.
3. Разработка и наполнение базы жестов РЖЯ.
4. Разработка системы визуализации жестов.
5. Разработка серверного приложения электронной платформы по распознаванию и поддержке русского жестового языка.
6. Разработка мобильных приложений.
7. Тестирование электронной платформы по распознаванию и поддержке русского жестового языка.
8. Доработка электронной платформы по распознаванию и поддержке русского жестового языка по результатам тестирования.

Обоснование социальной значимости

Русский жестовый язык является естественным языком, используемым для коммуникации людьми с нарушениями слуха, проживающими на территории Российской Федерации и, частично, на территории ряда стран – бывших республик Советского Союза. Согласно Всероссийской переписи населения 2010 г., число носителей РЖЯ, к которым принадлежит и руководитель настоящего проекта, составляет на территории Российской Федерации около 120.5 тыс. человек. Несмотря на значительное число носителей, официальное признание РЖЯ получил сравнительно недавно, после подписания 30 декабря 2012 года президентом России В.В.Путиным Федерального закона «О внесении изменений в статьи 14 и 19 Федерального закона "О социальной защите инвалидов в Российской Федерации"». В соответствии с внесенными изменениями РЖЯ определяется как «язык общения при наличии нарушений слуха и (или) речи, в том числе в сферах устного использования государственного языка Российской Федерации», в новой редакции закон также гарантирует людям с нарушениями слуга услуг по переводу в органах государственной власти и местного самоуправления в объеме 40 часов в год. Однако в реальности этого объема оказывается крайне не достаточно, кроме того, в стране ощущается острая нехватка переводчиков русского жестового языка. Изучение жестовых языков – второго типа естественных человеческих языков – представляет собой в настоящее время одно из важных и активно развивающихся направлений лингвистической науки. Исследование языков, в которых информация передается в трехмерном пространстве, требует решения сложных задач, связанных, в частности, с разработкой новых методов сбора и расшифровки языкового материала. Существующие словари и автоматизированные системы перевода жестовых языков в подавляющем большинстве организованы по принципу «от слова к жесту». Примерами таких систем являются Сурдофон , Surdoserver (Россия), международный словарь жестовых языков Spreadthesign, HandTalk(Бразилия), Delege и IDGS(Германия) и другие. Проекты по созданию программных систем распознавания жестового языка, позволяющих по форме жеста находить его значение, пока единичны и до конца не реализованы (как, например американский проект MotionSavvy).
Поэтому, разработка информационного, программного и алгоритмического обеспечения сбора, обработки, нормирования, хранения и обучения жестам РЖЯ для поддержки коммуникаций глухих и слышащих граждан России является актуальной и социально-значимой задачей.

География проекта

Общероссийский проект. Ориентирован на глухих граждан России, всех заинтересованных сторон в использовании русского жестового языка, в том числе, и зарубежных пользователей. На первом этапе реализации проекта его апробация будет проводиться в Институте социальных технологий и реабилитации Новосибирского государственного технического университета.

Целевые группы

1. Люди с ограниченными возможностями здоровья
2. Молодежь и студенты