123
ИТ и электроника Новости

В ТПУ создают «карманного» сурдопереводчика для слабослышащих

Магистранты Института кибернетики Томского политехнического университета (ТПУ) Виталий Видман и Александра Репецкая разрабатывают мобильное приложение-переводчик на язык жестов, которое позволит людям с нарушениями слуха свободнее общаться с окружающими. Также приложение можно будет использовать в качестве универсального словаря для обучения: с его помощью слабослышащие смогут осваивать специальные термины и изучать мировую художественную литературу, сообщает пресс-служба вуза.

20160317_Surdoperevodchik_8518Приложение станет посредником в общении с собеседниками, имеющими дефекты слуха. Программа будет моментально переводить звучащую речь на язык жестов и выводить анимацию на экран смартфона.

«Получается, это мобильный сурдопереводчик. Человек будет говорить в микрофон гаджета, а приложение преобразует речь в текстовый формат, после чего воспроизведет на жестовом языке», — пояснила Репецкая.

Разработчики уже создали прототип приложения. Пока оно представляет собой небольшой словарь: при вводе «знакомых» программе слов на клавиатуре персонаж на экране показывает их при помощи жестов. По словам студентов, сейчас перед ними стоит важная задача: включить в программу информацию о синтаксисе жестового языка. После этого вопрос запуска приложения станет вопросом времени.

Барьеры для безбарьерной среды, или сложности диалога глухих и слышащих в России

«Мы понимаем, что жестовый язык, как и любой другой, имеет свои особенности: устойчивые словосочетания, специфические особенности разных групп. Особое внимание в этом языке уделяется грамматическому строю. Именно поэтому следующий этап работы мы будем осуществлять вместе с профессиональными сурдопереводчиками», — отметил Видман.

Также в приложение «встроена» дактильная (пальцевая) азбука. Она используется в тех случаях, когда нужно передать фамилии, названия улиц и городов, которые невозможно передать с помощью языка жестов.

По словам научного руководителя проекта, заведующего кафедрой оптимизации систем управления Максима Иванова, приложение также поможет в обучении людей с нарушениями слуха: «Программа будет помогать в изучении новых жестов. В повседневном общении человек использует лишь ограниченный набор и поэтому может не знать каких-то слов. Мы загрузим в приложение обширный словарь, который будет включать и специальную терминологию. Просматривая жестовый перевод, люди с нарушениями слуха смогут изучать новые слова».

«Яндекс» создал приложение для глухих и слабослышащих

Разработка позволит слабослышащим познакомиться с литературными произведениями: «В этом смысле приложение будет особенно полезным. Проблема в том, что глухой человек, когда читает текст, он его не понимает. Ведь у него очень ограниченный словарный запас. Поэтому, большим плюсом будет возможность адаптировать какие-то известные произведения. Тогда человек сможет не просто прочитать их, встретив массу незнакомых слов, а действительно понять, просмотрев через приложение», — прокомментировала возможность практического применения разработки сурдопереводчик Анна Попелло.

Студенты говорят, что главная цель их работы — разрушение коммуникационного барьера. «Мобильное приложение будет всегда под рукой. При встрече с человеком, который не слышит, любой сможет с ним полноценно общаться», — подчеркнул Видман.

Об авторе

Валерия Щеголевская

Валерия Щеголевская

Главный редактор Russian IT World