Казахстанка разработала систему распознавания языка жестов на казахском

Систему распознавания языка жестов разработала учёная из Евразийского национального университета, сообщает корреспондент «Хабар 24».

Уникальный проект создан на основе искусственного интеллекта. Он распознаёт жесты рук и переводит их в текст на казахском языке. Это помогает человеку с нарушением слуха общаться с другими людьми.

- Если показать какой-то жест, он может перевести в реальном времени в текст. Наша система адаптирована под любого пользователя. В реальном времени люди смогут добавить свои слова в систему и дальше ей пользоваться.

Пока система знает только 50 слов на языке жестов. Но преподаватель факультета информационных технологий Нурзада Амангельды постепенно пополняет её словарный запас: обращается за помощью к сурдопереводчикам, иногда сама учит искусственный интеллект новым жестам. Над проектом женщина трудится пять лет, полностью он будет готов в следующем году.

Нурзада Амангельды, преподаватель факультета информационных технологий ЕНУ:

- Для реализации надо собрать видеобазу, 3 тысячи жестовых слов на казахском, русском языках. Получается, их надо будет обучать, проверять, тестировать и вот, большой объём работы стоит. Далее, можно применить готовые синтезаторы, после чего можно будет переводить текст в речь. 

Разработка, по словам учёной, позволит людям с нарушениями слуха свободно общаться с окружающими. А ещё они смогут получать услуги различных организаций без помощи переводчиков. Аналогов этому проекту в нашей стране нет. 

Нурзада Амангельды, преподаватель факультета информационных технологий ЕНУ:

- Наша система поможет им обучаться, внедряться, ходить в магазины, обращаться в ЦОН, полицейские участки, к судьям. Мы хотим убрать этот барьер, который стоит между обычным сообществом и сообществом глухонемых.

В Казахстане сегодня живут около 200 тысяч неговорящих людей. Каждый день они сталкиваются с различными барьерами. В обществе глухих о новом проекте уже знают, говорят, он поможет облегчить жизнь тех, кто вынужден общаться на языке жестов.

Жангельды Бекбатыров, вице-президент общества глухих Казахстана:

- Государством выделено 60 часов в год для лиц с инвалидностью по слуху на услуги сурдопереводчиков, но этого недостаточно. Новая система может разгрузить эту проблему, потому что он основан на искусственном интеллекте, и он постоянно будет развиваться. Язык жестов на месте не стоит, он постоянно обновляется.

На свою научную разработку Нурзада Амангельды получила авторское свидетельство и уже опубликовала три статьи в мировых журналах с высоким рейтингом. А в скором, женщина планирует коммерциализировать проект. Для этого она направила заявку для участия в конкурсе Фонда науки Казахстана.

Авторы: Рауль Габитов, Ырыстанбек Оспанов, Марат Диханбаев