Систему распознавания языка жестов разработала учёная из Евразийского национального университета, сообщает корреспондент «Хабар 24».
Уникальный проект создан на основе искусственного интеллекта. Он распознаёт жесты рук и переводит их в текст на казахском языке. Это помогает человеку с нарушением слуха общаться с другими людьми.
- Если показать какой-то жест, он может перевести в реальном времени в текст. Наша система адаптирована под любого пользователя. В реальном времени люди смогут добавить свои слова в систему и дальше ей пользоваться.
Пока система знает только 50 слов на языке жестов. Но преподаватель факультета информационных технологий Нурзада Амангельды постепенно пополняет её словарный запас: обращается за помощью к сурдопереводчикам, иногда сама учит искусственный интеллект новым жестам. Над проектом женщина трудится пять лет, полностью он будет готов в следующем году.
Нурзада Амангельды, преподаватель факультета информационных технологий ЕНУ:
- Для реализации надо собрать видеобазу, 3 тысячи жестовых слов на казахском, русском языках. Получается, их надо будет обучать, проверять, тестировать и вот, большой объём работы стоит. Далее, можно применить готовые синтезаторы, после чего можно будет переводить текст в речь.
Разработка, по словам учёной, позволит людям с нарушениями слуха свободно общаться с окружающими. А ещё они смогут получать услуги различных организаций без помощи переводчиков. Аналогов этому проекту в нашей стране нет.
Нурзада Амангельды, преподаватель факультета информационных технологий ЕНУ:
- Наша система поможет им обучаться, внедряться, ходить в магазины, обращаться в ЦОН, полицейские участки, к судьям. Мы хотим убрать этот барьер, который стоит между обычным сообществом и сообществом глухонемых.
В Казахстане сегодня живут около 200 тысяч неговорящих людей. Каждый день они сталкиваются с различными барьерами. В обществе глухих о новом проекте уже знают, говорят, он поможет облегчить жизнь тех, кто вынужден общаться на языке жестов.
Жангельды Бекбатыров, вице-президент общества глухих Казахстана:
- Государством выделено 60 часов в год для лиц с инвалидностью по слуху на услуги сурдопереводчиков, но этого недостаточно. Новая система может разгрузить эту проблему, потому что он основан на искусственном интеллекте, и он постоянно будет развиваться. Язык жестов на месте не стоит, он постоянно обновляется.
На свою научную разработку Нурзада Амангельды получила авторское свидетельство и уже опубликовала три статьи в мировых журналах с высоким рейтингом. А в скором, женщина планирует коммерциализировать проект. Для этого она направила заявку для участия в конкурсе Фонда науки Казахстана.
Авторы: Рауль Габитов, Ырыстанбек Оспанов, Марат Диханбаев
