СИСТЕМАТИЧЕСКИЙ ОБЗОР ПЕРЕВОДА КАЗХСКОГО ЯЗЫКА ЖЕСТОВ В РЕЧЬ С ИСПОЛЬЗОВАНИЕМ ДИНАМИЧЕСКОГО РАСПОЗНАВАНИЯ ЖЕСТОВ

Аннотация

Этот обзор рассматривает важность казахского жестового языка (КЖЯ) в качестве ключевого средства коммуникации для сообществ людей с нарушениями слуха в Казахстане. Несмотря на его важную роль, автоматический перевод КЖЯ в устную речь все еще остается недостаточно развит. Целью этого систематического обзора является изучение последних достижений в технологиях распознавания динамических жестов для перевода КЖЯ в речь. Исследование сосредоточено на применении моделей машинного обучения, в частности свёрточных нейронных сетей (CNN) и рекуррентных сетей с длительной краткосрочной памятью (LSTM), для распознавания жестов КЖЯ и оценки их эффективности в системах перевода в реальном времени. Методология исследования включает в себя анализ существующих исследований по этим моделям, выявление их сильных сторон, ограничений и эффективности в распознавании жестов для КЖЯ. Полученные результаты показывают, что модели CNN и LSTM обладают значительным потенциалом для перевода в реальном времени, однако остаются проблемы, такие как ограниченные наборы данных и обобщаемость моделей. Данное исследование вносит важный вклад в повышение доступности и содействие в социальной инклюзии, предлагая рекомендации для будущих исследований в этой области.