The object of research, development or design (in Russian) : Қазақ ым тілі (тану, генерация)

The object of research, development or design (in Kazakh) : Казахский жестовый язык (распознавание, генерация).

Aim of work (in Russian) : Қазақ ым тілінің элементтерін автоматты тану дәлдігін арттыруға мүмкіндік беретін модельдерді, әдістерді, алгоритмдерді және программалық өнімді ұсыну.

Aim of work (in Kazakh) : Представление моделей, методов, алгоритмов и программных обеспечении позволяющих повысить точность автоматического распознавания элементов казахского жестового языка.

Методы исследования (на русском) : Жұмыста қойылған міндеттерді шешу үшін машиналық оқыту әдістері, кескіндерді өңдеу әдістері және объектілерді тану, кескіндерді өңдеу әдістері қолданылды.

Методы исследования (на казахском) : Для решения поставленных задач в работе были использованы методы машинного обучения, методы обработки изображений и распознавание объектов, методы предобработки изображений.

Obtained results and novelty (in Russian) : Разработан мультимодальный подход, объединяющий пространственные и артикуляционные признаки с учетом структурных особенностей казахского языка жестов; предложен комбинированный адаптивный метод предварительной обработки изображений, основанный на обнаружении шума в данных; адаптирован алгоритм распознавания языка жестов на основе сети LSTM1024, что позволило эффективно обучать временные зависимости и динамические движения; реализован метод CSLR (Continuous Sign Language Recognition), обеспечивающий распознавание непрерывных жестов по последовательностям кадров.

Obtained results and novelty (in Kazakh) : Қазақ ым тілінің құрылымдық ерекшеліктерін ескере отырып, кеңістіктік және артикуляциялық белгілерді біріктіретін мультимодальды тәсіл қалыптастырылды; деректер жиынындағы шуды анықтауға негізделген біріктірілген бейімделгіш кескіндерді алдын ала өңдеу әдісі ұсынылды; LSTM1024 желісіне негізделген ым тілін тану алгоритмі бейімделіп, уақытша тәуелділіктер мен динамикалық қимылдарды тиімді үйренуге мүмкіндік берді; CSLR (Continuous Sign Language Recognition) әдісі үздіксіз қимылдарды кадрлық тізбектер бойынша тануды қамтамасыз етті

The main constructive and technical economic indicators (in Russian) : -

The main constructive and technical economic indicators (in Kazakh) : -

Level of implementation (in Russian) : Результаты проекта способствуют популяризации и стандартизации казахского жестового языка. Разработанные технологии и модели могут быть применены в научных исследованиях, образовательных процессах и при создании мультимодальных систем автоматического перевода.

Level of implementation (in Kazakh) : Жобаның нәтижелері қазақ ым-ишара тілін оқытуда білім беру мекемелерінде, сондай-ақ есту қабілеті бұзылған адамдармен жұмыс істейтін аудармашылар мен мамандардың қызметінде пайдаланылуы мүмкін. Құрылған ресурс мобильді құрылғыларға бейімделген, бұл оның кең аудиторияға қолжетімділігін қамтамасыз етеді.

Efficiency (in Russian) : Результаты проекта способствуют популяризации и стандартизации казахского жестового языка. Разработанные технологии и модели могут быть применены в научных исследованиях, образовательных процессах и при создании мультимодальных систем автоматического перевода.

Efficiency (in Kazakh) : Жобаның нәтижелері қазақ ым-ишара тілін танымал етуге және стандарттауға ықпал етеді. Әзірленген технологиялар мен модельдер ғылыми зерттеулерде, білім беру үдерістерінде және ым-ишара тілінің автоматты аудармасының мультимодальды жүйелерін құру кезінде қолданылуы мүмкін.

Field of application (in Russian) : образование (детские сады, школы, колледжы, универсвитеты), государствтвенные и частные объекты который имеют социальную значимость (государственные учреждения, цоны, больницы, поликлиники, акиматы, полицейские участки, суды, гипермаркеты, МСБ) , физические лица (родители и родственники глухонемых)

Field of application (in Kazakh) : білім беру (балабақшалар, мектептер, колледждер, университеттер), әлеуметтік маңызы бар мемлекеттік және жеке меншік объектілер (мемлекеттік мекемелер, әлеуметтік орталықтар, ауруханалар, емханалар, әкімдіктер, полиция бөлімшелері, соттар, гипермаркеттер, ШОБ), жеке тұлғалар (саңыраулар мен мылқаулардың ата-аналары мен туыстары)