Крымский студент научил нейросеть распознавать язык жестов

7 Сентябрь 2023 350
Фото пресс-службы КФУ.
Фото пресс-службы КФУ.

Студент Крымского федерального университета им. Вернадского разработал систему распознавания языка жестов с текстовой расшифровкой при помощи нейросети, сообщили в пресс-службе Мининформа РК.

«Проект включает три системы распознавания жестов, одна из которых построена на основе нейросети. Посредством камеры программа распознает жесты и выводит буквы на экран. Система способна распознавать более 30 знаков», - рассказали в Мининформе.

Как уточнили в КФУ, для обучения нейросети студент использовал собственную базу данных, в которой на каждую букву приходится от 100 до 200 примеров жестов от разных людей, с разных камер и ракурсов. «Для разработки использовалась система, состоящая в сравнении координат - костяшек руки. Также использовались специальные функции, дескрипторы многоугольника, который составляла рука. Путем математики и алгоритмов был создан датасет, при помощи которого можно идентифицировать жест», - пояснили в пресс-службе университета.

Крымская ПРАВДА.