Нейроновости
Регионы

Крым обучает языку жестов нейросети

Роботы, общающиеся на человеческом языке жестов
Студент Таврического колледжа разработал систему для распознавания жестового языка

  • Проект включает три системы распознавания жестов, одна из которых основана на нейросети.

  • Денис Щербаков обучал нейросеть на протяжении недели и экспериментировал с разными архитектурами.

  • Студент использовал датасет для обучения нейросети распознаванию дактильной азбуки.

  • Система основана на сравнении координат - костяшек руки и использовании специальных функций.

  • Создан датасет для идентификации жестов с помощью математики и алгоритмов.

  • Программа распознает жесты с помощью камеры и выводит буквы на экран.

  • Система способна распознавать более тридцати знаков на данный момент.

"Для разработки использовалась система, состоящая в сравнении координат - костяшек руки. Также использовались специальные функции, дескрипторы многоугольника, который составляла рука. Путем математики и алгоритмов был создан датасет, при помощи которого можно идентифицировать жест", - добавили в вузе.


Оказывается, в Новосибирске работают по этому же направлению.

Откуда к нам приходят идеи?..