Reconocimiento del lenguaje de signos mediante el uso de sensores inerciales

Objetivo

Reconocimiento de lenguaje de signos. Apoyo comunicación.

Resultados

Sistema de traducción automática de lenguajes de signos, dando la posibilidad de reconocer los distintos signos y formar frases y palabras para su traducción o reproducción.

Reconocimiento del lenguaje de signos mediante el uso de sensores inerciales

El objetivo era el reconocimiento de lenguaje de signos mediante guantes sensorizados y sensores inerciales.

Mediante el análisis de la información recibida de ambos sensores, se realiza un reconocimiento automático de los signos representados por el usuario en tiempo real.

A través de diversas técnicas de procesamiento de señal e inteligencia artificial es posible segmentar las señales temporales para un posterior reconocimiento de patrones.

El guante utilizado en este caso de uso está formado por 14 sensores flexibles que permite caracterizar la pose de la mano.

Las principales características del sistema son la Identificación de signos, representación y “Text to Speech” (audio), el uso de sistema de aprendizaje automáticos y la optimización mediante algoritmos genéticos.

Esta misma aproximación y tecnología también puede ser utilizada para facilitar la comunicación de personas con importantes limitaciones físicas y del habla.