Desarrollo de un prototipo portátil para el reconociemiento de señales dactilológicas mediante visión artificial

Abstract

La inserción social y laboral de las personas sordomudas se complica debido al desconocimiento del lenguaje de señas por parte de personas oyentes, por tal motivo se propuso una alternativa para la comunicación bidireccional entre personas sordomudas y oyentes con el desarrollo de un prototipo portátil de reconocimiento de señales dactilológicas por medio de visión artificial, el cual se basó en SVM (Máquina de Soporte Vectorial). El hardware consta de una Pi Camera de 5 MP (Mega Pixeles), una Raspberry Pi 3 con un procesador de 2GHZ que permite el tratamiento de imágenes y el trabajo con varios softwares y gracias a su tamaño hace que el prototipo sea compacto, una pantalla táctil HD (High Definition ) de 7” con conexión nativa hacia la Raspberry. El software consta de dos partes, las mismas que trabajan conjuntamente para dar como resultado el funcionamiento del prototipo, el programa entrenador crea un banco de imagenes que sirve de apoyo para que la aplicación por medio de la cámara en video en vivo capture las señales dactilológicas y gracias al SVM las compare y prediga formando palabras como vectores, mismas que luego se reproducen por medio del audio. Se validó la efectividad del prototipo mediante encuestas de satisfacción realizadas al INAL (Instituto Nacional de Audición y Lenguaje) y FENASEC (Federación Nacional de Personas Sordas del Ecuador). De las cuales los resultados obtenidos fueron un 83% de aceptación satisfactoria sobre el uso del prototipo.