Conoce a Sign4all: la primera app traductor de lenguaje de signos

La lengua de signos es un sistema de comunicación esencial para las personas sordas, que desempeña un papel crucial en la promoción de la inclusión en la sociedad moderna y que, al igual que otras herramientas para personas con algún otro tipo de discapacidad, merecen visibilidad para que se trabajen y sean de dominio público.

Al reconocer y apoyar la lengua de signos, se abre un camino hacia la igualdad y la participación plena de todas las personas en diversos ámbitos, y fomentar su uso en la vida cotidiana, así como en empresas y organizaciones, no solo garantiza el acceso a la información y la comunicación, sino que también, enriquece a las entidades, fomenta la colaboración en el equipo y fortalece los valores más humanos de la corporación.

En este post veremos cómo la tecnología y, concretamente, Sign4all, la primera app traductor de lenguaje de signos, están marcando verdaderos hitos para la inclusión.

Conoce Sign4all: la primera app traductor de lenguaje de signos

Es increíble cómo la tecnología está activando el cambio en todas nuestras facetas de la vida y desarrollando mejoras para aspectos sociales que, quizás, no eran tan visibles para el grueso de la sociedad, como puede ser la importancia del lenguaje de signos.

Actualmente, en España, el 98% de las personas sordomudas usan el lenguaje de signos reglado, lo que significa, que, para comunicarse con ellas, todos deberíamos aprenderlo al igual que aprendemos inglés y otro idioma. De hecho, ¿Por qué aprender un idioma extranjero y no otro que nos da la posibilidad de comunicarnos con personas que están mucho más cerca?

Sign4all, la primera app traductor de lenguaje de signos, capaz de reconocer e interpretar en tiempo real el alfabeto de la lengua de signos española, nace del Grupo de Robótica y Visión Tridimensional de la Universidad de Alicante con el objetivo de romper barreras entre sordos y oyentes.

¿Cómo funciona Sign4all?

Gracias a la tecnología deep learning y a diferentes técnicas de visión por computador, esta app capta e interpreta los signos para traducirlos al lenguaje mayoritario.

Para que podamos entender cómo funciona la aplicación para traducir el lenguaje de signos, su mecanismo consiste en capturar a la persona y extraer cada detalle de los movimientos que esta realiza con el esqueleto de los brazos y manos. Después codifica con color azul la parte izquierda del cuerpo y en rojo la parte derecha, manteniendo en todo momento el anonimato del usuario.

Por supuesto, no podemos olvidar que la comunicación efectiva es siempre bidireccional, por lo que la aplicación también funciona a la inversa mediante un avatar virtual que realiza los signos cuando el oyente teclea las palabras en español.

Y lo mejor de todo son dos cosas: primera:  sig4all puede traducir en tiempo real la conversación; y segunda: gracias al bajo coste de la herramienta es accesible a todas las personas que la necesiten cuando no puedan ir acompañadas de un intérprete.

¿Cómo funciona el aprendizaje mediante deep learning?

Como hemos comentado, la primera app traductor de lenguaje de signos se basa en la tecnología deep learning, pero, ¿sabrías decir en qué consiste esta? ¡Atento!

El deep learning, o aprendizaje profundo en español, es una técnica de inteligencia artificial inspirada en cómo funciona el cerebro humano para aprender y reconocer patrones.

Por ejemplo: imagina que estás enseñando a una computadora a identificar gatos en fotos.

En lugar de decirle directamente cómo reconocer a un gato, le das muchas fotos de gatos repetidamente para que asimile su imagen. Así, el sistema comienza a buscar patrones comunes, como formas, colores y texturas, para que, a medida que ve más y más fotos de gatos, ajuste sus conexiones internas (llamadas «neuronas artificiales» o «nodos») y mejore su habilidad para identificar gatos por sí misma.

Al igual que el proceso de aprendizaje de un niño, en el que cada vez se acoplan conceptos más complejos y se generan más conexiones neuronales, en el deep learning se usan capas de estas «neuronas artificiales» para procesar información en niveles cada vez más profundos. Cada capa detecta características específicas y pasa esa información a la siguiente capa para realizar análisis más completos y detallados.

Cuando el sistema ha visto suficientes gatos, es capaz de generalizar y reconocerlos en imágenes que nunca antes había visto, lo que se debe a que ha aprendido a detectar las características esenciales que definen al animal.

Volviendo a Sign4all, que es el tema que nos ocupa, el mecanismo funcionaría igual: cuantos más signos vea y palabras oiga, más capacitado estará para hacer de traductor intérprete entre sordos y oyentes.

Conoce los últimos avances hasta el momento de Sign4all

Ahora, los desarrolladores de esta aplicación traductora de signos, se encuentran trabajando en un proyecto colaborativo con el Grupo de Investigación de Lengua Española y Lenguas Signadas (Griles) de la Universidad de Vigo, quiénes están enriqueciendo la base de datos con la que trabajar en un futuro próximo Sig4all.

Esperamos que te haya resultado interesante este post sobre inclusión, deep learning y revolución digital. ¡Suscríbete a Educa.pro para más formación profesional!