Desarrollo de un videojuego educativo para el mejoramiento de la enseñanza y aprendizaje del lenguaje de señas en los alumnos de primer y segundo grado del Instituto de Educación Especial Camilo Gallegos para personas con discapacidad auditiva.

Abstract

El presente proyecto está orientado al desarrollo de un videojuego que permita mejorar el proceso de enseñanza y aprendizaje del lenguaje de señas para los alumnos de primer y segundo grado del Instituto de Educación Especial Camilo Gallegos, ubicado en la ciudad de Ambato. El videojuego está dividido en dos partes, la primera parte consta de un minijuego el cual tiene como objetivo que los alumnos aprendan las señales del alfabeto ecuatoriano, al ingresar se puede apreciar dos opciones aprender y evaluar, la opción de aprender despliega un menú que contiene todas las letras del alfabeto, al seleccionar una letra se muestra un texto e imagen con la letra y seña a realizar. La segunda opción dentro del minijuego alfabeto consta de un contador de tiempo para hacer la señal que se muestre en pantalla. La segunda parte del videojuego se denomina aventura, el objetivo de esta parte del videojuego es mover por medio de señas en la herramienta Leap Motion o teclado al personaje principal conocido como zero, atravesando obstáculos, superando enemigos y recolectando pistas, las cuales permitirán descubrir el mensaje final sobre el tesoro que busca dicho personaje. Este proyecto se guiará en la metodología Huddle, para la implementación del videojuego se utilizó los IDE's Visual Studio, Anaconda y Unity para la plataforma del sistema operativo Windows, a su vez para el movimiento de los enemigos y obstáculos se utilizó la librería TensorFlow combinada con el lenguaje de programación C#. Finalmente, se usó la herramienta Leap Motion con su SDK Leap Motion Orion y redes neuronales implementadas en el lenguaje de programación mencionado anteriormente.