Aplicación web de reconocimiento de Lengua de Señas Peruana para mejorar el aprendizaje en estudiantes con discapacidad auditiva del nivel primario, Chiclayo - 2024

Abstract

En la actualidad las instituciones educativas inclusivas constituyen el núcleo primordial de la educación de un país, generando oportunidades de aprendizaje y participación en los estudiantes, como es el caso del colegio Karl Weiss de Chiclayo, cuyo plan de desarrollo estudiantil contempla la inclusión social educativa, la cual es importante para que los estudiantes con ciertas discapacidades reciban buena educación académica de calidad. Sin embargo, se evidencia específicamente que la educación primaria no es la más óptima para los estudiantes con pérdida auditiva, como consecuencia del uso de metodologías de aprendizaje con un enfoque tradicional basado en la demostración y la práctica repetitiva de la Lengua de Señas Peruana (en adelante LSP) que brindan los docentes, la ausencia de medios tecnológicos adaptados a la inclusión educativa y las sesiones de aprendizaje que reciben los estudiantes por parte de los profesionales especializados en la interpretación de la LSP, los cuales forman parte del grupo CEBE “La Purísima” de Chiclayo. El propósito de esta investigación fue desarrollar una aplicación web que permita reconocer la LSP con la finalidad de mejorar el aprendizaje en estudiantes con discapacidad auditiva, utilizando la biblioteca MediaPipe Hand para JavaScript y su funcionalidad para detectar los 21 puntos referenciales de la mano, además de la herramienta Tensorflow.js para entrenar modelos previamente guardados de las señas que servirán como base en la predicción. Además, se abordó el reconocimiento de contenidos relacionados al alfabeto, los números y operaciones matemáticas como son la suma, resta, multiplicación y la división. Se utilizó la investigación pre-experimental, aplicando un pretest y un postest, la primera permite evaluar la enseñanza impartida por los profesores e intérpretes del grupo CEBE “La Purísima” y la segunda permite evaluar los resultados obtenidos al aplicar el reconocimiento de la LSP mediante la aplicación web propuesta, tomando una muestra por conveniencia de siete estudiantes del nivel primario con discapacidad auditiva del colegio Karl Weiss de Chiclayo. Tras la intervención de la aplicación web, se evidencia que el 100% de los estudiantes tarda hasta 5 segundos en realizar las señas de los números y el alfabeto, el 57,1% de estudiantes practican casi todos los días las señas del alfabeto y los números en su casa, mientras que el 42,9% lo practica todos los días, además el 42,9% de estudiantes practican casi todos los días las operaciones matemáticas básicas y el 57,1% lo practican todos los días.

Currently, inclusive educational institutions constitute the core of a country's education system, generating learning and participation opportunities for students. This is the case at the Karl Weiss School in Chiclayo, whose student development plan includes educational and social inclusion, which is crucial for students with certain disabilities to receive a quality academic education. However, it is evident that primary education is not the most suitable for students with hearing loss. This is due to the use of traditional learning methodologies based on demonstration and repetitive practice of Peruvian Sign Language (LSP) by teachers, the lack of technological resources adapted to inclusive education, and the limited LSP interpretation sessions students receive from professionals at the CEBE "La Purísima" group in Chiclayo. The purpose of this research was to develop a web application that recognizes Peruvian Sign Language (LSP) to improve learning for students with hearing impairments. The application utilizes the MediaPipe Hand library for JavaScript and its functionality to detect the 21 reference points on the hand, as well as the Tensorflow.js tool to train pre-stored models of the signs that will serve as the basis for prediction. The study also addressed the recognition of content related to the alphabet, numbers, and mathematical operations such as addition, subtraction, multiplication, and division. A pre-experimental design was used, employing a pretest and a posttest. The pretest evaluates the teaching provided by the teachers and interpreters of the CEBE group "La Purísima," while the posttest assesses the results obtained by applying LSP recognition through the proposed web application. A convenience sample of seven primary school students with hearing impairments from the Karl Weiss School in Chiclayo was used for the study. Following the intervention of the web application, it is evident that 100% of the students take up to 5 seconds to perform the signs for numbers and the alphabet, 57.1% of students practice the signs for the alphabet and numbers at home almost every day, while 42.9% practice them every day. In addition, 42.9% of students practice basic mathematical operations almost every day and 57.1% practice them every day.