SciELO - Scientific Electronic Library Online

 
vol.26 issue74Project management model for IT consulting SMEs in Bogotá, based on agile frameworksComparative Methods for Solving Optimal Power Flow in Distribution Networks Considering Distributed Generators: Metaheuristics vs. Convex Optimization author indexsubject indexarticles search
Home Pagealphabetic serial listing  

Services on Demand

Journal

Article

Indicators

Related links

  • On index processCited by Google
  • Have no similar articlesSimilars in SciELO
  • On index processSimilars in Google

Share


Tecnura

Print version ISSN 0123-921X

Abstract

PLAZAS LOPEZ, Jimmy Alejandro; GUTIERREZ LEGUIZAMON, Juan José; SUAREZ BARON, Marco Javier  and  GONZALEZ SANABRIA, Juan Sebastián. Reconocimiento de lengua de señas colombiana mediante redes neuronales convolucionales y captura de movimiento. Tecnura [online]. 2022, vol.26, n.74, pp.70-86.  Epub Sep 23, 2022. ISSN 0123-921X.  https://doi.org/10.14483/22487638.19213.

Contexto:

Este articulo presenta el diseño de un modelo predictivo computacional que facilita el reconocimiento de la lengua de señas colombiana (LSC) en un entorno hotelero y turístico.

Método:

Se aplicaron técnicas de inteligencia artificial y redes neuronales profundas en el aprendizaje y la predicción de gestos en tiempo real, los cuales permitieron construir una herramienta para disminuir la brecha y fortalecer la comunicación. Se implementaron algoritmos de redes neuronales convolucionales sobre captura de datos en tiempo real. Se capturó movimiento mediante cámaras de video de dispositivos móviles; así, se obtuvieron las imágenes que forman el conjunto de datos. Las imágenes se utilizaron como datos de entrenamiento para un modelo computacional óptimo que puede predecir el significado de una imagen recién presentada.

Resultados:

Se evaluó el rendimiento del modelo usando medidas categóricas y comparando diferentes configuraciones para la red neuronal. Adicional a esto, todo está soportado con el uso de herramientas como Tensorflow, OpenCV y MediaPipe.

Conclusiones:

Se obtuvo un modelo capaz de identificar y traducir 39 señas diferentes entre palabras, números y frases básicas enfocadas al sector hotelero, donde se logró una tasa de éxito del 97,6 % en un ambiente de uso controlado.

Agradecimientos:

Universidad Pedagógica y Tecnológica de Colombia (UPTC).

Keywords : ambiente hotelero; analítica de datos; aprendizaje profundo; comunicación; discapacidad fonoauditiva; lengua de señas colombiana; redes neuronales.

        · abstract in English     · text in Spanish     · Spanish ( pdf )