lucasconde22/mudeitor

Aplicación que permite traducir lengua de señas a audio y texto.

Mudeitor - Traductor de lengua de señas

Aplicación para dispositivos Android que permite traducir lengua de señas a audio y texto.

Objetivo

El objetivo de este proyecto es crear la primera aplicación capaz de lograr una eficiente tradución de la lengua de señas a distintos idiomas, tales como español o inglés. Esto permitirá que las personas sordas puedan counicarse sin problemas con el resto de la sociedad, rompiendo con una dura barrera que los desplaza de la misma.

¿Como funciona?

La aplicación, desarrollada en Java para dispositivos Android, captura imágenes mediante la utilización de OpenCV2 (https://opencv.org) y luego las compara con un dataset mediante la utilización de TensorFlow Lite (https://www.tensorflow.org/lite) el cual realiza una detección de objetos, que detecta la mano y la seña, para dar como resultado la letra/palabra que el usuario está comunicando. Luego, esta es mostrada por pantalla y, en el caso de quererlo, reproducida mediante una voz. Podés descargarla ingresando al siguiente enlace: https://drive.google.com/u/1/uc?id=1cJLuYD6JhbA-pUIzwYXGucmHT0mFDkf-&export=download&confirm=t&uuid=e866c119-ee10-4f5c-b3c3-74846cdb422e&at=ALAFpqz0yQRVAw94SN9oMjHOeEXp:1666709143005

¿Hay una página web?

Si, la hay. La misma describe de manera informativa el proyecto y posibilita su descarga, además, posee una sección de comentarios que nos permitirá saber la opinión de los usuarios y tener una noción cuales son las funciones que quieren que agreguemos en el futuro. Si te interesa visitarla: https://mud3itor.000webhostapp.com/

¿Como está formado el equipo de desarrollo?

El equipo de desarrollo está integrado por 5 integrantes y un colaborador. El "Project Manager", Lucas Conde, es el encargado del desarrollo de la aplicación, administrar la base de datos y distribuir las diferentes tareas a los miembros del grupo. Por otro lado, también tenemos a Juan Lopez y Bruno Typek, los cuales se encargan del diseño de la página web y la toma de imágenes para la misma. También está Martin Castillo, quien también se encarga de la página web y de la redacción de la documentación (es posible leerla en el apartado de "Documentos") y de los textos visibles en la página. Por útlimo, tenemos a Maia Vaccarili que se encargó de tomar imágenes para el dataset y colaborar con distintas tareas a lo largo del desarrollo. Como mención especial, queremos destacar la colaboración de Facundo Uthurralt, que se encargó de diseñar todos los logos y fondos, y de los profesores, Leila Coronel y Rodrigo Daiqui, que ayudaron a lo largo del proyecto con ideas y apoyo.

¿Como podés contactarnos?

Si querés contactarnos podés hacerlo mandando un mail a [email protected] o llamando / mandando un mensaje al [phone].

Retorno

Decidimos abandonar este proyecto en noviembre de 2022 debido a la finalización de las clases. Sin embargo, estoy emocionado de retomar su desarrollo con el objetivo de competir en el Solve for Tomorrow 2023.