Como idea para proyecto tengo el reconocer mediante Kinect el lenguaje de señas o de signos de los sordomudos y que la computadora en un principio responda con algún mensaje en la pantalla y como objetivo sería que responda con voz a la seña que haga la persona. Para esto sería necesario utilizar:
El Kinect como sensor de movimiento y aprovecharía su funcionamiento para detectear la profundidad
El SDK de Kinect para programarlo y poder reconocer las señas.
Una red neuronal para detectar cada una de las señas con precisión y calidad.
Proceso
Todo el proceso consistiría en que en la pantalla de la computadora se muestre una simulación de una persona la cual copiaría los movimientos que realice la persona frente al kinect, esto con el fin de comprobar que se detecta a la persona y podría servir para proyectos posteriores; pero se haría mas enfoque en el movimiento de las manos para poder tomar el patron de la seña que se realiza y así poder identificarlos y despues que el software pueda producir alguna respuesta cuando detecte de que seña se trata. El Kinect detectaría los movimientos de las manos y la red neuronal procesaría el movimiento de las manos hasta reconocer el patron y así producir una respuesta
Mi idea final para proyecto ya con el reconocimiento de gestos y la respuesta con voz sería algo como esto:
No comments:
Post a Comment