Muchas personas víctimas de ictus ven mermada su capacidad de comunicación oral. Muchas de ellas sienten terror o pánico a enfrentarse a sus rutinas diarias por miedo de no ser capaces de expresarse o ser objetivo de burla.

A través de este ejercicio, simulamos una escena rutinaria donde la usuaria va a la frutería a comprar fruta. La usuaria deberá comunicarse (oralmente) con el frutero para pedirle peras, manzanas y naranjas, ya sea un número concreto de piezas (1-10) o kilogramos (1-10).

Algunos ejemplos:
- "Quiero 4 manzanas"
- "Me pone 8 naranjas?"
- "Quisiera 4 kilos de peras"

Una vez pedidas todas las frutas, el frutero saludará amablemente a la usuaria y se dará por finalizado el ejercicio.

Requisitos:

Dispositivo Android con conexión a Internet
Auriculares. Imprescindible para evitar la retroalimentación altavoz/micrófono

Detalles técnicos del proyecto:

Desarrollado en Unity para Android y Google Cardboard
Modelos 3D descargados y adaptados al proyecto
IBM Watson - Text to speech. Las frases de la usuaria se procesan en la nube a través del servicio IBM Watson, obteniendo una transcripción del texto hablado. Tras obtener la transcripción, se detectan palabras clave para dirigir la conversación.

Usabilidad y escalabilidad:

Funcional en Android e iOS, lo que lo hace accesible a una gran mayoría de población.
Gracias a Erika (@gf_eri) y su motivadora charla, vemos la necesidad de crear espacios seguros para la rehabilitación de pacientes. Gracias a IBM Watson, somos capaces de dirigir una conversación en lenguaje natural en una experiencia inmersiva, ya sea una escena en una frutería, en un bar o en una oficina.
Las escenas y las conversaciones pueden personalizarse a cualquier medida, haciendo posible un mejor entrenamiento y recuperación del paciente

Ejercicio de entrenamiento de la comunicación oral screenshots