211service.com
La cámara permite que las personas ciegas naveguen con gestos
Eelke Folmer y Vinitha Khambadkar piensan que las personas ciegas podrían prescindir de sus bastones blancos y, en cambio, navegar con una cámara alrededor del cuello que les brinda orientación hablada en respuesta a los gestos de las manos.
Folmer y Khambadkar, investigadores de la Universidad de Nevada, presentaron la tecnología la semana pasada en el Simposio ACM sobre tecnología y software de interfaz de usuario. Conocida como la interfaz gestual para la percepción espacial remota, que abrevian como ESENCIA , el sistema utiliza un sensor Kinect de Microsoft para analizar e identificar objetos en su campo de visión. GIST le permite extraer información de su entorno, dice Folmer.
La investigación de Nevada se basa en las ideas del MIT Proyecto Sixth Sense , un esfuerzo de realidad aumentada en el que un dispositivo portátil proyecta información en el mundo físico y permite al usuario interactuar con él agitando, señalando o haciendo otros gestos con las manos. Pero, por el contrario, GIST recopila datos en respuesta a los gestos con las manos como una forma de aumentar la percepción espacial severamente reducida de las personas ciegas.
Por ejemplo, si alguien que usa GIST hace un signo de V con los dedos índice y medio, el dispositivo identificará el color dominante en el área encapsulada. Si el usuario cierra el puño, el sistema identificará si una persona está en esa dirección y qué tan lejos está. (Vea el breve video de demostración de los investigadores a continuación).
Sin embargo, los gestos no están destinados a ser el único medio de interacción con GIST, gracias a la capacidad de Kinect para reconocer objetos, rostros y habla. Como explica Folmer: le dices al sensor algo como 'Esta es mi taza'. La pones sobre la mesa y dices: 'Oye, ¿dónde está mi taza?'. Dirá que está justo frente a ti. El siguiente truco consiste en averiguar cómo seguir rastreando el objeto cuando se aleja o se pone detrás del usuario.
Los investigadores también planean ver si GIST podría decirle efectivamente a sus usuarios quién está frente a ellos, al comparar los rostros de las personas que detecta con una pequeña base de datos que el usuario podría configurar con comandos de voz. Si eso no funciona, dice Folmer, los investigadores podrían probar un sistema que identifique a las personas según la forma de su cuerpo.
GIST pronto se beneficiará del nuevo sensor Kinect 2.0, que mejora el seguimiento del original y permite un reconocimiento preciso de los dedos, en lugar de simplemente las manos. Sin embargo, la advertencia es que el nuevo Kinect es más grande y voluminoso, lo que lo hace inadecuado para un uso prolongado alrededor del cuello.
Pero Folmer cree que es solo cuestión de tiempo hasta que haya sensores similares a Kinect lo suficientemente pequeños como para caber en los teléfonos inteligentes; de hecho, el proceso ya está en marcha (consulte Cámaras con detección de profundidad desde la cabeza hacia los dispositivos móviles). Y, en general, Folmer cree que a medida que los dispositivos informáticos convencionales se hacen más pequeños, serán muy útiles para las personas con problemas de visión porque dichos dispositivos dependerán de interfaces, como el habla, que los ciegos han estado utilizando durante décadas.