211service.com
Cómo los brazaletes pueden traducir el lenguaje de señas
Un par de mio Los brazaletes con control de gestos y una computadora o teléfono inteligente pueden hacer que sea más rápido y más fácil para las personas con discapacidad auditiva comunicarse usando el lenguaje de señas con aquellos que no lo entienden.
Eso es lo que los investigadores de la Universidad Estatal de Arizona dicen que pueden hacer con un proyecto llamado Cetro . Usan los brazaletes para enseñar al software una variedad de gestos del lenguaje de señas estadounidense; luego, cuando una persona que usa las bandas hace uno de estos signos, se puede comparar con su palabra o frase correspondiente en la base de datos de Sceptre y se muestra como texto en una pantalla.
La esperanza es facilitar la comunicación en situaciones de emergencia en particular, como en el consultorio de un médico o en un hospital, sin depender de la comunicación escrita o, como lo han hecho otras investigaciones sobre el reconocimiento del lenguaje de señas, usando cámaras para reconocer los gestos del lenguaje de señas. A papel sobre el trabajo se presentará en una conferencia de interfaces de usuario inteligentes en marzo.
Los investigadores confiaron en los brazaletes Myo para hacer que Sceptre funcionara porque incluyen una unidad de medición inercial para rastrear el movimiento y sensores de electromiografía para la detección muscular, que se pueden usar para ayudar a determinar las configuraciones de los dedos. Entrenaron un software para reconocer una variedad de gestos de ASL, así como los signos de letras individuales y los números del uno al 10, todos ejecutados por alguien que usaba los brazaletes Myo.
Sceptre, un proyecto de investigación que traduce el lenguaje de señas como texto usando brazaletes Myo, podría funcionar con una computadora o un teléfono inteligente.
Después de que los usuarios entrenaran su software en 20 gestos de ASL diferentes como pizza, feliz y naranja repitiendo cada uno de ellos tres veces, los investigadores descubrieron que Sceptre podía descifrar el signo correctamente casi el 98 por ciento de las veces.
en un video demostrando cómo funciona, Prajwal Paudyal, estudiante de posgrado de la Universidad Estatal de Arizona, coautor del artículo , usa los brazaletes y firma varias cosas diferentes que luego se ilustran en una pantalla de computadora, como toda la mañana, dolor de cabeza y no puede dormir.
Aunque las señales se mostraron como texto en el estudio, una aplicación también podría pronunciarlas en voz alta para facilitar una conversación, dice Paudyal. . Y aunque la demostración de los investigadores mostró el texto en la pantalla de una computadora, a la que se conectaron los brazaletes Myo a través de Bluetooth, Sceptre también podría usarse solo con un teléfono inteligente, algo en lo que los investigadores también están trabajando (Myo admite la transmisión de datos de dos brazaletes a uno teléfono inteligente, pero los investigadores dicen que esto no fue posible cuando realizaron su trabajo inicial).
Idealmente, la persona puede usar esto donde quiera que vaya, dice Paudyal.
Sceptre, un proyecto de investigación de la Universidad Estatal de Arizona, utiliza dos brazaletes Myo para traducir el lenguaje de señas como texto.
Roozbeh Yafari , profesor asociado en el Centro de Tecnologías y Sistemas Remotos de Atención Médica de Texas A&M, realizó un trabajo similar, aunque involucró la construcción de sensores en lugar de usar dispositivos estándar como lo hizo el grupo ASU.
Él dice que hay una serie de problemas que deberían resolverse para que algo como Sceptre funcione para los consumidores. Por lo general, cuando coloca sensores de electromiografía en el cuerpo, el sistema que los usa debe calibrarse a menos que estén exactamente en la misma ubicación en la que estaban anteriormente, dice. También es necesario tener en cuenta las variaciones que ocurren naturalmente en la forma en que las personas firman las mismas cosas. A pesar de estos obstáculos, dice, creo que vamos en la dirección correcta.