Pesquisadores na Coreia do Sul desenvolveram um sistema vestível que usa sete anéis inteligentes para ler os movimentos dos dedos e das mãos e traduzir a linguagem de sinais americana e a linguagem de sinais internacional em texto. O objetivo é facilitar a comunicação entre quem assina e quem não assina, sem a necessidade de um intérprete humano separado.
De acordo com o estudopublicado sexta-feira na revista Science Advances, o sistema reconheceu de forma confiável 100 palavras ASL e ISL durante o teste. Ele também teve um bom desempenho com usuários que o sistema nunca tinha visto antes e não exigiu recalibração para cada pessoa. Como o sistema detecta palavras em sequência, ele pode produzir traduções em nível de frase sem treinamento further em gramática.
ASL e ISL são as línguas cotidianas da mais de 72 milhões pessoas surdas e com deficiência auditiva. No entanto, a maioria das pessoas que ouvem não conhece nenhuma palavra nessas línguas ou tem um conhecimento muito básico. Essa lacuna torna certas tarefas, como fazer um pedido em um restaurante ou pedir ajuda, muito mais difíceis.
Um conceito de como os anéis funcionam no mundo actual.
Os protótipos existentes de tradutores de linguagem de sinais geralmente dependem de luvas volumosas que podem desviar a atenção ou bloquear o movimento pure da mão ou causar desconforto ao usuário, o que limita a adaptação actual das palavras. As tecnologias baseadas em câmeras podem funcionar bem em ambientes controlados, mas muitas vezes são limitadas aos locais onde uma câmera pode ser instalada com uma linha de visão clara, escreveram os pesquisadores.
Para resolver esses problemas, os pesquisadores projetaram anéis sensores para cada dedo que podem capturar movimentos precisos e a posição dos dedos, ao mesmo tempo que permitem que as mãos se movam naturalmente. Os anéis podem detectar sinais que envolvem movimento, como as palavras para “dança”, “mosca” e “sol”, e sinais que permanecem imóveis, como “eu” e “você”.
“Esses avanços sugerem que [the device could enable] sistemas de tradução pública sem barreiras para usuários invisíveis e interfaces de assistência diária irrestritas”, escreveram os autores no estudo.
Os autores são afiliados à Universidade Yonsei, à Universidade Hankuk de Estudos Estrangeiros e ao Instituto Coreano de Ciência e Tecnologia, entre outros. Embora a tecnologia ainda seja experimental, os autores escreveram que a tecnologia tem potencial para aliviar as dificuldades de comunicação. A ideia subjacente também poderia ajudar a melhorar os controlos de outros sistemas, como realidade digital ou aumentada.
“Além da tradução de linguagem de sinais, a arquitetura modular, sem fio e do tipo anel (tradutores de linguagem de sinais do tipo anel conectados sem fio) também pode ser estendida a outras aplicações orientadas por gestos, como controle de realidade digital ou aumentada, interfaces de dispositivos sem toque ou sistemas de monitoramento de reabilitação onde o rastreamento refinado do movimento da mão é essencial”, escreveram eles.
