Reconhecimento das configurações de mãos

Libras: Língua Brasileira de Sinais

1 Introdução

As línguas de sinais são as principais ferramentas de inclusão social dos surdos.Elas são utilizadas como meio de comunicação, obtenção de informações, educação, etc. A língua de sinais brasileira é chamada LIBRAS.

Ferramentas têm sido desenvolvidas para facilitar a utilização dos meios de comunicação digitais por deficientes auditivos, ex:

● Reconhecimento automático de sinais;

● Avatares animados em sistemas digitais;

Além disso, ferramentas tradutoras podem favorecer a comunicação entre surdos e ouvintes que não compreendem a língua de sinais.

As principais abordagens utilizadas no reconhecimento de sinais são divididas quanto à forma de percepção:

● Abordagem visual;

● Abordagem sensorial;

Abordagem Visual:

● Baseia-se em imagens ou sequencias de vídeo do ator;

● Abordagem não invasiva:

– Não exige sensores acoplados ao ator;

– Mais fácil de ser aplicada em ambientes reais;

● Em alguns casos faz-se uso de acessórios como luvas;

● Maior dificuldade de obtenção das informações de movimento,dedos, entre outros:

– Necessidade de segmentação de imagens, rastreamento, etc;

Abordagem Sensorial:

● Faz uso de sensores acoplados ao corpo do ator:

– Acelerômetros, sensores de uso médico para captura de movimentos, etc;

● Abordagem invasiva:

– Dificulta utilização em ambientes reais;

● Pode causar desconforto ao ator;

● Alguns sensores são disponibilizados a preços altos;

Observações sobre os trabalhos encontrados na literatura:

● Luvas e sensores limitam o uso, geram desconforto;

● Vocabulários restritos e reconhecimento de letras do alfabeto não conferem poder de reconhecimento da língua como um todo;

Artifícios úteis no contexto abordado, mas não para o reconhecimento de todas os sinais/sentenças de uma língua.

2 Abordagem Baseada nos Parâmetros Globais

Parâmetros globais são as primitivas da língua:

● União de parâmetros globais - Sinal

● União de fonemas - Palavra

A estrutura fonética da LIBRAS é composta por cinco parâmetros globais:

● Configuração de mão;

● Locação;

● Movimento;

● Orientação da palma da mão;

● Expressão facial.

LIBRAS não são meros gestos ou mímicas e não é uma soletração do Português.

O uso da abordagem baseada em fonemas é mais adequada para o reconhecimento de sinais.

O parâmetro abordado por este trabalho é a configuração de mão.