IF2LGP - Intérprete automático de fala em língua portuguesa para língua gestual portuguesa

Gaspar, Luís Romão

http://hdl.handle.net/10400.8/2541

Use this identifier to reference this record.

Name:	Description:	Size:	Format:
Luis Romão GAspar-Mestrado em Engenharia Eletrotécnica - Electrónica e Telecomunicações.pdf		5.99 MB	Adobe PDF	Download

Send Feedback

Authors

Gaspar, Luís Romão

Advisor(s)

Lopes, Carla Alexandra Calado

Abstract(s)

Segundo informação da Organização Mundial de Saúde existem no mundo 360 milhões de pessoas, cerca de 5% da população mundial, que possuem algum nível de perda de audição. Em Portugal este número ascende a 150 mil pessoas, sendo que dessas cerca de 30 mil utilizam a língua gestual como forma de comunicação. A comunicação entre um surdo profundo e um ouvinte é, geralmente, muito difícil devido ao desconhecimento do ouvinte sobre a língua gestual, sendo necessária, na maioria das vezes, a mediação de um intérprete. No dia-a-dia de um surdo, torna-se difícil a presença permanente de um intérprete, especialmente em contextos fora do profissional ou escolar. O trabalho que se apresenta surge, numa tentativa, de resposta a este problema. Pretende-se desenvolver uma aplicação que permita fazer a conversão de fala em Língua Portuguesa (LP) para Língua Gestual Portuguesa (LGP), de forma automática, que permita auxiliar a comunicação entre ouvintes e surdos na ausência de um intérprete. O sistema captura o áudio produzido pelo emissor falante e apresenta ao surdo gestuante uma sequência de vídeos correspondente à mensagem produzida oralmente. O sistema é constituído por 3 módulos principais: (1) Um reconhecedor de fala, que parte do padrão acústico e fornece na sua saída a sequência de palavras reconhecida; (2) uma máquina de tradução, que parte do texto em LP e apresenta o mesmo texto segundo a estrutura frásica da LGP - GLOSA e (3) uma interface gráfica, que partindo da sequência de palavras em LGP, faz a animação por gestos através de vídeos. O sistema foi avaliado por um pequeno grupo de pessoas, os resultados dessa avaliação demonstraram que o sistema é útil e fácil de utilização mas necessita ainda de alguns melhoramentos.