Tradução vídeo de língua gestual portuguesa: reconhecimento dinâmico de configurações de mão

Abstract

Atualmente, a comunidade surda representa uma parte significativa da população em Portugal. Sendo a audição um dos principais sentidos do ser humano, gera dificuldades no diaa-dia quer a nível profissional e académico. São necessários recursos e produtos inovadores que permitam facilitar a inclusão das pessoas surdas. Uma das limitações mais significativas da surdez, é a dificuldade na comunicação. Para isso, necessitam de recorrer à Língua Gestual Portuguesa (LGP), constituída por um conjunto de gestos com diferentes significados, que permitem comunicar com outras pessoas. No entanto, considerando que a maioria da sociedade não possui conhecimento de Língua Gestual Portuguesa, a comunicação para a comunidade surda torna-se um problema quando tentam estabelecer uma conversação com pessoas sem estes conhecimentos. Esta dissertação pretende apresentar todo o processo de investigação e desenvolvimento de uma aplicação capaz de, através de vídeo, identificar os gestos, ou configurações de mão, característicos da Língua Gestual Portuguesa, classificando-os e traduzindo-os para texto. Com isto, pretende-se uma solução que sirva de base para oferecer novas oportunidades à comunidade surda em Portugal e promover a inclusão destes nas diversas necessidades e atividades do dia-a-dia.

Currently, the deaf community represents a significant part of the population in Portugal. Since hearing is one of the main senses of the human being, it generates difficulties in daily life, both professionally and academically. Innovative resources and products are needed to facilitate the inclusion of deaf people. One of the most significant limitations of deafness, is the difficulty in communication. For this, they need to use the Portuguese Sign Language (PSL), consisting of a set of gestures with different meanings, which allow communication with other people. However, considering that most of society has no knowledge of the Portuguese Sign Language, communication for the deaf community becomes a problem when trying to establish a conversation with people without this knowledge. This dissertation aims to present the whole process of research and development of an application capable, through video, of identifying the gestures, or hand configurations, characteristic of the Portuguese Sign Language, classifying them and translating them into text. With this, it is intended a solution that serves as a basis to offer new opportunities to the deaf community in Portugal and promote their inclusion in the various needs and activities of daily life.