Melhorando a acessibilidade para pessoas surdas em sistemas de transporte multimodais.

 

O projeto UNITY é um projeto de colaboração  entre grupo de pesquisa da Technische Hochschule Ingolstadt (THI), Alemanha, e o Centro de Ciências para o Desenvolvimento - Tecnologia Assistiva e Acessibilidade em Língua Brasileira de Sinais (CCD-TAAL) da Universidade Estadual de Campinas.

 


O projeto UNITY foca o desenvolvimento abordagens de reconhecimento da sinalização da Língua Brasileira de Sinais (Libras) e de Língua de Sinais Alemã (DGS) no interior de veículos de transporte de passageiros (uber, taxi, bonde, trem, navio, avião).  O escopo desse projeto inclui a formulação de conceitos de Experiência do Usuário (UX) para sistemas multimidias de automóveis e de dispositivos de apresentação (monitores de vídeo, smartphones e tablets) levando em conta o comportamento dos ocupantes do veículo e sua interação apoiada em áudio, texto e avatar 3D sinalizante. O objetivo é aumentar a segurança e o conforto do passageiro e condutor dentro do veículo. A estratégia do projeto explora sensores multimodais (câmeras tradicionais, câmeras de profundidade, microfones) instaladas no veículo e redes neurais profundas para desenvolver, testar e avaliar provas de conceito funcionais. 


O projeto UNITY é financiado pela Fundação de Amparo à Pesquisa do Estado de São Paulo, process nº 2024/23068-4.