Parla: plataforma para auxiliar deficientes auditivos e surdos na oralização e na leitura labial

sarah danniely barbosa de souza

fernanda nascimento de paula

bruna camargo galindo

rafael prearo lima - orientador(a)

talita de paula cypriano de souza - coorientador(a)

Contato: nascimento.fernanda@aluno.ifsp.edu.br

Instituto Federal de São Paulo Campus Bragança Paulista

Resumo. O objetivo deste projeto é o desenvolvimento de uma plataforma para auxiliar no processo
de oralização e de aprendizagem de leitura labial para surdos e para pessoas com surdez
moderada ou profunda. À luz de três dos dezessete Objetivos de Desenvolvimento
Sustentável (ODS) previstos pela ONU, justificamos o desenvolvimento do projeto pela
necessidade de facilitar a comunicação entre pessoas com deficiência auditiva severa ou
profunda e de pessoas surdas com pessoas do mundo ouvinte. Para implementar a
plataforma, criamos um banco de dados com gravações de vozes e, a partir dele,
treinamos uma IA para reconhecimento de sons produzidos pela fala humana. O usuário,
por sua vez, ao observar um gif com movimentos faciais, tenta reproduzir o som esperado,
que é confirmado, ou não, pela IA da plataforma. Os testes preliminares, feitos com base
nas vogais do português brasileiro e com pessoas do mundo ouvinte, obtiveram altos
índices de acerto da IA no reconhecimento dos sons.

Palavras-chave: Oralização; Surdos ; Leitura labial.

Categoria: Informática