Banca de DEFESA: LUCAS ANTONIO FERRO DO AMARAL

Uma banca de DEFESA de MESTRADO foi cadastrada pelo programa.
DISCENTE : LUCAS ANTONIO FERRO DO AMARAL
DATA : 29/10/2021
HORA: 14:00
LOCAL: Google Meet - https://meet.google.com/zkg-ajps-ebf
TÍTULO:

Skelibras: Uma extensa base de dados de Libras construída com esqueletos 2D

PALAVRAS-CHAVES:

Aprendizado de máquina, Aprendizado Profundo, Reconhecimento de Línguas de Sinais, Libras, Visão Computacional

PÁGINAS: 60
RESUMO:

O reconhecimento de sinais dinâmicos de línguas de sinais é uma tarefa difícil que começa a se tornar praticável com o uso de redes neurais profundas. Porém, a ausência de grandes bases de dados anotadas inviabiliza o treinamento destes classificadores. Neste trabalho, foi construída uma base de dados, entitulada Skelibras, contendo 57760 amostras divididas em 6572 classes de sinais dinâmicos da Língua Brasileira de Sinais (Libras). Cada sinal contém sequências de esqueletos (poses) do corpo e das mãos, extraída e sincronizada automaticamente de vídeos da base Corpus de Libras. Para extrair e organizar esses dados anotados de forma consistente, apresenta-se uma metodologia capaz de identificar e rastrear as poses de cada falante; sincronizar legendas e falantes presentes nas conversas; e sincronizar dados de vídeos adquiridos a partir de distintos pontos de vista com as legendas. Realizamos experimentos em variações de redes neurais profundas baseadas em camadas convolucionais, camadas densas, e unidades LSTMs para validar e fornecer resultados preliminares na base gerada neste trabalho, possibilitando assim a comparação futura com novos métodos de reconhecimento de sinais dinâmicos.

MEMBROS DA BANCA:
Presidente - 1766576 - THALES MIRANDA DE ALMEIDA VIEIRA
Interno - 1544992 - MARCELO COSTA OLIVEIRA
Interno - 2087442 - TIAGO FIGUEIREDO VIEIRA
Externo à Instituição - FABIANO PETRONETTO DO CARMO - UFES