Jailton Alkimin Louzada - [email protected] PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS...

18
Reconhecimento Automático de Fala por Computador Jailton Alkimin Louzada - [email protected] PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso Orientando: Jailton Alkimin Louzada Orientador: Prof. Alexandre Ribeiro

Transcript of Jailton Alkimin Louzada - [email protected] PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS...

Page 1: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Reconhecimento Automático de Fala por

Computador

Jailton Alkimin Louzada - [email protected]

PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁSDEPARTAMENTO DE COMPUTAÇÃO

Trabalho de Conclusão de Curso

Orientando: Jailton Alkimin LouzadaOrientador: Prof. Alexandre Ribeiro

Page 2: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Introdução Objetivo Estrutura do trabalho Reconhecimento de fala Reconhecimento de fala por computador Reconhecimento baseado em análise

estatística Demonstração do sistema Resultados Conclusão

Sumário

Jailton Alkimin Louzada - [email protected]

Page 3: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Introdução

O que é reconheciment

o de fala?

Reconhecimento de fala por

computador

Jailton Alkimin Louzada - [email protected]

Page 4: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Demonstrar técnicas de reconhecimento de fala, mostrar sua aplicabilidade no mundo real e implementar uma das técnicas.

Objetivo

Jailton Alkimin Louzada - [email protected]

Page 5: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Capítulo I – Introdução

Capítulo II – Reconhecimento de fala

Capítulo III – Recursos para um sistema de reconhecimento de fala

Estrutura do trabalho

Jailton Alkimin Louzada - [email protected]

Page 6: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Capítulo IV – Aplicação desenvolvida

Capítulo V – Conclusão

Estrutura do trabalho

Jailton Alkimin Louzada - [email protected]

Page 7: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Processo de produção e reconhecimento da fala humana

Jailton Alkimin Louzada - [email protected]

Page 8: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Reconhecimento de fala por computador - 1

Jailton Alkimin Louzada - [email protected]

Reconhecedores baseados em análise acústico fonética

Baseado em inteligência artificial

Reconhecedores por comparações de padrões

Page 9: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Reconhecimento de fala por computador - 2

Jailton Alkimin Louzada - [email protected]

Aquisição do sinal da fala

Extração de parâmetros

Reconhecimento do padrão

Page 10: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Sistema RAF baseado em comparação de padrões

Jailton Alkimin Louzada - [email protected]

Page 11: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Recursos para construção de um sistema de reconhecimento de fala

Jailton Alkimin Louzada - [email protected]

FRONT-END

MODELO ACÚSTICO

MODELO DE LINGUAGEM

RECONHECEDOR

Page 12: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Principais módulos de um sistema de reconhecimento de fala

Jailton Alkimin Louzada - [email protected]

Page 13: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Construção do sistema

Jailton Alkimin Louzada - [email protected]

Page 14: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Demonstração do sistema

Jailton Alkimin Louzada - [email protected]

Page 15: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Resultados

Jailton Alkimin Louzada - [email protected]

FRENTE TRÁS DIREITA ESQUERDA PARAR CASA ENGENHO CACHORRO

Locutor 10.94222

6 0.906761 0.7225596 0.9726312 0.8047706 0.5923843 0.676384 0.5192723

Locutor 20.88603

4 0.8970461 0.9767500 0.9968700 0.9156567 0.5972344 0.5446800 0.4392121

Locutor 30.91394

3 0.9540179 0.8496834 0.9976766 0.7835052 0.4636432 0.5564411 0.4157359

Locutor 40.88763

4 0.9944343 0.987986 0.9890701 0.8781567 0.3996932 0.4424377 0.4457201

Teste de níveis de confiança para locutores masculinos

Page 16: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Resultados

Jailton Alkimin Louzada - [email protected]

5db 10db 15db

Locutor 1

0.8496834 0.7010467 0.676384

Teste de níveis de confiança em ambientes ruidosos

Page 17: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

No reconhecimento dos comandos de fala, o sistema se mostrou bem funcional tendo em média taxas de 92% de confidência para as palavras da gramática, tanto ditas por mulheres como por homens.

Palavras fora do vocabulário, o sistema também se mostrou bem eficiente, trazendo em média taxas de 48% de confiança para as palavras tanto ditas por mulheres como por homens, que graças a limitação do grau mínimo de confiança para se transcrever uma palavra, que nesse projeto foi definido como acima de 70%, não permitia que palavras fora do vocabulário pudessem ser transcritas.

Conclusão 

Jailton Alkimin Louzada - [email protected]

Page 18: Jailton Alkimin Louzada - jailtonalkimin@gmail.com PONTIFÍCIA UNIVERSIDADE CATÓLICA DE GOIÁS DEPARTAMENTO DE COMPUTAÇÃO Trabalho de Conclusão de Curso.

Obrigado!

Jailton Alkimin Louzada - [email protected]