Introducción a las Tecnologías del Habla Presentación de papers relacionados

Transcripción

1 Introducción a las Tecnologías del Habla Presentación de papers relacionados Prof. Agustín Gravano Modelización de patrones melódicos del español para la síntesis y el reconocimiento de habla 26 de Noviembre de 2014 Juan María Garrido, Laboratorio de fonética de la universidad autónoma de Barcelona, 1991 Alumna: Ana Sarriés

2 El paper 2 of 27

3 El paper Cómo está organizado Cap.1 Generalidades Cap.2 Repaso sobre los estudios existentes hasta aquel momento Cap.3 Sistema de estilización propuesto Cap.4 Análisis y clasificación propuesta Cap.5 Conclusiones 3 of 27

4 El paper: Generalidades 4 of 27

5 El paper: Generalidades Qué es la entonación? Es un fenómeno lingüístico relacionado con la percepción de: Frecuencia fundamental (Fo) Amplitud Duración Relaciona dos planos: el físico y el semántico-funcional 5 of 27

6 El paper: Repaso estudios existentes 6 of 27

7 El paper: Repaso estudios existentes Tomás Navarro, 1981 Propone cuatro grupos de patrones melódicos (modalidad oracional): Enunciativos Interrogativos Exclamativos Volitivos 7 of 27

8 El paper: Repaso estudios existentes Tipos de criterios de reconocimiento Aproximación por niveles Aproximación por contornos Waibel, 1988 Smoothing de la curva de Fo 8 of 27

9 El paper: Sistema de estilización propuesto 9 of 27

10 El paper: Sistema de estilización propuesto Objetivos y alcance Centrado en el idioma español en patrones terminales. en la información de la modalidad oracional. Utilizable tanto en síntesis como en reconocimiento. Se excluyó la duración y la amplitud del análisis. Se excluyeron las variaciones relativas al acento. 10 of 27

11 El paper: Sistema de estilización propuesto Procedimiento 1. Localización de puntos de inflexión en la curva de Fo 2. Normalización frecuencial 3. Interpolación mediante rectas 11 of 27

12 El paper: Análisis y resultados 12 of 27

13 El paper: Análisis y resultados Elaboración del corpus 54 frases Leídas en un contexto de 30 diálogos Pares mínimos 13 of 27

14 El paper: Análisis y resultados Elaboración del corpus - Fragmento de diálogos utilizados 14 of 27

15 El paper: Análisis y resultados Elaboración del corpus - Clasificación según sílabas acentuadas 15 of 27

16 El paper: Análisis y resultados Grabación del corpus 4 locutores Magnetófono Revox A77 Mic direccional SENNHEISER MD 441N 16 of 27

17 El paper: Análisis y resultados Digitalización del corpus MACSPEECH LAB Filtro antialiasing Muestreo de 10KHz 17 of 27

18 El paper: Análisis y resultados Estilización Se tuneó el umbral para filtrar puntos de inflexión relevantes en algo menos que 10Hz Se realizó una normalización temporal Se estilizaron las curvas de Fo de cada frase Se tomaron los valores estadísticos sobre los valores de la Fo y las pendientes 18 of 27

19 El paper: Análisis y resultados Estilización 19 of 27

20 El paper: Análisis y resultados Resultados 20 of 27

21 El paper: Clasificación propuesta y conclusiones 21 of 27

22 El paper: Clasificación propuesta y conclusiones Cuadro para síntesis y reconocimiento 22 of 27

23 El paper: Clasificación propuesta y conclusiones Desafíos Resolver el umbral de estilización empíricamente Trabajar con un corpus mayor y de habla espontánea 23 of 27

24 Publicaciones recientes 24 of 27

25 Publicaciones recientes GARRIDO, J.M. - LAPLAZA, Y. - KOLZ, B. - CORNUDELLA, M. (2014).- TexAFon 2.0: A text processing tool for the generation of expressive speech in TTS applications, Proceedings of LREC 2014, Ninth International Conference on Language Resources and Evaluation, Reykjavik (Iceland), May 2014, ISBN KOLZ, B - GARRIDO, J. M. - LAPLAZA, Y. (2014).- Automatic prediction of emotions from text in Spanish for expressive speech synthesis in the chat domain, Procesamiento del Lenguaje Natural, of 27

26 Publicaciones recientes Proyecto TexAFon Herramienta de procesado de texto: Entrada de texto Segmentación Normalización Salida con anotación fonética Está implementado en python. Puede utilizarse con los motores de síntesis Cereproc y MBROLA Idioma español y catalán 26 of 27

27 Gracias por su atención 27 of 27