Máster en Desarrollo de Software

Transcripción

1 Máster en Desarrollo de Software Procesamiento del Habla en Call Centers Automáticos Interacción Multimodal en Entornos de Inteligencia Ambiental Prof. Ramón López-Cózar Delgado Sistemas de Diálogo Hablado y Multimodal

2 Puntos a tratar 1. Investigación 2. Cursos del Máster 3. Trabajos de Fin de Máster 4. Profesorado 2

3 3

4 1. Investigación 1.1 Procesamiento del habla 1.2 Interacción multimodal 1.3 Inteligencia Ambiental (AmI) 1.4 Computación afectiva 4

5 1.1 Procesamiento del habla Reconocimiento automático del habla Comprensión del habla Gestión del diálogo hablado persona-ordenador Generación del habla 5

6 1.1 Procesamiento del habla: Sistemas de diálogo 6

7 1.1 Procesamiento del habla: Sistemas de diálogo 7

8 1.1 Procesamiento del habla: Sistemas de diálogo Memoria RAH Comprensión Gestor diálogo GLN Sintetizador Voz Usuario Interfaz de Entrada Interfaz de Salida Voz sistema Palabras reconocidas Representación semántica Información a generar Frases en formato texto Expectativas Vocabulario, modelos acústicos y de lenguaje Palabras y reglas de gramática Modelo de diálogo, estrategias Patrones y reglas Base datos local Base datos remota 8

9 1.1 Procesamiento del habla: Sistemas de diálogo 9

10 1.1 Procesamiento del habla: Sistemas de diálogo 10

11 1. Investigación 1.1 Procesamiento del habla 1.2 Interacción multimodal 1.3 Inteligencia Ambiental (AmI) 1.4 Computación afectiva 11

12 1.2 Interacción multimodal 12

13 1.2 Interacción multimodal Input interface Aut. speech recognition Nat. lang. processing Face loc. & track. Multimodal processing Multimodal data storage Output interface Graphic generation Gaze tracking Multimodal data fusion Dialogue manager Response generator Nat. lang. generation Lipreading recognition Gesture recognition Task Database Speech synthesis Handwriting recognition 13

14 1.2 Interacción multimodal 14

15 1.2 Interacción multimodal 15

16 1. Investigación 1.1 Procesamiento del habla 1.2 Interacción multimodal 1.3 Inteligencia Ambiental (AmI) 1.4 Computación afectiva 16

17 1.3 Inteligencia Ambiental (AmI) 17

18 1.3 Inteligencia Ambiental (AmI) 18

19 1.3 Inteligencia Ambiental (AmI) Home.cfg ROOMS APPLIANCES SPEECH INTERFACE GUI INTERFACE 19 Light.cfg ATTRIBUTES VALUES (range) Light.xml (SRGS Grammar) ACTIONS

20 1.3 Inteligencia Ambiental (AmI) 20

21 1. Investigación 1.1 Procesamiento del habla 1.2 Interacción multimodal 1.3 Inteligencia Ambiental (AmI) 1.4 Computación afectiva 21

22 1.4 Computación afectiva Objetivo Lograr interfaces más naturales Aproximaciones Detección de estados emocionales de usuarios Generación de estados emocionales en usuarios Tarea muy dificultosa No se comprende totalmente como ser humano procesa las emociones Subjetividad de las emociones Conocimiento disperso en varias disciplinas Número limitado de emociones para tener éxito 22

23 ASR NLP Dialog Manag. NLG Synthesiser User voice 23 Emotion Detection Memory Detección de estados emocionales de usuarios Input Interface Output Interface System voice Recognised words Semantic representation Response to generate Response in text format

24 Puntos a tratar 1. Investigación 2. Cursos del Máster 3. Trabajos de Fin de Máster 4. Profesorado 24

25 2. Cursos del Máster Procesamiento del Habla en Call-Centers Automáticos (PHCCA) 2 ETCS Profesorado: Zoraida Callejas Carrión (UGR) Ramón López-Cózar Delgado (UGR) 25

26 2. Cursos del Máster Interacción Multimodal en Entornos de Inteligencia Ambiental (IMEIA) 2 ECTS Profesorado Zoraida Callejas Carrión (UGR) Germán Montoro Manrique (Univ. Autónoma de Madrid) Ramón López-Cózar Delgado (UGR) 26

27 Puntos a tratar 1. Investigación 2. Cursos del Máster 3. Trabajos de Fin de Máster 4. Profesorado 27

28 3. Oferta de Trabajos de Fin de Máster Cualquier trabajo relacionado con los temas de investigación comentados Ejemplos de TFMs Centralita Avanzada: Integración y Desarrollo de una Centralita VoIP con un Sistema de Procesamiento del habla Autor: Jesús Gumiel Ramírez ORIENTA: Un Asistente Multimodal para la Eduación Universitaria Autora: Ana María Gutiérrez Castillo 28

29 3. Oferta de Trabajos de Fin de Máster Ejemplos de TFMs Técnicas de Evaluación de Sistemas de Diálogo: Aplicación al Sistema Mayordomo Autora: Nieves Ábalos Serrano Diseño y Desarrollo de una Habitación Inteligente con Interfaz del Habla y Localización de Usuarios Autor: Gonzalo Espejo Pérez 29

30 3. Oferta de Trabajos de Fin de Máster Ejemplos de TFMs Análisis de requisitos y diseño de una aplicación para el desarrollo y evaluación de la capacidad de reconocimiento de emociones de los niños con trastorno del especto autista Autora: Mª Isabel Molina Caballero Emotional Space: The Soul of Emotions A representation system of emotions for affective computing Autor: Fernando J. Porcel Sánchez 30

31 Puntos a tratar 1. Investigación 2. Cursos del Máster 3. Trabajos de Fin de Máster 4. Profesorado 31

32 4. Profesorado Ramón López-Cózar Delgado Dpto. LSI, UGR, Telf Zoraida Callejas Carrión Dpto. LSI, UGR, Telf Germán Montoro Manrique Dpto. Ingeniería Informática Universidad Autónoma de Madrid, Telf

33 Gracias por la atención Preguntas? 33