~joaquim/ speech_technology/ SOCHIL_07/SOCHIL_07.html

Transcripción

1 XVII Congreso de la Sociedad Chilena de Lingüística Universidad de Concepción 29 de octubre de 2007 Las tecnologías del habla: presente y futuro Grup de Fonètica, Departament de Filologia Espanyola, Universitat Autònoma de Barcelona Joaquim.Llisterri@uab.cat XVII Congreso de la Sociedad Chilena de Lingüística Universidad de Concepción 29 de octubre de 2007 Materiales en Internet ~joaquim/ speech_technology/ SOCHIL_07/SOCHIL_07.html Las tecnologías del habla: presente y futuro La interacción entre personas y La interacción entre personas mediatizada por un ordenador Las tecnologías del habla: presente y futuro La interacción entre personas y La interacción entre personas mediatizada por un ordenador

2 La interacción entre personas y La interacción oral entre personas y La conversión de texto en habla El reconocimiento del habla Los sistemas de diálogo La interacción entre personas y La interacción oral entre personas y La conversión de texto en habla El reconocimiento del habla Los sistemas de diálogo La interacción entre personas y La interacción entre personas y HCI, Human - Computer Interaction Pantalla Teclado Ratón Lápiz Tacto Canal visual Lengua escrita

3 La interacción entre personas Hace unos años que escribimos pero hace unos años que hablamos ( años según los autores) Las nuevas necesidades Desarrollo de la Sociedad de la Información para todos Automatización de servicios telefónicos Sistemas portátiles sin teclado Las tecnologías del habla Qué quisiéramos tener? The domain of speech technology is the development of automatic systems to allow human users and computers to interact directly through the medium of speech New Horizons in European Speech technology, Report of the ESPRIT Workshop on Speech Technology, Aarhus, Denmark, May Un ordenador que Habla Reconoce El habla Al usuario Entiende Ayuda al usuario Traduce La lengua escrita La lengua oral

4 Hal 2001: A Space Odissey Clarke (1950) - Kubrick (1968) LingWear, Wearable Linguistic Assistant InterACT, International Center for Advanced Communication Technologies Qué tecnologías necesitamos? Qué tecnologías necesitamos? Un ordenador que Habla Reconoce El habla Al usuario Entiende Síntesis (CTH) Reconocimiento Identificación Comprensión Un ordenador que Ayuda Traduce El escrito El habla Sistema de diálogo TA TA oral

5 La interacción entre personas y La interacción oral entre personas y La conversión de texto en habla El reconocimiento del habla Los sistemas de diálogo La conversión de texto en habla (TTS, Text-to-Speech Synthesis) Del texto al habla GTP-UPC Módulos de tratamiento lingüístico de un conversor de texto en habla

6 Actor, Loquendo Loquendo Gilded TTS Es, m, f EsMx, f EsCh, f Cat, f Cat, m EsAr, m La interacción entre personas y El reconocimiento automático del habla (ASR, Automatic Speech Recognition) La interacción oral entre personas y La conversión de texto en habla El reconocimiento del habla Los sistemas de diálogo Del habla al texto

7 Speech-Enabled Interactive Voice Response Systems. Web ProForum Tutorials, International Engineering Consortium. Modelo de reconocimiento de habla continua Mariño (1999) Dictado automático Dragon Naturally Speaking Dragon Naturally Speaking Edición estándar y profesional Vocabulario legal Vocabulario médico Versión en español

8 Nuance Mobile Dictation The amazing race Windows Vista La interacción entre personas y La interacción oral entre personas y La conversión de texto en habla El reconocimiento del habla Los sistemas de diálogo Los sistemas de diálogo Sistema de diálogo, Sistema conversacional SLS, Spoken Language System Programa diseñado para facilitar la interacción natural mediante el habla entre una persona y un sistema informático

9 Los sistemas de diálogo Módulos de tratamiento lingüístico de un sistema de diálogo Reconocimiento Comprensión Eh, pues mire, quería saber a qué hora sale la el último tren, eh hacia Barcelona, desde Madrid, el sábado PETICIÓN, DESTINO= Barcelona, ORIGEN= Madrid, Fecha: DÍA= 28, HORA= Último Generación de respuesta Síntesis El último tren sale a las 11 y 53 minutos de la noche Los sistemas de diálogo Portales de voz Los sistemas de diálogo Grabación previa Selección por voz Información solicitada Restaurantes de Ávila Restaurantes

10 Los sistemas de diálogo Los sistemas de diálogo Restaurantes de Ávila Madrid Salamanca Cuenca Sistema automático Selección por voz Información solicitada Existe una farmacia Farmacias de guardia Los sistemas de diálogo Banca Telefónica ocho He encontrado nueve diez Mensajes pregrabados para insertar palabras procedentes de una lista BpT, Banca por Teléfono Natural Vox Existe una farmacia de guardia Conversión de texto escrito en habla

11 Las tecnologías del habla: presente y futuro La interacción entre personas y La interacción entre personas mediatizada por un ordenador La interacción entre personas mediatizada por un ordenador Conversión entre lengua oral y lengua escrita Traducción de lengua oral Conversión de lengua oral a movimientos labiales Traducción entre lengua oral y lengua de signos La interacción entre personas mediatizada por un ordenador Conversión entre lengua oral y lengua escrita Traducción de lengua oral Conversión de lengua oral a movimientos labiales Traducción entre lengua oral y lengua de signos La interacción entre personas mediatizada por un ordenador Conversión entre modalidades Escrito - Oral Conversión de texto en habla (TTS, Text-to-Speech Synthesis) Oral - Escrito Reconocimiento automático del habla (ASR, Automatic Speech Recognition)

12 La interacción entre personas mediatizada por un ordenador Conversión entre modalidades Escrito - Escrito Traducción automática de textos (MT, Machine Translation) Oral - Oral Traducción automática del habla (SLT, Spoken Language Translation) La interacción entre personas mediatizada por un ordenador Conversión entre lengua oral y lengua escrita Traducción de lengua oral Conversión de lengua oral a movimientos labiales Traducción entre lengua oral y lengua de signos Arquitectura de C-STAR NESPOLE! NEgotiating through SPOken Language in E-commerce ile/v3_document.htm "... I'm available on Friday the 19th... "...sí sí venerdì diciannove posso, sì perchè sai oggi vado via per il viaggio D, la verità è che questo mese è pieno di viaggi parto il giorno sei per un viaggio e starò via fino al dodici ed è per questo che il giorno diciannove mi va proprio bene francamente..." =...yes yes on friday nineteen can, yes because know I go me of trip today, the truth such is that this month is very traveller I go me the day six of trip and I am until the twelve as soon as the day nineteen comes me very well outspokenly

13 Verbmobil Sistema móvil de traducción de diálogos espontáneos ( ) Dominios restringidos: citas, preparación de viajes, reservas de hotel Lenguas: alemán, inglés y japonés Verbmobil TC-STAR Technology and Corpora for Speech-to- Speech Translation IST Multimodal interfaces Traducción de habla espontánea en varios dominios

14 TC-STAR La interacción entre personas mediatizada por un ordenador Conversión entre lengua oral y lengua escrita Traducción de lengua oral Conversión de lengua oral a movimientos labiales Traducción entre lengua oral y lengua de signos Department of Speech, Music and Hearing KTH Stockholm Umanify Para ver esta película, debe disponer de QuickTime y de un descompresor. Teleface Ayuda visual - lectura labial- en conversaciones telefónicas para personas con discapacidades auditivas Asistentes virtuales interactivos para páginas web y teléfonos móviles Conversión de texto en habla basada en la tecnología de Loquendo sincronizada con movimientos labiales

15 La interacción entre personas mediatizada por un ordenador Conversión entre lengua oral y lengua escrita Traducción de lengua oral Conversión de lengua oral a movimientos labiales Traducción entre lengua oral y lengua de signos esign Essential Sign Language Information on Government Networks Introducción de vídeos en lengua de signos en páginas web Basado en léxicos de signos y en avatares que cumplen la función de hablantes virtuales de lengua de señas Los signos se capturan a partir de un hablante o se generan a partir de instrucciones Visia 2 SiSi 03.ibm.com/press/us/en/pressrelease/22316.wss SiSi - Say it, Sign it IBM, University of East Anglia, Royal National Institute for the Blind Conversión automática de lengua oral a lengua de signos británica Un avatar produce en lengua de signos, en tiempo real, los enunciados hablados

16 SiSi Las tecnologías del habla: presente y futuro La interacción entre personas y La interacción entre personas mediatizada por un ordenador Otras aplicaciones de las tecnologías del habla Muchas gracias! Materiales en Internet ~joaquim/ speech_technology/ SOCHIL_07/SOCHIL_07.html

17 XVII Congreso de la Sociedad Chilena de Lingüística Universidad de Concepción 29 de octubre de 2007 Materiales en Internet ~joaquim/ speech_technology/ SOCHIL_07/SOCHIL_07.html