TacTIC Interfaz Táctil para Sordociegos

Transcripción

1 TacTIC Interfaz Táctil para Sordociegos

2 Proyecto El proyectotactices un proyecto de investigación industrial englobado dentro del Subprograma Avanza I+D. Indra Software Labs InnovaTec Universidad Politécnica de Valencia El principal objetivo del proyecto es desarrollar una forma de comunicación y de acceso a contenidos, tanto a través de Internet como en las actividades de la vida diaria, para personas con sordoceguera. Para conseguir este objetivo, se ha diseñado e implementado un dispositivo de estimulación táctil sobre un guante. Además se ha desarrollado las interfaces entre el dispositivo con el ordenador o smartphone y diferentes programas que garantizan a los usuarios la ubicuidad, comodidad y libertad de utilización del dispositivo, tanto en el acceso de contenidos como en la comunicación con otras personas. 2

3 Aplicaciones Escritorio PC Adaptación del PC para su uso por parte de usuarios con sordoceguera portadores del guante táctil. Interacción con el PC de forma inalámbrica Acceso a contenidos e información: Navegación Web, archivos, libros electrónicos, messenger, Navegación mediante teclado o ratón 3D incorporado en el Guante Representación de contenidos de forma táctil: música, imágenes, libros, navegación web Escritorio Terminal Móvil Adaptación de Smartphone Android para su uso por parte de usuarios con sordocegueraportadores del guante táctil. Interacción con el terminal móvil de forma inalámbrica Acceso a contenido e información en cualquier lugar: Navegación Web, archivos, libros electrónicos, messenger, Navegación mediante teclado incorporado en el Guante Táctil o captura de gestos (letras) sobre la pantalla táctil del móvil. Representación de contenidos de forma táctil: música, imágenes, libros, navegación web 3

4 Guante 26 motores representando las letras del abecedario Cada motor funciona independiente Calibración independiente en cada motor Regulación en altura estando en reposo Regulación de profundidad de sensación Teclado Ratón Cargador Luces de indicación Módulos inalámbricos 4

5 Malossi Representación del abecedario sobre la palma de la mano. -5 letras sobre cada dedo -Letra W entre dos dedos -Por determinar la Ñ al no existir 5

6 Teclado 26 letras superpuestas como un teclado de teléfono móvil (reducir espacio) 1, 2 o 3 pulsaciones Números superpuestos con las letras 4 pulsaciones Caracteres arroba. punto Borrar Espacio OK (aceptar) CANCEL (cancelar) 6

7 Enchufarlo y cargar Único interruptor para conectarlo todo 2 posibilidades para cargar: Puerto USB Luz eléctrica Azul: conectado Roja: Cargando Verde: Cargado 7

8 Interfaz usuario no sordociego Interfaz de comunicación inalámbrica. 26 botones correspondiente a cada letra, mas dos de: OK: enviar DEL: borrar Pantalla para mostrar la frase y el estado. Frases de longitud máxima 16 letras. Una vez enviada la frase, hasta que no es mostrada no es posible enviar otra, con el fin de no saturar al usuario del guante. Cuando se ha mostrado se informa si se ha mostrado todo correctamente. Indicadores: Azul: conectado, Rojo: Cargando, Verde: Cargado 8

9 Ratón 3D Instalación automática en el ordenador, sin necesidad de instalar un driver. Introducir el pincho en el puerto USB y utilizar como ratón. Posibilidad de ajuste: - Velocidad de movimiento -Punto de reposo 9

10 Lector Lector Documentos/Libros Representación táctil de documentos y libros electrónicos Formatos: pdf, txt, doc, html Acceso desde PC y terminal móvil Parseode la información letra a letra Navegación por el documento por párrafos 10

11 Lector PC Dispositivo Movil Diferentes formatos Exploración de archivos Diferentes formatos Lectura de documento por párrafos Lectura de documento por párrafos 11

12 Representación de Imágenes Representación de imágenes de forma táctil Transformación de imágenes a matriz de puntos blancos/negros mediante algoritmos de análisis y recorte de bordes Representación en matriz 3D de puntos Cada punto negro representa un pin subido Cada punto blanco representa un pin sin subir Representación de Imágenes 12

13 Representación de Música Representación de Música Representación de música de forma táctil Análisis de frecuencias para representación de las notas musicales mediante vibraciones 13

14 Guante musical 8 motores, 5 de alta vibración y 3 de baja. Conexión inalámbrica. Carga mediante USB o luz eléctrica. 14

15 Navegador Web Navegador Web Navegación web Representación táctil de la información de las páginas web: Texto Links Imágenes Favoritos Navegación web para páginas de noticias: 20minutos 15

16 Navegador Web PC Dispositivo Móvil Navegación Web: Texto, Links, Imágenes Favoritos Navegación Web: Texto, Links Noticias: 20Minutos 16

17 Correo Electrónico Correo Electrónico Recepción nuevos mensajes Lectura correo electrónico Escritura nuevos correos, respuesta y reenvío Agenda de direcciones Acceso desde PC o dispositivo móvil 17

18 Correo Electrónico PC Dispositivo Móvil Envío de nuevos s Lectura de s Envío de s Lectura de s 18

19 Messenger Messenger Servicio de mensajería instantánea compatible con MSN Messenger Permite enviar y recibir mensajes instantáneos con tu lista de contactos Disponible en PC y Dispositivo móvil 19

20 Messenger PC Dispositivo Móvil Conversación Lista y notificación de contactos conectados Conversación 20

21 Intérprete Virtual Intérprete Virtual Permite a cualquier usuario comunicarse con otro usuario portador del Guante Táctil Envió y recepción de mensajes Reconocimiento de voz Síntesis de voz Disponible en PC y terminal Móvil Intérprete para PC Intérprete para Dispositivo móvil 21

22 SMS SMS Notificación de recepción de SMS Lectura Envió Lista de contactos Envío de SMS Lectura de SMS 22

23 SMS de Emergencia SMS de Emergencia SOS Sistema de ayuda en caso de emergencia Geo-ocalización del usuario Envío de SMS de emergencia a número de teléfono pre-configurado con la posición del usuario En la pantalla del dispositivo móvil se mostrará un mensaje de aviso/ayuda Permite lanzar el Intérprete virtual para comunicación con el usuario 23

24 Agenda/Notificador Agenda en PC Agenda Sistema de aviso de alarmas o citas Citas programables: periódicas, repetitivas, semanales Al cumplirse la cita se enviará al Guante Táctil un mensaje configurable en el momento de alta de la cita Disponible para Dispositivos móviles y PC Agenda en Móvil 24

25 Subtítulos Subtítulos Aplicación para PC para reproducción de ficheros de video (películas y series de tv) con subtítulos. Envío de los subtítulos al Guante Táctil 25