Investigación en Técnicas de Interacción de Usuarios con Limitaciones Visuales -

Ordenador

Investigación en Técnicas de Interacción de Usuarios con Limitaciones Visuales -

Ordenador

Utilización en Ambientes VirtualesPor :

Javier Gil Q.

Esquema PresentaciónEsquema Presentación

El Problema. El Reto. Soluciones “Tradicionales”. Nuevas Propuestas.1. `Trabajo Desarrollado. Más acerca de …..

El ProblemaEl Problema

GUI vs. Usuario con limitaciones visuales.

El RetoEl Reto

Acceso de usuarios con limitaciones visuales a la información y utilización de medios digitales.

Traducir Información alfa-numérica dentro de contexto.

Traducir Información alfa-numérica dentro de contexto.

Traducir Información gráfica.Traducir Información gráfica.

Involucrar la componente espacial.Involucrar la componente espacial.

LegislaciónLegislación

Disability Discrimination Act (1995) UK. Title 508 of the Rehabilitation Act of 1986, 1990

Americans with Disabilities Act.

Soluciones TradicionalesSoluciones Tradicionales

Traducción texto – voz digitalizada. Teclado braile.

Nuevas PropuestasNuevas Propuestas

Algunas InvestigacionesAlgunas Investigaciones

Conceptos. Aprendizaje y manejo espacial. Interfaces Auditivas y traducción de interfaces

graficas al canal sonoro. Interfaces Multimodales.

ConceptosConceptos

Interfaces Multimodales

La comunicación humana es multimodal. Modos de comunicación : visual, sonoro,

gestual, etc. Modalidades : Ej. Modo Sonoro: ruido, música,

habla.

ConceptosConceptos

Interfaces de igual oportunidad.

Interfaces multimodales en las cuales el usuario puede decidir por si mismo la distribución de la información presentada entre los canales visual y auditivo.

ConceptosConceptos

EarconsSonidos Musicales construidos de pequeñas

unidades y que pueden ser manipulados para construir unidades complejas.

Abrir , cerrar, archivo, programa.Abrir Archivo = Abrir + ArchivoCerrar Programa = Cerrar + programa.Ej:Earcon Experiments

ConceptosConceptos

Auditory Icons

Sonidos diseñados para crear asociaciones con objetos comunes, a la manera que lo hacen los iconos visuales.

Ej: Tocar una ventana suena como golpear una lamina de vidrio.

ConceptosConceptos

HRTFHead Related Transfer Function.Sonido Tridimensional.

ConceptosConceptos

HRTF

Aprendizaje y manejo espacialAprendizaje y manejo espacial

Constructive Exploration of Spatial Information by Blind Users

Constructive Exploration of Spatial Information by Blind Users

Schneider Strothotte.Dp. Simulation and Graphics.

University of Magdeburg. Germany

BasesBases

Aprendizaje mediante construcción de artefactos.

“Learning by doing” vs Aprendizaje Pasivo. Exploración Constructiva: Construir siguiendo

instrucciones. Ayudas actuales: Mapas Táctiles, Ayudas

electrónicas de viaje.

Exploración ConstructivaExploración ConstructivaImplementación basada en análisis de

imágenes.

Exploración ConstructivaExploración ConstructivaImplementación basada en un dispositivo de

retroalimentación de fuerza.

Haptic VRML Guide

Interfaces Auditivas y Traducción de Interfaces Graficas al canal sonoro

Interfaces Auditivas y Traducción de Interfaces Graficas al canal sonoro

Mapping GUI’s to Auditory Interfaces

Mapping GUI’s to Auditory Interfaces

Mynatt and Edwards.Graphics, Visualization and Usability

Center. College of Computing.Georgia Institute of Technology

U.S.

BasesBases

Navegación en ambientes de ventanas. Traducir ambientes X Windows a interfaces

Auditivas. Implementación de “Hear and feel” “Look

and feel”. Consistencia en la interfaz + usabilidad.

ImplementaciónImplementación Traducción a nivel de Widgets Auditory Interface

Components (AIC)1. Algunos widgets visuales innecesarios (layout).2. Para muchos widgets mapeo uno a uno (botones).3. Traducción de iconos visuales a auditivos(auditory

icons).4. AIC compuesto de uno o combinación de Auditory

Icons.

NavegaciónNavegación

Mapeo de la interfaz de usuario a una estructura de árbol de AIC’s.

Usuario navega en el árbol mediante teclado. Selección tecla enter.

An Evaluation of Earcons for Use in Auditory HCI.

An Evaluation of Earcons for Use in Auditory HCI.

Brewster, Wright and Edwards.Dep. Of Computer Science

University of York U.K.

BaseBase

Mejor desempeño de tareas. El canal auditivo es un muy buen complemento

del canal visual. Usuarios con limitaciones visuales.

Algunos ResultadosAlgunos Resultados Los sujetos prefieren earcons pero mejor asociación

con auditory icons. Earcons son mejores para presentar informacion que

secuencias inestructuradas de sonido. Altos niveles de reconocimiento pueden ser

alcanzados con uso cuidadoso de tono, ritmo y timbre.

Guía de creación de earcons: Timbre, Tono, Ritmo, Intensidad, Combinaciones.

Communicating Graphical Information to Blind Users

Using Music

Communicating Graphical Information to Blind Users

Using Music

Alty and Rigas.Loughborough UniversityUniversity of Huddersfield

U.K.

Interfaz del SistemaInterfaz del Sistema

Resultados en IdentificaciónResultados en Identificación

Interfaces MultimodalesInterfaces Multimodales

SoundgraphsSoundgraphs

Eje X Tiempo. Eje Y Tono.

Desventajas SoundGraphsDesventajas SoundGraphs

Movimiento mediante las flechas del teclado. Trabaja bien con graficas simples.

MultiVis : A Multimodal Visualization System for

Blind Students Using Virtual Reality

MultiVis : A Multimodal Visualization System for

Blind Students Using Virtual Reality

Brewster, Burton and Dimigen.Dep. Of Comp. Science and Psychology.

Univesity of Glasgow. UK.

BasesBases Usuarios videntes hacen inferencias a partir de la

imagen de los datos Matriz. Memoria de corto plazo no permite almacenar

información para hacer observaciones no triviales únicamente a través del canal auditivo. Como analizar graficas 3D???

Dispositivos hapticos permiten “sentir” objetos virtuales. Sonido 3D se ha desarrollado para localizar fuentes de

sonido en cualquier parte del espacio alrededor del escucha (HRTF).

PropósitoPropósito

Investigar las diferentes modalidades sensoriales para ver como pueden ser usadas adecuadamente para crear sistemas de visualización multimodales poderosos que hagan uso los sentidos de que disponen los usuarios.

PrecedentesPrecedentes Screen Reader No incluye información contextual

acerca de lo que se esta presentando. Solo información alfa-numérica. Ej: Matriz.

Sonificación: Presentación de datos complejos en sonido.

Soundgraphs: Mansur and Edwards. Sonido 3D Earcons: Presentación de información jerárquica y

multidimensional. Brewster.

PrecedentesPrecedentes Desarrollo de dispositivos hápticos y

retroalimentación de fuerza Phantom

Programa de InvestigaciónPrograma de Investigación Investigar los problemas inherentes cognitivos y de

memoria que enfrentan los usuarios invidentes cuando tratan de visualizar información.

Construir sistemas prototipo que permitan evaluar técnicas VR de visualización.

Investigar los métodos mas apropiados de transmitir información en las diferentes modalidades sensoriales.

Más acerca de ……Más acerca de …… Earcons:Glasgow Interactive Systems Groupshttp://www.dcs.gla.ac.uk/~stephen/research.shtml Hrtf:http://www.engr.sjsu.edu/~knapp/HCIROD3D/3D_home.htm Interfaces Multimodales:LIMSI – CNRS INSERM. FRANCE http://www.limsi.fr/Individu/bellik/ Conferencia personas discapacitadas???