ArticlePDF Available
216
Santiago, Chile • 1, 2 y 3 Diciembre 2004
MEMORIAS TISE 2004
Audiomedia, Una Herramienta Para Que
Niños Ciegos Construyan Multimedios
Jaime Sánchez I.
C5, Departamento de Ciencias de la Computación
Universidad de Chile
Chile
jsanchez@dcc.uchile.cl
Héctor Flores R.
C5, Departamento de Ciencias de la Computación
Universidad de Chile
Chile
hflores@dcc.uchile.cl
RESUMEN
El uso de medios visuales y audibles se ha convertido en el
principal mecanismo para transmitir información. La falta
de aplicaciones que permitan que personas con discapacidad
visual accedan y utilicen estos medios ha dado lugar a diversas
técnicas y metodologías que intentan resolver este problema.
AudioMedia es una herramienta que permite al aprendiz no
vidente crear presentaciones multimediales para videntes
y no videntes, ayudando así a estimular la apropiación de
conceptos de multimedia a través del manejo de medios y el
diseño de proyectos multimediales. En este estudio se describe
AudioMedia y sus principales funciones, así como también
los resultados preliminares de un estudio de usabilidad de las
interfaces del software.
INTRODUCCIÓN
Uno de los principales objetivos del uso de tecnologías en el
quehacer diario de personas con ceguera o visión residual es
favorecer la integración social de estas personas. Existe una
diversidad de metodologías y aplicaciones computacionales
que han logrado un avance importante en este objetivo. Así
también, diversos estándares, guidelines [1] y modelos de
desarrollo de software para no videntes [2] han ayudado a
mejorar la pertinencia de las aplicaciones computacionales
para este tipo de discapacidad.
La constante aparición de medios tanto visuales como
audibles y elementos básicos utilizados como canales de
comunicación genera interrogantes como: ¿Puede un no
vidente desarrollar las habilidades que le permitan crear y
percibir información a través de este tipo de medios? ¿Son las
aplicaciones actualmente desarrolladas accesibles para este
tipo de discapacidad? Diversas investigaciones han intentado
responder estas preguntas. Un ejemplo de esto es IC2D [3],
una herramienta gráfica para no videntes que permite a los
usuarios construir animaciones basadas en sus dibujos a
través de rotaciones y trazos de movimiento. WebSound [4],
por ejemplo, es una herramienta que permite a los usuarios
no videntes acceder de forma fácil a funcionalidades de un
navegador estándar como Internet Explorer. AudioBatteShip
[5] es una adaptación al tradicional juego de mesa Combate
Naval, donde aprendices, tanto videntes como no videntes,
pueden interactuar entre sí para mejorar su memoria abstracta,
la abstracción espacial y la percepción háptica. AudioMemory
[6] es un juego para permite la estimulación de la memoria en
un ambiente virtual basado en sonido, donde el usuario debe
encontrar pares de cartas dentro de una matriz determinada.
Aunque estas aplicaciones contienen medios gráficos y
auditivos, no existe una aplicación en la cual el usuario no
vidente pueda interactuar y combinar estos elementos como
mecanismo de presentación de información. Es por esto
que hemos desarrollado AudioMedia, una herramienta de
productividad multimedial para usuarios no videntes, donde
el usuario puede generar secuencias de escenas interactivas,
compuesta por medios auditivos o visuales para la presentación
de información. Este trabajo presenta los objetivos del estudio,
la descripción del software AudioMedia y los resultados
preliminares de un estudio de usabilidad realizado.
OBJETIVO DEL TRABAJO
El objetivo de este estudio fue diseñar, desarrollar y evaluar
la usabilidad de AudioMedia, un software multimedial
para aprendices no videntes y/o con visión residual, donde
el aprendiz genera a partir de una interfaz de fácil uso,
secuencias de escenas interactivas que contienen medios
básicamente auditivos. Con esta aplicación el usuario
puede crear aplicaciones simples para mostrar información
dinámicamente, las que se mantendrán enlazadas de
acuerdo a como el aprendiz la defina, utilizando una galería
predeterminada de medios (audio, imágenes y videos). Esta
aplicación puede ser usada tanto por usuarios videntes como
no videntes.
El estudio pretende potenciar el desarrollo de la representación
de información a través de contenedores de elementos
multimediales y la estimulación para la apropiación de
conceptos de multimedia a usuarios no videntes, dándoles la
posibilidad de combinar diferentes tipos de medios entre
para la presentación de información.
Valor Agregado
AudioMedia es un software que permite que aprendices ciegos
diseñen presentaciones multimediales y con ello desarrollen
una serie de habilidades involucradas en el proceso de diseño
de un producto multimedial: Análisis, integración, síntesis,
evaluación y presentación de información, así como asociación
y contraste de ideas.
217
9°Taller Internacional de Software Educativo TISE 2004
MEMORIAS TISE 2004
Población Destinataria
AudioMedia está diseñado para aprendices legalmente
ciegos de Educación Media, aunque puede ser utilizado por
aprendices mayores.
DESCRIPCIÓN DE AUDIOMEDIA
AudioMedia se define como una herramienta para crear de
forma fácil y directa escenas multimediales las cuales tienen
como objetivo principal mostrar información basada en
sonido. Cada una de estas escenas es construida por un Editor
que consta de los siguientes módulos:
Galería de imágenes: Este es el contenedor de medios que está
disponible para que el usuario elija los elementos que insertará
en cada interfaz. Estos elementos pueden ser de 3 tipos:
gráficos, sonidos o videos. Cada una de estas 3 categorías y
a su vez, cada uno de sus elementos, están referenciados a
través de audio para que el usuario pueda incluirlos en las
escenas que desee.
Herramientas: Estas son funcionalidades adicionales al
sistema para complementar el uso de medios en cada una
de las escenas. Contiene 2 funciones:
Cuadro de Texto: Permite incluir texto en las escenas. Esta
funcionalidad debe ser completada inmediatamente por
una descripción en audio que la identifica.
Micrófono: Este elemento permite agregar de forma
dinámica elementos auditivos a la galería de medios, para
ser utilizada y/o asociada con alguno de los elementos
anteriormente dispuestos en la escena.
Modelo de AudioMedia
La navegación del aprendiz en AudioMedia es simple. Esto
es así para no generar una dificultad extra al aprendiz. El
módulo principal de AudioMedia es el editor, desde éste el
aprendiz puede acceder a las diferentes opciones que dispone
AudioMedia a través del teclado y con feedback auditivo.
El aprendiz puede solicitar desde la galería de medios los
diferentes medios disponibles y también puede insertar
sonidos que pregrabados a través de la grabadora de sonidos
del menú herramientas.
Las interfaces principales son:
Ejecución o Edición: Permite al usuario elegir entre abrir un
trabajo preexistente o comenzar la edición de uno nuevo.
Elección de plantillas: Contiene 9 plantillas predefinidas que
el usuario elige para cada una de las escenas.
Editor de Plantilla: Permite al usuario insertar medios desde
la galería de medios y revisar los elementos anteriormente
insertados
Herramientas: Permite interactuar con el micrófono y los
saltos a otras escenas.
Galería de Medios: Repositorio de medios que pueden ser
incluidos en la escena que se está editando.
Opciones: Permite las operaciones de guardar, eliminar,
ejecutar y salir del proyecto.
La figura 1. muestra el modelo de navegación del software.
FUNCIONALIDADES DE AUDIOMEDIA
Teclado
El teclado es la interfaz principal con la cual el usuario
interactúa con el software. Las teclas que se utilizan son:
TAB: La función principal de esta tecla es la de selección de
elementos, permitiendo un desplazamiento lineal sobre todos
los elementos.
ENTER: Esta tecla tiene como función principal la elección
de elementos disponibles, permitiendo la ejecución de las
funcionalidades disponibles.
FLECHAS DE TECLADO: Permite elegir en alguno de los
menús elementos de sub-módulos.
Ejecución o Edición
El sistema permite 2 tipos de modalidades: Ejecución,
que permite de forma rápida y dinámica ejecutar alguna
presentación que se encuentre disponible en el equipo y
Edición, que permite crear las presentaciones, mostrando
la galería de imágenes, herramientas disponibles y las
funcionalidades básicas para grabar, abrir, ejecutar y crear
una nueva escena.
218
Santiago, Chile • 1, 2 y 3 Diciembre 2004
MEMORIAS TISE 2004
Uso de Galería de Medios
Al momento de seleccionar el menú de galería de medios
quedan disponibles los 3 tipos de medios que pueden
ser insertados en la escena en la cual se está trabajando
(Imagen, sonido y video).
Imagen o video: Al elegir algún medio gráfico estático
o dinámico, éste se inserta automáticamente en el medio
disponible para gráficos de la plantilla seleccionada para
la escena. Las opciones disponibles para el manejo de este
tipo de medios son: Tamaño de la imagen (3 niveles) y
posición horizontal.
Sonido: Al elegir un medio de audio, este puede ser
asociado a algún elemento de los ya insertados en pantalla,
o definirlo como sonido ambiental (sonido de fondo propio
a la escena). Además, es posible definir la intensidad del
volumen para este sonido.
Uso de Herramientas
El uso del módulo de herramientas cuenta con dos
funcionalidades:
Cuadro de Texto: El cual permite la inserción de
texto en alguno de los elementos disponibles en la plantilla
elegida que sea de tipo texto. Las opciones desplegadas
son: Ancho del cuadro de texto y posición horizontal del
cuadro de texto.
Micrófono: Esta funcionalidad permite ingresar
sonidos a la galería de sonidos. Al activarla se escucha un
mensaje que solicita al usuario iniciar y para la grabación,
se usa la barra espaciadora. Luego de ser grabado el
sonido, automáticamente comienza otra grabación que
posteriormente identificará al sonido.
Menús para Proyectos
Cuando se interactúa con el AudioMedia cada trabajo
puede ser grabado en el disco duro para seguir trabajando
posteriormente. Los menús disponibles para los proyectos
y escenas son : Abrir proyecto, Guardar proyecto, Ejecutar
proyecto, Crear nueva escena, Eliminar escena
PRIMERA EVALUACIÓN DE USABILIDAD
Se realizó una primera evaluación de usabilidad con un
grupo de 3 jóvenes entre 18 y 25 años de edad. La actividad
consistió en realizar una presentación usando los elementos
disponibles en el software, en este caso, imágenes de animales
y animaciones de un reloj.
Luego de entrenarlos en el uso de teclas y funcionalidades
de AudioMedia, comenzaron a crear su proyecto. Cada
evaluación duró aproximadamente 1.5 horas. El evaluador
recopiló los comentarios realizados por los alumnos. Estos
comentarios fueron de gran ayuda para minimizar los errores
técnicos propios del desarrollo de un software. Al final de
la actividad se aplicó la pauta de evaluación de usabilidad
predefinida [8].
El software tuvo buena acogida por parte de los alumnos,
estuvieron motivados y participaron de todas las tareas
dispuestas. Los comentarios más importantes fueron : “Los
sonidos que tiene son entretenidos”, “me gustó que hablara”,
“era entretenido que se pudiera grabar sonidos desde el
micrófono”, “no están disponibles todas las teclas”, “Le
agregaría más sonidos y fotos”, “me gustaría que se pudieran
manejar por completo sin ayuda del profesor”, ”lo usaría
para entretenerme, distraerme, para mostrar algo a otras
personas”.
CONCLUSIONES Y TRABAJO FUTURO
Este estudio presenta AudioMedia, un software que permite que
aprendices ciegos puedan diseñar sus propias presentaciones
multimediales y posteriormente interactuar con ellas. La idea
es que los aprendices puedan desarrollar habilidades de diseño
de presentaciones multimediales, de manera de acercarlos al
mundo de los multimedios como herramientas poderosas para
apoyar sus aprendizajes y desarrollo intelectual. En un trabajo
futuro AudioMedia será testeado con usuarios finales para
determinar el impacto de su uso en el desarrollo de habilidades
de diseño y evaluación.
219
9°Taller Internacional de Software Educativo TISE 2004
MEMORIAS TISE 2004
AGRADECIMIENTOS
Este estudio ha sido financiado por el Fondo Nacional de
Ciencia y Tecnología, Fondecyt, Projecto 1030158.
REFERENCIAS
1. Web Accessibility Initiative, (www.w3c.org)
2. Sánchez, J., Baloian, N., Flores H. (2004). A methodology
for developing audio-based interactive environments for
learners with visual disabilities. Proceedings of the World
Conference on Educational Multimedia, Hypermedia &
Telecommunications ED-MEDIA 2004. June 21-26, 2004.
Lugano, Switzerland, pp. 124
3. Kamel, H., Landay, J. (2002). Sketching images eyes-
free: A grid-based dynamic drawing tool for the blind. 1.
Proceedings of The Fifth International ACM SIGCAPH
Conference on Assistive Technologies, ASSETS 2002, pp.
33-40, Edinburgh, July 8-10, 2002
4. Petrucci L., Harth E., Roth P., Assimacopoulos A. and
Pun T. (2000). WebSound: a generic Web sonification tool
allowing HCI researchers to dynamically create new access
modalities. Proceedings of ACM CHI 2000, pp. 295-296.
Also published by SIGCHI publications, ACM Press. The
Hague, The Netherlands, April 1-6.
5. Sánchez, J., Baloian, N., Hassler, T., Hoppe U. (2003).
AudioBattleship: Blind Lear ners Collaboration through
Sound. Proceedings of ACM CHI 2003, pp. 798-799. Also
published by SIGCHI publications, ACM Press. Fort
Lauderdale, Florida, April 5-10
6. Sánchez, J., Flores, H. (2004). Memory enhancement
through audio. To be published in the Proceedings of
The Sixth International ACM SIGACCESS Conference
on Computers and Accessibility, Assets 2004, Atlanta,
Giorgia, USA, October 18-20, pp. 24-31.
7. Rigden, C. (1999). The eye of the beholder: Designing for
colour-blind users. British Telecommunications
Engineering, 17. Retrieved Feb. 6, 2004, from http://more.
btexact.com/ces/colours/colours.pdf.
Chapter
Full-text available
In this study we present AudioLink, an interactive audio-based virtual environment for children with visual disabilities to support their learning of science. AudioLink is a Role-Playing Game (RPG) for learning science concepts and scientific reasoning through audio. We analyzed how blind learners can learn science using audio as the main input/output interface and how to develop a challenging and engaging software. The usability of this software and a preliminary study of the cognitive impact were also evaluated. Results indicated that users considered the software was appealing, challenging and encouraging as a science learning tool. AudioLink promoted a free and independent interaction at the users’ own paces. Evidence indicates that blind children developed scientific thinking skills to identify a problem, build a strategy to solve it, and understand when it was solved.
Conference Paper
Full-text available
A number of studies have proposed interactive applications for blind people. One line of research is the use of interactive interfaces based on sound to enhance cognition in blind children. Even though these studies have emphasized learning and cognition, there is still a shortage of applications to assist the development and use of memory in these children. This study presents the design, development, and usability of AudioMemory, a virtual environment based on audio to develop and use short-term memory. AudioMemory was developed by and for blind children. They participated in the design and usability tested the software during and after development. We also introduce AudioMath, an instance of AudioMemory to assist mathematics learning in children with visual disabilities. Our results evidenced that sound can be a powerful interface to develop and enhance memory and mathematics learning in blind children.
Conference Paper
Full-text available
In this paper we describe one method of transforming a mouse-based graphical user interface into a navigable, grid-based auditory interface. We also report the results of an experiment that tested the effectiveness of a drawing tool for the blind called IC2D that uses this interaction style. The experiment included eight visually impaired participants and eight blindfolded sighted participants. The results show that auditory interpretation of graphics is an effective interface technique for visually impaired users. Further, the experiment demonstrates that visually impaired users can develop meaningful drawings when given adequate technological support.
Conference Paper
Full-text available
A growing number of audio-based applications for blind learners have being produced in the last few years. Many of them focus on the development of 3D audio interfaces to map the entire surrounding space. Other studies center on the impact of sound interaction on cognition by evaluating the usability of these applications. No previous work has centered on using spatialized sound to develop collaborative skills in blind learners. This ongoing research study introduces AudioBattleShip, an interactive audio-based environment to enhance collaboration and cognition in blind learners. AudioBattleship mimics the traditional game battleship for sighted people but without visual cues. A preliminary pilot study has been implemented showing that blind children collaboration can be enhanced through the interaction with spatialized sound.
Conference Paper
Full-text available
Educational software has been criticized for not using explicit models to generalize and replicate good practices. Actually almost every educational program has a model, but most of them remain implicit. In this paper we propose a methodology for developing educational software for children with visual disabilities. Multimedia software for these children has some particularities reflected on our model with emphasis on process modelling including learner evaluation and feedback. The model emerges from research on developing educational software for children with visual disabilities and studies concerning the design of educational software for sighted learners. The model was validated by special education teachers and software designers trying the model with five software products based on model heuristics.
Article
Full-text available
The World Wide Web (WWW) has recently become the main source of digital information accessible everywhere and by everyone. Nevertheless, the inherent visual nature of Internet browsers makes the Web inaccessible to the visually impaired. To solve this problem, non-visual browsers have been developed. One of the new problems, however, with those non-visual browsers is that they often transform the visual content of HTML documents into textual information only, that can be restituted by a text-tospeech converter or a Braille device. The loss of spatial layout, and textual attributes such as boldface, italic, underline, color or even size should be avoided since they often bear visually important information. Moreover, typical non-visual Internet browsers do not allow visually impaired and sighted individuals to easily work together using the same environment. These new problems have to be solved with new alternative non-visual display techniques. This paper presents WebSound, a new gener...
Article
Colour-blind computer users see things differently from most people, but this is seldom considered in the design of software or Web pages. This article offers a simple technique for simulating the differences, to help designers and developers avoid disadvantaging their users.
Blind Learners Collaboration through Sound Also published by SIGCHI publications
  • Audiobattleship
AudioBattleship: Blind Learners Collaboration through Sound. Proceedings of ACM CHI 2003, pp. 798-799. Also published by SIGCHI publications, ACM Press. Fort Lauderdale, Florida, April 5-10