Evaluación de la accesibilidad en las plataformas MOOC en español: UNED COMA, COLMENIA y Miriada X Francisco Iniesto; Covadonga Rodrigo Departamento de Lenguajes y Sistemas Informáticos Universidad Nacional de Educación a Distancia (UNED) Madrid, España
[email protected],
[email protected] Resumen—El presente artículo desarrolla una metodología en el análisis de la accesibilidad de los cursos MOOC y para ello se ha centrado en el análisis del nivel de accesibilidad de tres de las plataformas MOOC en español: UNED COMA, COLMENIA y Miriada X, para lo cual se han usado cuatro pautas distintas de evaluación: herramientas automáticas, simuladores de discapacidad, herramientas de testeo y finalmente a través del contenido educativo. Palabras Clave—Accesibilidad, MOOC, herramientas automáticas, simuladores de discapacidad, herramientas de testeo, recursos educativos.
I.
interactivos (test, autoevaluaciones,…) en estos cursos añade una nueva dificultad a los requerimientos de accesibilidad, ya que se incluyen nuevos elementos que amplían la brecha digital (y no sólo a las personas con discapacidad). El análisis de la accesibilidad es el objetivo del presente trabajo, que se ha circunscrito al estudio de algunas de las plataformas MOOC disponibles en español. A continuación se describen las propias plataformas, las pautas de la evaluación realizada así como las herramientas escogidas, finalizando con las conclusiones principales del estudio. II.
INTRODUCCIÓN
El cambio desde las plataformas educativas cerradas a entornos de aprendizaje abiertos, como es el caso de los MOOCs (Cursos online masivos y abiertos) es reflejo de la evolución de la educación abierta en Internet que ha posibilitado que miles de personas de todo el mundo sigan diferentes iniciativas educativas [1] [2]. Pero la calidad en la enseñanza no viene garantizada por el uso de las nuevas tecnologías sino que cualquier nueva metodología de enseñanza a través de Internet supone tanto un cambio tecnológico como de capacitación para todos los agentes involucrados. En España crece cada año el número de estudiantes con discapacidad que utilizan productos de apoyo y/o requieren adaptaciones para disfrutar de los recursos ofrecidos en la educación superior existiendo una proporción creciente de los mismos que tienen una discapacidad oficialmente reconocida y que elige las universidades de educación a distancia para sus estudios (como ejemplo la matrícula en la UNED fue de ocho mil estudiantes en el curso 2012/2013, aproximadamente la mitad de los estudiantes universitarios con discapacidad en España). A pesar de su carácter eminentemente aperturista, el propio acceso a los MOOCs y sus plataformas puede suponer una dificultad añadida para este colectivo, debiendo además desarrollar nuevas competencias específicas y cambiantes. La introducción de contenidos audiovisuales y elementos
LAS PLATAFORMAS MOOC: UNED COMA, COLMENIA Y MIRIADA X
Se han elegido estas plataformas las cuales han sido prolíficas en el desarrollo de cursos MOOC en español [3], [4] con una importante labor realizada en 2013 donde en nuestro país a octubre de ese año había casi cien cursos MOOC disponibles: •
•
•
La plataforma UNED COMA fue una de las primeras plataformas libres de MOOCs en español que permite la creación y gestión de cursos masivos de una manera autónoma, sencilla e intuitiva y que dispone de un sistema propio de calidad [5] y [6]. COLMENIA es una comunidad que agrupa a diversas comunidades de aprendizaje como son UnX (la primera comunidad Iberoamericana de emprendimiento) y Weprendo (una comunidad móvil de emprendimiento digital), que tienen en común el sistema de enseñanza a través de cursos MOOC. Miríada X es una plataforma MOOC surgida a principios de 2013. Está promovida por Telefónica Learning Services y Universia siendo esta última la mayor red de universidades de habla hispana y portuguesa.
III.
METODOLOGÍA DE ANÁLISIS DE LA ACCESIBILIDAD
El análisis de la accesibilidad presentado en este trabajo se basa en la metodología recogida en trabajos y en guías ya publicadas [7], [8] [9] y [10] para lo que se realiza una selección de un conjunto de páginas Web como ejemplo representativo de
233
F. Iniesto; C. Rodrigo - Evaluación de la accesibilidad en las plataformas MOOC en español: UNED COMA, COLMENIA y Miriada X
cada una de las plataformas y de los recursos educativos como son: • • • • • •
Página de inicio de la plataforma. Página de formulario. Página característica del curso. Página de foro del curso. Un recurso educativo de producción propia y característico Los videos o píldoras.
Los cursos seleccionados han sido: "España+Francia+Cerca I" de UNED COMA, "Emprendimiento y Desarrollo de Aplicaciones de Realidad Aumentada" de COLMENIA y "Estrategias de Marketing Online. Community Manager" de Miriada X. La metodología de evaluación propia se divide en cuatro pautas: • • • •
Evaluación mediante herramientas automáticas. Evaluación mediante simuladores de discapacidad. Evaluación mediante herramientas de testeo. Evaluación a través del contenido educativo.
La metodología tiene un enfoque automático por lo tanto los resultados muestran especialmente los problemas de accesibilidad relativos a la discapacidad visual. La normativa aplicable son las pautas de accesibilidad para contenido Web WCAG 2.0 [11]. A. Evaluación mediante herramientas automáticas Las pautas WCAG 2.0 se organizan en cuatro principios fundamentales para la accesibilidad del contenido: perceptible, operable, comprensible y robusto. Dichos principios son importantes para la realización de la validación automática siguiendo las pautas WCAG 2.0 para lo cual se ha realizado el test online de eXaminator al conjunto de las páginas seleccionadas. La herramienta eXaminator adjudica una puntuación entre 1 y 10 como un indicador rápido de la accesibilidad de las páginas y a su vez incorpora valoraciones según su impacto en una serie de perfiles de usuarios. Las valoraciones individuales sirven para obtener una calificación para cada uno de los perfiles y la calificación final de la página se obtiene promediando las 5 calificaciones parciales correspondientes a la limitación total para ver, grave para ver, de los miembros superiores, para comprender y limitaciones derivadas de la edad Esta herramienta proporciona distintos baremos del conjunto de pruebas realizadas siendo categorizados como "excelentes" o "muy bien" aquellos puntos que se han aplicado de una manera correcta y "regular", "mal" y "muy mal" aquellos que proporcionan problemas de accesibilidad según las pautas. Al finalizar el análisis la herramienta ofrece una nota calculada como baremo ponderado. Los resultados se observan en la Tabla I.
234
La validación con eXaminator detecta que las tres plataformas tienen gran cantidad de errores muy malos o críticos lo cual les lleva a tener notas medias. En algún caso, es incluso la propia página de inicio de la plataforma o del curso la primera que adolece de problemas críticos de accesibilidad. Estas páginas son obligadas para el acceso de cualquier estudiante y deberían ser (conceptualmente) las primeras en ser accesibles. Al observar con detenimiento los resultados positivos obtenidos hay que destacar que las tres aplicaciones comparten algunos puntos como son que no se usan atributos para controlar la presentación visual y que las páginas contienen un elemento title. TABLA I RESULTADOS OBTENIDOS DE LA VALIDACIÓN AUTOMÁTICA. UNED COMA
Excelente muy bien y bien
Regular
Mal
Muy Mal
Nota
Inicio Formulario Curso Foro Valor Medio COLMENIA Inicio Formulario Curso Foro Valor Medio Miriada X Inicio Formulario Curso Foro Valor Medio
7 7 7 6
1 1 1 2
4 2 4 4
1 3 3 1
6.6 5.8 5.9 6.2 6.1
5 5 7 6
2 3 2 1
7 8 7 5
6 4 1 5
4.5 4.7 5.4 6.2 5.2
4 6 4 6
1 3 3 3
4 8 5 8
7 4 6 4
4.2 4.5 4.1 4.5 4.3
En el caso de UNED COMA y COLMENIA comparten además que no hay elementos link para navegación y se usan elementos de encabezado. UNED COMA tiene positivamente en su plataforma que se identifica el idioma principal de la página y que todos los formularios tienen un botón de envío. Las evaluaciones particulares obtenidas en las plataformas con la herramienta eXaminator se presentan en la Tabla II, detallando cada perfil analizado. Se puede comprobar que en UNED COMA las notas más bajas están relacionadas con la limitación para comprender, en COLMENIA y Miriada X en las limitaciones para ver y los miembros superiores. Las tres plataformas desafortunadamente comparten un conjunto importante de problemas ya que se especifican valores absolutos para el tamaño de las fuentes, hay enlaces con el mismo texto pero diferentes destinos, el primer enlace de la
XVI Simposio Internacional de Informática Educativa (SIIE’14)
F. Iniesto; C. Rodrigo - Evaluación de la accesibilidad en las plataformas MOOC en español: UNED COMA, COLMENIA y Miriada X
página no lleva al contenido principal de la página, existen elementos iframe sin title y hay imágenes sin alternativas textuales. En el caso de UNED COMA y COLMENIA comparten casos donde se usa texto justificado en las CSS. En COLMENIA y Miriada X se observa en los problemas el porqué se producen las limitaciones en la vista y miembros superiores ya que se asocian eventos a elementos no interactivos, hay formularios sin botones de envío, no existen enlaces para saltar bloques de contenido y falta el código de idioma en el atributo lang. Para el curso de Miriada X algunos fallos importantes son que hay enlaces cuyo contenido es sólo una imagen sin alternativa textual, en casos se usan medidas absolutas para indicar el ancho de un elemento, hay tablas sin celdas de encabezados y hay tablas que contienen una o más tablas anidadas. TABLA II. UNED COMA Inicio Formulario Curso Foro Valor Medio COLMENIA Inicio Formulario Curso Foro Valor Medio Miriada X Inicio Formulario Curso Foro Valor Medio
RESULTADOS DIFERENCIADOS POR LIMITACIÓN. Total para ver 7.2 6 6.5 6 6.4
Grave para ver 6.4 6.4 5.7 6.5 6.2
Miemb ros
Compre nder
Edad
6.9 5 5.8 6.6 6.1
5.7 5.4 5.3 5.8 5.5
6.5 6.2 6 6.1 6.2
4.5 4.2 4.5 5.3 4.6
4.7 5 5.7 6.7 4.4
4.2 4.2 4.9 5.7 4.7
5.2 5.2 6 7.1 5.9
5.2 5.5 6.2 7.1 6
4 4.3 3.6 4.3 3.3
4.3 4.7 4.5 4.7 4.5
3.6 4.2 3.5 4.2 3.9
4.3 4.6 4.3 4.6 4.4
4.6 4.8 4.8 4.8 4.7
B. Evaluación mediante simulador de discapacidad visual. Para realizar esta evaluación simulando discapacidades se ha utilizado aDesigner que es un simulador de discapacidad que ayuda a los diseñadores a asegurar que el contenido y las aplicaciones son accesibles y utilizables por personas con discapacidad visual. Se realizan simulaciones en las distintas páginas siguiendo dos opciones de simulación: simulador de personas ciegas y simulador de personas con visión reducida. Realizando las pruebas para el simulador de personas ciegas la propia herramienta avisa que las páginas en su mayoría pueden cumplir con las guías necesarias realizando algunas modificaciones y que la estructura de la página es buena para operar por usuarios ciegos. De los problemas encontrados algunos ya han sido detectados por la herramienta automática eXaminator y detalladas en el apartado anterior, como la aparición de imágenes sin el atributo alt, que la página tenga
XVI Simposio Internacional de Informática Educativa (SIIE’14)
varios elementos html, el uso de medidas relativas para el tamaño de la fuente y el uso de información textual redundante. Sin embargo algunos problemas han sido encontrados gracias al uso de esta herramienta, en el caso de las pruebas con el simulador de personas con visión reducida el propio simulador enfoca que hay problemas de distinción de colores, encontramos que los entornos convergen en los errores detectados principalmente en que la combinación de colores de fondo y texto son difíciles de distinguir y las fuentes demasiado pequeñas y con tamaño fijo. Por todo ello, se podrían enunciar algunas recomendaciones para mejorar la accesibilidad en ambos entornos que son de fácil cumplimiento como mejorar la combinación de colores, evitar el uso de fuentes fijas, evitar la redundancia de información en los textos y enlaces con el mismo texto pero diferentes destinos. C. Evaluación mediante herramientas de testeo. Para este punto se ha usado la herramienta de testeo SortSite que se trata de una herramienta que no sólo permite validar la accesibilidad de una página Web sino que también comprueba aspectos complementarios y necesarios como la usabilidad, SEO (posicionamiento en buscadores), compatibilidad entre navegadores, errores en el código, privacidad y validación de estándares, lo que permite hacer una evaluación que engloba a las anteriores en ámbitos necesarios para una persona con discapacidad. No se ha tenido en cuenta el análisis de accesibilidad que hace está herramienta puesto que no arroja datos nuevos así como aquellos aspectos que no influyen en la misma. Diferenciando los resultados obtenidos por cada aspecto se observan errores generales como la aparición de enlaces rotos en todas las plataformas, el incorrecto uso de las cookies por la ausencia de políticas de privacidad en ninguna de las plataformas y fallo de las tres plataformas en términos de estandarización con el W3C HTML/XHTML [12]. D. Evaluación a través del contenido educativo. Para realizar la evaluación de la accesibilidad se han tenido una serie de criterios propuestos por Sánchez Caballero [13]. En el caso UNED COMA y el curso "España+Francia+Cerca" los recursos que se proporcionan al usuario son en gran medida documentos PDF, algunos de ellos son documentos escaneados con imágenes que impiden completamente que el contenido sea accesible. Los tipos de recursos proporcionados por UNED COMA son: PDFs de documentos escaneados, de producción propia y de producción externa, audio en formato mp3 y enlaces a páginas y videos externos a la plataforma. El curso “Emprendimiento y Desarrollo de Aplicaciones de Realidad Aumentada” al ser un curso técnico proporciona documentos de apoyo en formato comprimido o de la aplicación informática que se aprende en el curso, además de guías de
235
F. Iniesto; C. Rodrigo - Evaluación de la accesibilidad en las plataformas MOOC en español: UNED COMA, COLMENIA y Miriada X
apoyo de producción propia en PDF. En "Estrategias de Marketing Online. Community Manager" de Miriada X se proporcionan documentos PDF de producción propia. En la Tabla III se puede ver el análisis realizado sobre estos documentos. TABLA III.
ANÁLISIS SOBRE LOS RECURSOS EDUCATIVOS.
Estilo Sans-serif Jerarquía visual Contraste Subrayado Permitan adaptar el volumen del sonido Texto, símbolos o imágenes para los materiales auditivos Las imágenes han de ser de alta resolución Gráficos y tablas con títulos y resúmenes
UNED COMA No, Times New Roman Correcto Correcto
COLMENIA Si, Calibri
Miriada X Si, Calibri
Correcto Correcto
Correcto Correcto
Correcto No Aplica
Correcto Correcto, abuso de colores No Aplica No Aplica
No proporcionado
No Aplica
No Aplica
Baja resolución
Baja resolución
Resolución media
No proporcionado
No proporcionado
No proporcionado
En el caso de las píldoras visuales o videos educativos encontramos unanimidad en no ofrecer contenidos alternativos como se puede ver en la Tabla IV. TABLA IV.
ANÁLISIS SOBRE LOS VIDEOS EDUCATIVOS O PÍLDORAS.
Incluir subtitulado Intérprete del lenguaje de signos. Incluir el contenido del audio en texto
IV.
UNED COMA No No
COLMENIA
Miriada X
No No
No No
No, sólo videos en francés
No
No
RESULTADOS Y CONCLUSIONES
La importancia de los cursos MOOC estriba en la posibilidad de acercar y facilitar una formación gratuita y abierta a colectivos globales de personas ofreciendo al mismo tiempo calidad formativa en un entorno de aprendizaje apoyando en el uso intensivo de las TIC. Desafortunadamente los análisis preliminares mostrados en este trabajo demuestran que se han encontrado problemas graves para el acceso de este colectivo a la educación facilitada en este tipo de plataformas. Observando la última columna de la Tabla I se puede comprobar que todas las plataformas analizadas en este estudio obtienen resultados medios entre el 4 y el 6 que son muy mejorables. Asimismo, es interesante observar el porcentaje de cumplimiento de las pautas de accesibilidad de WCAG 2.0
236
calculado sobre el número de aciertos ("excelente" y "muy bien") sobre el total de pruebas realizadas. Las plataformas tienen valores medios distintos pero ninguna de ellas alcanza valores que podrían considerarse razonables (superiores al 60%) siendo para UNED COMA de un 50%, COLMENIA de un 31.5 % y Miriada X del 25.7%. Los resultados más bajos por limitaciones para UNED COMA vienen derivados de las dificultades en las pruebas de limitación para comprender los textos escritos y en general la navegabilidad. En los casos de COLMENIA y Miriada X en las limitaciones para ver y los miembros superiores. La plataforma UNED COMA parece estar mejor preparada para los estudiantes con dificultades de visión. Las tres plataformas presentan errores comunes como la aparición de enlaces rotos, el uso de las políticas de las cookies y con estándares del W3C. En cuanto a los contenidos educativos hay que ser conscientes de que no hay estándares dentro de las propias plataformas para crear un contenido educativo uniforme y accesible lo que serviría para su mejor reutilización y obtener resultados accesibles [14], es de destacar que incluso en varios de estos portales son distintas Universidades las que trabajan y producen el material, especialmente dramática es la falta de accesibilidad total en los recursos audiovisuales. Por tanto con el fin de superar estas barreras, es necesario continuar con la alfabetización digital de estos colectivos y lograr un seguimiento del alcance de los MOOCs entre ellos. V.
AGRADECIMIENTOS
Se agradece la disponibilidad de acceso a las plataformas UNED COMA, COLMENIA y Miriada X, así como el soporte de la Cátedra de Tecnología y Accesibilidad UNED - Fundación VODAFONE y a la Global OER Graduate Network (GO-GN). VI. [1]
[2]
[3]
[4]
[5]
[6]
REFERENCIAS
D. Cormier and G. Siemens, “Through the Open Door: Open Courses as Research, Learn- ing, and Engagement”. EDUCAUSE Review, 45(4), 30– 39. Retrieved from http://www.educause. edu/ero/article/through-opendoor-open-courses-research-learning-and-engagement, 2011. S. Haggard. “Massive open online courses and online distance learning: review”. GOV.UK Research and analysis. https:// www.gov.uk/government/publications/massive-open-online- courses-andonline-distance-learning-review, 2013. M. Oliver, D. Hernández-Leo, V. Daza, C. Martín y L. Albó. "Panorama actual de los Cursos Masivos Abiertos en Línea en las universidades españolas". MOOCs en España. Cátedra Telefónica - UPF Social Innovation in Education. Cuaderno Red de Cátedras Telefónica, 2014. M. Gaebler, “MOOCs Massive open online courses. EUA paper”. http://www.eua.be/Libraries/Publication/MOOCs_Update_January_2014.sf lb.ashx, 2014. T. Read and C. Rodrigo, “Toward a quality model for UNED MOOCs”. eLearning Papers. http://www.openeducationeuropa.eu/en/elearning_papers n.º 37, 2014. C. Rodrigo, T. Read, M. Santamaria, A. Sánchez-Elvira "OpenupEd Label for MOOCs Quality Assurance: UNED COMA Initial Self-Evaluation ". Libro de Actas del V Congreso Internacional sobre Calidad y Accesibilidad
XVI Simposio Internacional de Informática Educativa (SIIE’14)
F. Iniesto; C. Rodrigo - Evaluación de la accesibilidad en las plataformas MOOC en español: UNED COMA, COLMENIA y Miriada X de la Formación Virtual CAFVIR 2014 ISBN edición impresa: 978-992940-497-7 ISBN Eds. L. Bengochea, R. Hernández, J. R. Hilera González, p. 551 - 555, Antigua, Guatemala, 2014 [7] F. Iniesto, C. Rodrigo and A. Moreira Teixeira. "Accessibility analysis in MOOC platforms. A case study: UNED COMA and UAb iMOOC". Libro de Actas del V Congreso Internacional sobre Calidad y Accesibilidad de la Formación Virtual CAFVIR 2014 ISBN edición impresa: 978-9929-40497-7 ISBN Eds. L. Bengochea, R. Hernández, J. R. Hilera González, p. 545 - 550, Antigua, Guatemala, 2014 [8] Guia de validación de accesibilidad Web v1.0. Ministerio de Hacienda y Administraciones Públicas. Gobierno de España, 2014. [9] Requisitos de accesibilidad de un campus virtual. Guía metodológica para la implantación de desarrollos curriculares virtuales accesibles. Proyecto ESVIAL. Servicio de Publicaciones de la Universidad de Alcalá, 2013. [10] J.R Hilera, L. Fernández, E. Suárez, E.T. Vilar. "Evaluación de la accesibilidad de páginas web de universidades españolas y extranjeras
XVI Simposio Internacional de Informática Educativa (SIIE’14)
[11] [12] [13] [14]
incluidas en rankings universitarios internacionales". Revista Española de Documentación Científica, 36(1):e004., 2013 doi: http://dx.doi.org/10.3989/redc.2013.1.913.M. World Wide Web Consortium W3C, Web Content Accessibility Guidelines (WCAG) 2.0, 2008. XHTML2 Working Group Home Page. http://www.w3.org/MarkUp/ M. Sánchez Caballero, E-learning para todos. En: No Solo Usabilidad, nº 9. ISSN 1886-8592, 2010. S. Baldiris, O.C. Santos, C. Barrera, J.G. Boticario, J. Velez, R. Fabregat. “Integration of educational specifications and standards to support adaptive learning scenarios in ADAPTAPlan”. International Journal of Computer Science and Applications (IJCSA). Special Issue on New Trends on AI techniques for Educational Technologies, Technomathematics Research Foundation, Volume 5,1, New Delhy, p.88-107, 2008.
237
