La Determinacin de la Calidad de Objetos de Aprendizaje

Csar E. Velzquez A., Jaime Muoz A., Francisco lvarez R., Laura Garza G. Centro de Ciencias Bsicas, Universidad Autnoma de Aguascalientes, Mxico Av. Universidad No. 940, Col. Universidad, Aguascalientes, Aguascalientes, Mxico vace555@hotmail.com, jmunozar, rjalvar@correo.uaa.mx, fjalvar@correo.uaa.mx, lg@correo.uaa.mx

Resumen
El inters por la generacin de objetos de aprendizaje con una cuidada calidad de contenido actualmente va en aumento en muchas instituciones educativas y corporaciones tanto pblicas como privadas a nivel nacional como internacional, esto debido a que ven en este nuevo medio informtico una poderosa forma de armar cursos de educacin a distancia y autoaprendizaje que seguramente sern fundamentales en los procesos educativos del futuro. En una investigacin desarrollada en la Universidad Autnoma de Aguascalientes apartir del ao 2006 se ha comenzado un profundo estudio sobre la calidad en objetos de aprendizaje, tanto para determinar claramente la amplitud del problema como para proponer estrategias en un aseguramiento ptimo de la calidad de contenido de los mismos. En el presente artculo se mostrarn los avances obtenidos con relacin a la declaracin de los elementos que determinan la calidad de un objeto de aprendizaje, se establecer la diferencia entre la valoracin de un objeto de aprendizaje y la determinacin de la calidad del mismo, de igual forma se explicar la importancia de la consideracin del contexto del usuario en la determinacin de la calidad de contenido de un objeto de aprendizaje, se expondrn los esfuerzos internacionales con relacin a lograr un aseguramiento de la calidad en objetos de aprendizaje y se propondrn estrategias generales para determinar y asegurar la calidad de contenido en objetos de aprendizaje.

1. Introduccin
La calidad en objetos de aprendizaje puede abordarse desde distintas perspectivas y en diversos momentos de su propio ciclo de vida. Por un lado tenemos la parte tecnolgica del OA, la cual es semejante a la de cualquier otra aplicacin de software. La calidad del software es el cumplimiento de los requisitos de funcionalidad y desempeo explcitamente establecidos, de los estndares de desarrollo explcitamente documentados y de las caractersticas implcitas que se esperan de todo software desarrollado profesionalmente [2]. Desde el punto de vista tecnolgico podemos indicar que un producto de software posee calidad de diseo y calidad de concordancia [2]. Con relacin a los objetos de aprendizaje tenemos que la calidad de diseo se refiere a todo lo relacionado con el diseo del objeto de aprendizaje como es la seleccin del metadato adecuado para el objeto de aprendizaje y de los elementos que lo deben integrar (textos explicativos, grficas, fotografas, msica, texto hablado, videos, animaciones, evaluaciones, mdulos de experimentacin, hipervnculos) para que sea eficaz en el proceso de aprendizaje dependiendo del contexto en que se aplique. La calidad de concordancia se refiere al grado de cumplimiento de los estndares y recomendaciones definidas para el objeto de aprendizaje. Con relacin a la calidad del componente educacional del OA, tenemos que esta se cumplir en mayor grado cuanto ms se logre el objetivo de obtener un aprendizaje significativo en el usuario, que en este caso es el alumno.

Palabras clave: Objeto de aprendizaje, calidad de

contenido, metadato, educacin a distancia.

Arturo Hernndez, Jos L. Zechinelli (Eds.) Avances en la Ciencia de la Computacin 2006, pp. 346-351

La preocupacin por crear OA con una cuidada calidad de contenido ha dado lugar a que algunas organizaciones hallan propuesto algunas soluciones, tal es el caso de AEFOL (asociacin espaola de elearning) [5] en colaboracin con una de las mayores empresas certificadoras de Espaa que desarrollo el sello de calidad que tiene como objetivo aportar garanta y valor al e-learning mundial, el cual fue presentado durante la V edicin EXPOELERANING desarrollada durante marzo de 2006 en Barcelona Espaa, donde la temtica central fue la calidad del elearning [6].

requerimientos del estudiante como son la edad, complejidad, manejo de medios, etc. [1]

3. Propuesta
Cuando nos damos a la tarea de determinar la calidad de un OA es necesario estar conscientes que nos encontramos frente a un producto informtico y educacional de manera simultanea, por lo que la calidad de producto en este caso debe considerar los distintos aspectos de un desarrollo de software que emplea el paradigma de objetos y sabemos que deben existir consideraciones relacionadas a un producto de tipo educativo. En base a lo anterior y con la finalidad de facilitar el estudio de la calidad de un OA podemos
Elementos Tecnolgicos Elementos Pegaggicos Elementos de Contenido Elementos Estticos

2. Problema
Con relacin a los problemas y peligros de la falta de medios para asegurar la calidad de contenido en OA algunos son los siguientes:

Posibilidad de ensear contenidos obsoletos. Peligro de exponer al estudiante a material malintencionado. Peligro de exponer al estudiante a material no apto para l (material bienintencionado pero mal asignado o escogido). Desconfianza en la adquisicin de contenidos educativos electrnicos, con lo que se reduce la posibilidad de comercializacin de los mismos.

Calidad de un Objeto de Aprendizaje

Algunos de los beneficios de un estudio detallado de la calidad de contenido en OA seran los siguientes:

Fig. 1 Elementos que determinan la calidad de un OA

Crear estndares de calidad para OA. Contar con metadatos ms robustos y descriptivos desde el punto de vista de la calidad de contenido. Incrementar posibilidades de xito tanto en cursos presenciales como a distancia. Facilitar la bsqueda automatizada de OA que cumplan con los requerimientos del usuario (esto se lograr s al profundizar en el estudio de la calidad de contenido en OA se propone el uso de metadatos ms robustos y descriptivos desde el punto de vista de la calidad de contenido). Facilitar la comercializacin de contenidos educativos por medios electrnicos, con lo que las universidades pueden hacerse de recursos comercializando parte del trabajo acadmico y de investigacin que se realiza. La posibilidad de armar en forma automatizada cursos considerando las necesidades y

distinguir que existen aspectos tcnicos, pedaggicos, de contenido y estticos, como podemos observar en la figura 1. Elementos Tecnolgicos Los aspectos tcnicos pueden abordarse desde la perspectiva de ingeniera de software considerando que nos encontramos frente a un producto de software que se desarrolla empleando el paradigma de objetos. Dentro de los elementos tecnolgicos podemos mencionar todos aquellos que permiten que un objeto de aprendizaje pueda proporcionar las ventajas que se atribuyen a los productos realizados bajo el paradigma del desarrollo orientado a objetos como es por ejemplo la reutilizacin y la adaptabilidad. [1] , como se puede observar en la figura 2.

347

Elementos Pedaggicos
Reutilizacin Elementos Tecnolgicos Adaptabilidad

cuales entraran dentro de los de contenido puede llegar a generar cierto debate. Elementos de Contenido
Confiabilidad de la fuente Obsolescencia del contenido Elementos de Contenido Extensin del contenido Complejidad del tema
Nivel de Detalle de la Informacin

Ambito de la Informacin (Informtica / Matemticas / Biologa / Fsica ) Ao de Publicacin

Fig. 2 Elementos tcnolgicos de un OA

Con relacin a los aspectos pedaggicos, de contenido y estticos nos encontramos con el problema de que la definicin de calidad para estos elementos se considera subjetiva en gran medida, por lo que es necesario determinar que aspectos se van a poder cuantificar y cuales por necesidad debern permanecer subjetivos. No todas las mtricas pueden ser plenamente objetivas. El esfuerzo por desarrollar medidas precisas de la calidad del software en ocasiones se frustra por la naturaliza subjetiva de la actividad. [2] Dentro de los elementos pedaggicos encontramos todos aquellos que facilitan el proceso enseanza aprendizaje como son por ejemplo el nmero de ejemplos usados, la posibilidad de experimentacin y la posibilidad de evaluacin, entre otros elementos [1]. Estos elementos se muestran en la figura 3.
Nmero de medios usados Nmero de ejemplos usados

Fig. 4 Elementos de contenido de un OA

Dentro de los elementos de contenido tenemos a aquellos que nos dan informacin sobre la complejidad del tema y el nivel de detalle con que se aborda en el objeto de aprendizaje dentro de los que encontramos la complejidad del tema, el nivel de detalle de la informacin, entre otros elementos. [1] Los elementos de contenido se pueden observar en la figura 4. Elementos Estticos Los objetos de aprendizaje comparten varias caractersticas comunes con otras aplicaciones informticas como es el caso de las WebApp (Sistemas y aplicaciones basados en Web). Una parte innegable de la apariencia de una WebApp es su presentacin y la disposicin de los elementos. Cuando una aplicacin se disea para comercializar o vender productos o ideas, la esttica puede tener tanto que ver con el xito como el diseo tcnico. [2] Los aspectos estticos de un objeto de aprendizaje se refieren a la presentacin de la informacin (fuentes, colores, tamao, en s todos los elementos de formato) y la disposicin de la misma (acomodo simtrico o asimtrico, etc.) como se puede observar en la figura 5. Medicin de OA contra la determinacin de la calidad de OA. Tenemos que la calidad del software es el cumplimiento de los requisitos de funcionalidad y desempeo explcitamente establecidos, de los estndares de desarrollo explcitamente documentados y de las caractersticas implcitas que se esperan de todo software desarrollado profesionalmente. [2]

Elementos Pedaggicos

Manejo de Experimentacin Manejo de Evaluacin Manejo de Colaboracin Manejo de Relacin

Fig. 3 Elementos pedaggicos de un OA

Es importante aclarar que el definir que elementos pueden ser considerados dentro de pedaggicos y

348

Uso adecuado de fuentes Uso adecuado de colores

Elementos estticos

Proporcionalidad adecuada de los elementos

en el contenido entre otras caractersticas. Las especificaciones implcitas son aquellas que el usuario no necesariamente va a poder manifestar en forma consciente, pero van a ser determinantes para un ptimo aprovechamiento del objeto de aprendizaje como puede ser el estilo de aprendizaje. El trmino estilo de aprendizaje se refiere al hecho de que cada persona utiliza su propio mtodo o estrategias a la hora de aprender. Aunque las estrategias varan segn lo que se quiera aprender, cada uno tiende a desarrollar ciertas preferencias o tendencias globales, tendencias que definen un estilo de aprendizaje. Se habla de una tendencia general, puesto que, por ejemplo, alguien que casi siempre es auditivo puede en ciertos casos utilizar estrategias visuales [3]. Los estilos de aprendizaje son los rasgos cognitivos, afectivos y fisiolgicos que sirven como indicadores relativamente estables, de cmo los alumnos perciben interacciones y responden a sus ambientes de aprendizaje [4] . Los rasgos cognitivos tienen que ver con la forma en que los estudiantes estructuran los contenidos, forman y utilizan conceptos, interpretan la informacin, resuelven los problemas, seleccionan medios de representacin (visual, auditivo, kinestsico), etc. Los rasgos afectivos se vinculan con las motivaciones y expectativas que influyen en el aprendizaje, mientras que los rasgos fisiolgicos estn relacionados con el biotipo y el biorritmo del estudiante [3]. En base a lo anterior resulta necesario conocer el estilo de aprendizaje que predomina en el estudiante esto con la finalidad de saber si se usarn principalmente medios visuales, auditivos o kinestesicos en la creacin del objeto de aprendizaje. Una vez que se conoce el estilo de aprendizaje y tenemos una medicin de los elementos del objeto de aprendizaje puede ser posible hacer una determinacin de la calidad del OA. Para hacer una medicin del OA se puede usar un formato como el mostrado en la tabla1, tabla2 y tabla3 que aparecen a continuacin. Una vez que se ha llenado el formato, contamos con la medicin de los elementos del OA, esta informacin puede guardarse en un repositorio para ser consultada cuando se requiera. Una forma para realizar este almacenamiento es definiendo metadatos ms robustos

Disposicin adecuada de los elementos

Simetra de los elementos Consistencia en el acomodo de los elementos

Fig. 5 Elementos Estticos de un OA

Cuando nos referimos a un objeto de aprendizaje tenemos que al igual que en cualquier otro producto de software la calidad va a estar determinada por el grado de cumplimiento de los requerimientos del usuario, tomando como base este principio podemos establecer dos postulados: 1.- La calidad de contenido de un objeto de aprendizaje solo se puede determinar en el contexto de un determinado tipo de usuario, ya que estar dada por el grado de cumplimiento de los requerimientos de este determinado tipo de usuario. 2.- En caso de que no se ubique el objeto de aprendizaje en el contexto de un determinado tipo de usuario, no es posible hablar de determinar la calidad de contenido de un objeto de aprendizaje (ya que no tendremos requerimientos de referencia), en este caso nos referiremos a una mera medicin de los elementos de contenido de un objeto de aprendizaje. En otras palabras, cuando no se conozca el contexto del usuario que usar un objeto de aprendizaje no podremos determinar la calidad de contenido del mismo y solo podremos hacer una medicin de los elementos del mismo. El contexto del usuario estar determinado por especificaciones explcitas e implcitas. Dentro de las especificaciones explcitas encontramos todas aquellas que el usuario puede expresar en forma consciente y nos dan una idea clara de sus necesidades de instruccin actuales como pueden ser la materia, tema y grado de estudios, su edad y el nivel de detalle deseado

349

y descriptivos de los elementos que determinan la calidad del OA; este es el objetivo de una investigacin que durante el 2006 y 2007 se estar desarrollando en la Universidad Autnoma de Aguascalientes.
Determinacin del contexto del Objeto de Aprendizaje Nivel educativo ptimo (Elegir uno de los siguientes) 1 2 3 4 5 Preescolar Primaria Secunda Bachiller Tcnico ria ato

Evaluacin Nmero de reactivos (valor entero de 0,1,2..n) Presenta proceso aletorio de eleccin de reactivos Colaboracin (Elemento kinestsico) Permite el manejo de colaboracin Relacin Permite el manejo de relacin SI NO SI NO SI NO

6 Licencia tura

7 Maestra

8 Doctora do

9 PostDoct orado

Elementos de contenido Caducidad de la informacin (Tiempo durante el cual la informacin se considera actualizada) 1.-minutos 2.- horas 3.- dias 4.- meses 5.- aos 6.- indefinido

Nivel educativo recomendado (Elegir uno o varios de los siguientes) 1 2 3 4 5 Preescolar Primaria Secunda Bachiller Tcnico ria ato

6 Licencia tura

7 Maestra

8 Doctora do

9 PostDoct orado

Caducidad de los conceptos (Tiempo durante el cual el concepto base, mtodo o regla se considera actualizada) 1.- dias 2.- meses 3.- aos 4.- indefinido Extensin del texto (Expresado en cuartillas) Complejidad (Considerando el nivel educativo ptimo) 1.-Moderada 2.-Media 3.-Alta

Elementos pedaggicos Elementos visuales Nmero de fotografas (valor entero de 0,1,2..n) Nmero de diagramas (valor entero de 0,1,2..n) Nmero de tablas (valor entero de 0,1,2..n) Personajes interactivos (S/N) SI NO Elementos estticos Presenta simetra el acomodo de los elementos Nmero de fuentes que emplea (valor entero de 0,1,2..n) SI NO Nmero de apariciones de personajes interactivos (valor entero de 0,1,2..n) Nmero de animaciones sobre procedimientos tcnicos (valor entero de 0,1,2..n) Nmero de animaciones sobre conceptos fsicos, biolgicos, qumicos, etc. (valor entero de 0,1,2..n) Nivel de detalle de la informacin (Considera que la informacin mostrada es) 1.-Incompleta 2.-Superficial 3.-Suficiente 4.-Detallada 5.-Muy detallada

Nmero de videos (valor entero de 0,1,2..n)

Tabla 1 Formato para medicin de OA de la UAA Parte 1

Elementos auditivos Msica de fondo (S/N) SI NO Nmero de secuencias musicales (valor entero de 0,1,2..n) Nmero de secuencias de sonidos demostrativos (valor entero de 0,1,2..n) Nmero de secuencias de texto hablado explicando el concepto (valor entero de 0,1,2..n) Ejemplos Nmero de ejemplos (valor entero de 0,1,2..n) Experimentacin (Elemento kinestsico) Permite el manejo de experimentacin Preevaluacin Presenta examen diagnstico (S/N) SI NO SI NO

Tabla 3 Formato para medicin de OA de la UAA Parte 3

Clasificacin: Elementos tecnolgicos Elemento a evaluar

Tabla 2 Formato para medicin de OA de la UAA Parte 2

En caso de conocer el contexto de un determinado usuario podemos establecer valores estndar para cada uno de los elementos del OA. Estos valores solo sern validos para el contexto del usuario. De igual forma, podemos asignar un peso determinado a cada uno de los elementos que estamos estudiando en el objeto de aprendizaje. Para ejemplificar lo anterior consideremos el caso del contexto de un estudiante de la Licenciatura en Tecnologas de Informacin, con un estilo de aprendizaje predominantemente visual; lo que tendremos que hacer es definir valores estndar y pesos para cada uno de los elementos del OA.

Estndar para el contexto Reutilizacin Recomendado Adaptabilidad Recomendado Calificacin de los elementos tecnolgicos 10 (Peso 10%) Clasificacin: Elementos pedaggicos Suma del nmero de fotografas, diagramas y 3-6 tablas (Elementos visuales) Personajes interactivos (Elementos visuales) Indistinto Nmero de animaciones sobre conceptos Indistinto fsicos, biolgicos, qumicos (Elementos visuales) Suma del nmero de animaciones de 1 procedimientos tcnicos y videos (Elementos visuales) Elementos auditivos Indistinto Ejemplos 1 por concepto Experimentacin Recomendado Preevaluacin Indistinto Evaluacin Recomendado Colaboracin Recomendado Relacin Recomendado Calificacin de los elementos pedaggicos 7 (Peso 40%) Clasificacin: Elementos de contenido Caducidad de informacin Indistinto Caducidad de conceptos Aos-indefinido Complejidad Indistinto Nivel de detalle de la informacin Suficiente-Muy detallada Calificacin de los elementos de contenido 10 (Peso 40%) Clasificacin: Elementos estticos Simetra el acomodo de los elementos Recomendado Nmero de fuentes que emplea 2 Calificacin de los elementos estticos 8 (Peso 10%) Calificacin general del objeto de aprendizaje 8.6

Medicin en el OA S S

Peso 50% 50%

Calificacin Bueno Bueno

3 No 0 0 No 4 No No S No No

30% 0% 0% 10% 0% 20% 10% 0% 20% 5% 5%

Bueno N/A N/A Deficiente N/A Bueno Deficiente N/A Bueno Deficiente Deficiente

Indefinido Indefinido Media Detallada

0% 30% 0% 70%

N/A Excelente N/A Bueno

S 1

80% 20%

Bueno Deficiente

Tabla 4 Formato para la determinacin de la Calidad de un OA de la UAA

Los valores estndar definidos para el contexto del estudiante se compararn con los valores resultado de la medicin del OA, se asignar una calificacin a cada uno y finalmente por medio de los pesos podremos dar una calificacin a todo el OA. En la tabla4 se muestra la forma en que se puede realizar esta determinacin de la calidad (Es necesario aclarar que los valores estndar y los pesos para este ejemplo son propuestos por el autor y por el momento tienen fines exclusivamente demostrativos).

350

En el ejemplo mostrado el OA obtiene una calificacin de 8.6, esto debido principalmente a que no maneja animaciones de procedimientos tcnicos y videos, y al tratarse de un alumno con un contexto predominantemente visual, el OA alcanza una calificacin de 7 en los elementos pedaggicos. Es importante sealar que para un contexto en el que el estilo de aprendizaje fuera predominantemente auditivo, se tendran que modificar los valores estndar y los pesos, y debido a que el OA no maneja elementos auditivos, obtendra una calificacin an ms baja en la determinacin de la calidad de los elementos pedaggicos. Lo anterior nos confirma la importancia que tiene el contexto del usuario en la determinacin de la calidad del OA.

OA. Por medio de la valoracin previa realizada a un objeto de aprendizaje y con el conocimiento del contexto del usuario del mismo es posible la determinacin de la calidad de contenido para ese determinado usuario.

5. Referencias
[1] Velzquez Csar, et al, (2005), La Importancia de la Definicin de la Calidad del Contenido de un Objeto de Aprendizaje IV Congreso Internacional de Ciencias de la Computacin, ENC 2005 [2] Ingeniera de Software, Roger S. Pressman, 6 Edicin, Mc Graw Hill, Impreso en Mxico, 200 [3] Cazau Pablo (2001), Generalidades,CIIDET, Estilos de Aprendizaje:

4. Conclusiones
La calidad de un OA esta determinada por aspectos tcnicos, pedaggicos, de contenido y estticos Tenemos que para poder determinar la calidad de contenido de un objeto de aprendizaje debemos conocer a detalle el contexto del usuario. En caso de que desconozcamos el contexto del usuario solo podremos realizar una valoracin de los elementos del

http://www.itnl.edu.mx/docs/material21/EstilosAprendizaje/Lecturas /Estilos%20de%20aprendizaje%20Generalidades.pdf

[4] Alonso Catalina et al (1994), Los estilos de aprendizaje: procedimientos de diagnstico y mejora, Ediciones Mensajero, Bilbao. Espaa [5] www.aefol.com [6] http://www.aefol.com/elearning/calidad.asp

351