EVALUACIN DE LA CALIDAD DE

LA TECNOLOGA EDUCATIVA
MNICA BERROTERN BRICEO


TUTOR: ERWIN LEONARDO COTES DAZ
Primero hablemos de qu es calidad: Propiedad o conjunto de propiedades
inherentes a algo, que permiten juzgar su valor RAE (2013).
Al ser juzgado, ste no corresponde a un concepto absoluto, ya que son los
usuarios los que con su apreciacin introducen un subjetivismo en el mismo.
Para lograrla se debe llevar a cabo una gestin de la calidad: Conjunto de
actividades coordinadas para dirigir y controlar una organizacin en lo relativo a la
calidad e incluye el establecimiento de polticas de calidad, objetivos de calidad,
aseguramiento de calidad, entre otros.
Orgenes de la calidad
Calidad programada: la que se planea obtener
Calidad realizada: la que se logra con el trabajo efectuado
Calidad necesaria: la que demanda el cliente para cumplir con las expectativas
CALIDAD DE SOFTWARE ES
Concordancia del software producido con los requisitos
explcitamente establecidos, con los estndares de desarrollo
expresamente fijados y con los requisitos implcitos, no establecidos
formalmente, que desea el usuario. Pressman (2010).
ISO (Organizacin Internacional de Normalizacin): Es una federacin mundial de
organismos nacionales de normalizacin y el trabajo de preparacin de las normas
internacionales normalmente se realiza a travs de los comits tcnicos.
IEC (Comisin Electrotcnica Internacional): es una organizacin de normalizacin
en los campos elctrico, electrnico y tecnologas relacionadas. Su trabajo se
desarrolla a travs de 174 comits y subcomits tcnicos y unos 532 grupos de
trabajo.
Esta dos se colaboran estrechamente y los estndares internacionales
que se refieren a la calidad de software son por lo general desarrolladas
en unin de ambas organizaciones.
ICONTEC (Instituto Colombiano de Normas Tcnicas y Certificacin):
organismo de carcter privado, sin nimo de lucro, que trabaja para
fomentar la normalizacin, la certificacin, la metrologa y la gestin de la
calidad en Colombia.
SEI (Instituto de Ingeniera de Software) es un centro de investigacin y
desarrollo patrocinado por el Departamento de Defensa de los Estados
Unidos de Amrica y gestionado por la Universidad Carnegie-Mellon.
La Evaluacin de la Calidad trata de medir o cuantificar caractersticas que
determinan si se cumple con unos requisitos especificados y con las
necesidades o expectativas del cliente. IEEE (1990).
La calidad del software se debe evaluar tanto en el PRODUCTO FINAL
como en el PROCESO DE DESARROLLO del mismo.

ISO 9000-3:2004: Scalone (2006) menciona que Gua la aplicacin de ISO 9001
para el desarrollo, la aplicacin y mantenimiento de software. Es usado para soportar
los procesos de una organizacin y est relacionado con servicios de software
Sus ventajas son:
Se concentra el esfuerzo en mbitos organizativos y procedimientos
puntuales
Consigue mejoras en un corto plazo y resultados viables
Permite eliminar procesos repetitivos
La desventaja es que cuando el mejoramiento se concentra en un rea especfica de la
organizacin, se pierde la perspectiva de la interdependencia que existe entre todos
los miembros de la empresa, adems no le concierne como es terminado el producto.


ISO/IEC 9001:2000 Promueve la adopcin de un enfoque basado en procesos
cuando se desarrolla, implementa y mejora la eficacia de un SGC, para aumentar la
satisfaccin del cliente mediante el cumplimiento de sus requisitos.
Su ventaja ms importante es el control continuo que proporciona sobre los vnculos
entre los procesos individuales dentro del sistema de procesos, as como sobre su
combinacin e interaccin.
Su desventaja es que sobrecarga el personal facultativo para asumir las tareas
habituales.
ISO/IEC 12207:1995 Define, controla y mejora los procesos del ciclo de vida del
software, desde su conceptualizacin hasta su retiro. Se basa en dos principios
fundamentales: Modularidad y responsabilidad.
Su ventaja es que al realizar evaluaciones al final de cada proceso, reduce las
probabilidades de retroceder entre uno y otro proceso, lo que aumenta el control de
errores.
No especfica los detalles de cmo implementar o llevar a cabo las actividades y
tareas incluidas en los procesos, por lo que este es una desventaja.




ISO/IEC 9126:2001: Permite evaluar la calidad del producto software y
establece las caractersticas de la calidad.
En general, permite mejorar la calidad y oportunidad de la informacin disponible,
pero necesita disciplina para aplicarlos.
ISO/IEC 15939:2007: Define un proceso de medicin travs de un modelo que
define las actividades y es adaptable, flexible a las necesidades de diferentes
usuarios.
ISO/IEC 15504:2004: Proporciona un marco para la evaluacin y mejorar la
capacidad y madurez de los procesos. Se aplica junto ISO/OEC 12207, para evaluar
y mejora de la calidad del proceso de desarrollo y mantenimiento de software.
Las organizaciones tendrn una herramienta para iniciar y sostener un proceso
continuo de mejora, Se requiere un gran esfuerzo para realizar las evaluaciones y por
tanto un alto coste.

ISO/IEC 14598:1999: Presenta pautas que ayudan al proceso de evaluacin del
producto software.
ISO/IEC 25000:2005: Proporciona una gua para el uso de las nuevas series de
estndares internacionales.
Sus ventajas son:
Coordina la medida y la evaluacin de la calidad del software.
Ofrece una gua para la especificacin de requisitos de calidad del software.
Armoniza la normativa ya existente con respecto a la norma
Slo que es limitado en especicar algunas caractersticas del software, como por
ejemplo, la usabilidad


MODELO McCALL (1977)
Modelo en cascada de tipo fijo. Propone factores de calidad. Descompone el
concepto de calidad en tres capacidades Operacin, Transicin, Revisin y cada
capacidad se descompone en un conjunto de factores. Que a su vez, definen criterios
para evaluar el factor a travs de mtricas. Para cada criterio debe fijarse valores
mximos y mnimos aceptables.
Las Ventajas de este modelo son: Reusable. Planteado desde la perspectiva del
usuario. Mide y evala la calidad de una forma sencilla. Existe una relacin directa,
entre los desarrolladores y el usuario. Evala el producto a nivel bajo. Utiliza niveles
jerrquicos.
Sus desventajas son: Rgido. La subjetividad de las preguntas contestas por una o
varias personas, para calcular los criterios.

MODELO BOEHM (1978)
Modelo en espiral de tipo fijo. Define la calidad en trminos de atributos cualitativos y
mtricas para realizar las medidas. Plantea tres niveles para las caractersticas: De
alto nivel, de nivel intermedio y de nivel primitivo.
Sus ventajas son: Reusable. Presenta un rango ms amplio de caractersticas
primarias y la mantenibilidad est ms desarrollada. Puede adaptarse y aplicarse a lo
largo de la vida del software. Reduce los riesgos antes de que se conviertan en
problemas. En la utilizacin de grandes sistemas a doblado la productividad.
Entre sus desventajas tenemos: Resulta difcil convencer a grandes clientes de que el
enfoque evolutivo es controlable. No se aconseja utilizarlo en pequeos sistemas.
Genera mucho tiempo en el desarrollo del sistema. Modelo costoso.
Requiere experiencia en la identificacin de riesgos.
MODELO FURPS (1987)

Se basa en el modelo McCall. Este modelo determina categoras y caractersticas, as:
Requerimientos funcionales: Funcionalidad.
Requerimientos no funcionales: Usabilidad, Confiabilidad, Desempeo y Facilidad
de Soporte
Adems de los factores de calidad y los atributos, incluye restricciones de diseo y
requerimientos de implementacin, fsicos y de interfaz.
Las ventajas son: Reusable, se puede utilizar para varios proyectos. Los criterios son
claramente entendibles, lo que implica su fcil utilizacin. A pesar de su divisin en
factores, esta es conveniente para calidad, as hayan restricciones fsicas. Tiene en
cuenta las fallas en el producto y en el proceso, esto permite una mayor correccin.
Al igual que en el modelo McCall se necesitan de muchas mtricas lo que implica un
mayor esfuerzo de tiempo y costo.

MODELO GQM (1994)
Modelo de tipo a medida, define un objetivo, refina este objetivo en preguntas y
define mtricas que intentan dar informacin para responder a estas preguntas. El
proceso GQM esta dado en seis pasos: Establecer las Metas, Generacin de
Preguntas, Especificacin de Medidas, Preparar Recoleccin de datos, Recolectar,
Validar y Analizar los datos para la toma de decisiones, Analizar los datos para el logro
de los objetivos y el aprendizaje.
Ventajas: Flexible. Se puede aplicar a todo el ciclo de vida del producto, procesos y
recursos y se pude alinear fcilmente con el ambiente organizacional. Alinea las
Mtricas con los negocios de la organizacin y las metas tcnicas. Mejora el proceso
del software. Gerencia el riesgo.
Desventajas: No refleja el modelo necesario para combinar la medicin de una
manera sensible. La definicin de las mtricas no siempre es muy clara. La estructura
no dice cmo medir. Se debe usar el mismo idioma para las metas, preguntas y
medidas. No hay correlacin entre el sistema emprico y numrico


ISO/IE 9126
Es un modelo tipo mixto. Se divide en dos partes, calidad interna y externa y calidad
en el uso.
En calidad interna y externa, Fuertes (2008) dice que: este estndar identifica seis
atributos como claves para la calidad, Funcionalidad, Disponibilidad, Facilidad de
uso, Eficiencia, Facilidad de mantenimiento y Portabilidad.
En cuanto a calidad en uso: Efectividad, productividad, seguridad y satisfaccin
Entre sus ventajas estn: Permite mejorar la calidad y oportunidad de la informacin
disponible, en el campo Administrativo puede reducir los problemas de inexactitud,
omisiones y falta de datos, errores de transcripciones y demoras que se producen con
los sistemas manuales

El Vocabulario est en algunos casos, descontextualizado, es decir, la ISO 9126 debe
adaptar su vocabulario al establecido por la Norma Internacional ISO, de modo que
no se den lugar a incongruencias
Debe clarificar los puntos 2, 3 y 4 de las Mtricas dadas, pues al estar fusionados, no
se observa armona con la ISO 15939
Los rangos que establece oscilan entre 0 y 1 por lo que al parecer a la hora de
evaluar los productos Software, se hace de manera porcentual, esto es, de forma
cuantitativa, lo que no da lugar a evaluaciones ms cualitativas del producto, lo que
implicara que un pequeo porcentaje podra dar lugar a un anlisis serio de algn
error, que al ser visto cualitativamente puede arrojar posibles resultados de mejora
No describe de manera especfica la forma de evaluar la calidad, entonces es
necesario definir una metodologa de trabajo
Muchas de las mtricas de calidad de ISO 9126, se refieren a los procesos
descritos en la ISO 12207, pero con variacin en el nmero de actividades
para cada una, lo cual causa confusin al operador y si stas estn mejor
descritas y especificadas en la segunda, no se requieren en la primera.
Se necesita disciplina para aplicarlos
Si no se comprende el proceso del negocio, no resultar til aplicar ningn
mtodo de evaluacin de la calidad ni de mejora del proceso.

En las diapositivas anteriores, se desglosa a modo general todo lo que se
tiene respecto a la evaluacin de la calidad, que implica normas y modelos
que de una y otra manera pretenden evaluar el software para que este
cumpla con los requisitos y expectativas del cliente y se pueda decir que el
producto es de calidad, pero as como en el entorno empresarial es
importante la calidad, as tambin en el entorno educativo.
Muchos investigadores y hasta crculos acadmicos han tratado de formular
metodologas que involucren elementos propios de la enseanza y la
educacin, por lo tanto, a partir de aqu se mostrar algunas de estas
propuestas.
Escala de evaluacin para software educativo de Barroso y col
Aporta un instrumento donde se realice una valoracin sistemtica del producto
informtico, que permita tomar decisiones para su adquisicin y uso posterior, por
tanto proporciona una lista de control (conjunto de tems organizados segn ciertos
criterios, que guan el proceso de seleccin y se califican en una escala numrica o
verbal) y un esquema-guin para el informe motivado.
Dirigida a los docentes y administradores educativos.
La valoracin de los elementos se efecta de manera cualitativa.
Considera las relaciones contexto-entrada-proceso, que son integradas en un valor
numrico.
Presenta preguntas que orientan la redaccin del informe de evaluacin despus
del uso del software en un contexto educativo real.
Toma en cuenta las interacciones entre los actores que intervienen como: profesor,
diseador y alumno
Evaluacin formativa de medios instruccionales aplicados a videos y software
de Dorrego
Modelo para la produccin y evaluacin formativa de medios instruccionales
aplicados a vdeos y software, sustentado en la teora instruccional de Gagn y en el
enfoque del procesamiento de la informacin. El medio tiene dos funciones
primordiales: transmitir mensajes y desarrollar las destrezas necesarias para procesar
la informacin contenida en el mensaje.
Permite conocer la actitud de los estudiantes hacia el programa.
Los diversos tipos de guiones establecen pautas para evaluar los programas.
Herramienta de evaluacin de multimedia didctica de Martnez y col
Herramienta de evaluacin pedaggica de material didctico, con la finalidad de
obtener datos sobre las posibilidades educativas de distintas aplicaciones
multimedia.
Ofrece una valoracin global de las aplicaciones de este tipo por cuanto aporta
elementos de la calidad tcnica, pedaggica y opiniones del evaluador.
Considera la dimensin comunicativa del material asociada a la interactividad y al
diseo de la interfaz grfica.
Se refiere slo a la creatividad que promueve las caractersticas tcnicas o
pedaggicas del programa, considerando los condicionantes: personales
(estudiante, docente), materiales (recursos) y relativos con el qu y cmo ensear.
Evaluacin de la Optimizacin del Proceso de enseanza-aprendizaje.

Modelo de evaluacin de materiales educativos computarizados de Galvis
Modelo de evaluacin de los materiales educativos computarizados (MEC), el cual
ser descrito por sus componentes y criterios. La evaluacin sistemtica de los MEC,
precisa el establecimiento de criterios relevantes y consistentes. Los MEC se
desarrollan para satisfacer necesidades educativas prioritarias que no pueden ser
abordadas por otros medios de enseanza, debiendo ser de calidad y viables de
utilizar por parte de los usuarios a quienes va dirigido.
Tratamiento sistmico de la valoracin de los materiales educativos
computarizados.
Especifica las variables, indicadores y criterios de evaluacin que responden a la
calidad educativa y computacional del recurso informtico.
En los instrumentos de evaluacin resalta la consideracin de los problemas del
material, su localizacin y posible solucin, junto con sus aspectos positivos,
negativos y sugerencias de uso en el proceso de enseanza-aprendizaje real.
Lista de control para la evaluacin de software educativo de Bostock
Lista variables de aspectos tcnicos y pedaggicos que debe tener un software
educativo, tambin define el papel del docente en durante la aplicacin del software
en funcin de lo que permite realizar el programa frente a sus estudiantes. Evidencia
el progreso del estudiante y la realimentacin.
Aporta una variedad de preguntas que orientan el evaluador en su proceso.
Promueve la proteccin del programa.
El instrumento integra explicaciones de algunas variables, aspecto que puede
canalizar las dudas del evaluador y lo hace bastante concreto y prctico.
Ofrece resultados cualitativos ya que no especifica una valoracin cuantitativa de
los tems.
Se actualiz la terminologa del documento original adaptndola a los equipos
actuales.
Metodologa de evaluacin de software educativo de Cataldi
Metodologa de evaluacin de software educativo en tres momentos de su ciclo de
vida. Una evaluacin interna realizada por el equipo de desarrolladores del programa
durante su creacin a dos prototipos del mismo. Otra externa, aplicada al producto
final por los docentes; y la evaluacin contextualizada efectuada en un contexto
parecido a aquel para el cual fue elaborado el software, que brinda informacin sobre
las reacciones de los usuarios y de la eficacia de la aplicacin.
Hace referencia a los aspectos tcnicos, pedaggicos y didcticos sobre el criterio
de utilidad (amigabilidad) de la aplicacin.
Profundizada en la organizacin y estructuracin de los contenidos junto a las
preferencias de los usuarios.
Aporta representaciones mentales como fundamento de los resultados
experimentales obtenidos en el proceso de la evaluacin contextualizada
del software.

Instrumento de evaluacin de recursos multimedia de Soto y Gmez
Instrumento de evaluacin de recursos multimedia para la atencin a la diversidad
denominado EVALA, que es una base de datos sobre software educativo que
pretende ser un instrumento de apoyo a los docentes en la labor de evaluacin y
seleccin de recursos informticos, con el propsito de favorecer la integracin de las
TIC en el sistema educativo.
Forma sencilla para la valoracin de software educativo.
Integra aspectos cualitativos con cuantitativos.
Utiliza smbolos para la valoracin global y para identificar el tipo de dificultad que
aborda.
Resalta el establecimiento de niveles de dificultad de acuerdo a los usuarios.
Precisa las capacidades que desarrolla el programa.
Permite que el entorno audiovisual, presente tanto un diseo claro en las pantallas
como atractivo en sus componentes.
Metodologa Generalizada de Evaluacin de Bertha Naranjo
Esta metodologa se basa en los estndares internacionales ISO/IEC 14598, ISO/ IEC
9126 e ISO/IEC 25000 y fue presentada por Bertha Alice Naranjo Snchez en el XIV
Encuentro Internacional Virtual Educa Colombia 2013 celebrado en la ciudad de
Medelln.
Sirve para evaluar cualquier tipo de software educativo.
Permite cuantificar la calidad del producto software a travs del uso de pruebas de
caja negra, pruebas administrativas, cuestionario de relevamiento tcnico,
encuestas dirigidas a usuarios y entrevistas de confirmacin con el personal tcnico
o desarrollador de la herramienta.
Resume valores cualicuantitavos
Los sistemas LMS tienen amplios propsitos educativos, la eleccin de una
plataforma se vuelve compleja ya que en el mercado hay opciones comerciales y de
libre distribucin, constantemente aparecen nuevos sistemas de gestin del
aprendizaje y las actualizaciones de las versiones suelen tener mejoras importantes,
por lo tanto, todo esto genera problemas para la toma de decisiones en cuanto a la
evaluacin de calidad se refiere.
Esto lleva a que se determine las caractersticas y objetivos que se requieren para
satisfacer las necesidades de los estudiantes, profesores y administradores.
Ahora veremos diferentes propuestas y modelos relacionadas con la evaluacin de
LMS:
Caracterizacin de la calidad
Segn Kapp la calidad de una plataforma e-Learning est dada por cinco
caractersticas: Mantenimiento, Compatibilidad, Usabilidad, Modularidad y
Accesibilidad. Al ser evaluadas de forma individual aseguran el entendimiento de las
necesidades tecnolgicas. No establece los criterios de medicin dejndolo a los
usuarios.

Marco TICS y metodologa eLSE
Lanzilotti enfatiza en la interaccin usuario-plataforma, definida por: Tecnologa,
Interaccin, Contenidos y Servicios. De estos aspectos se obtiene una gua y una
metodologa de evaluacin llamada eLSE que combina tcnicas de inspeccin
realizada por expertos que permite identificar problemas, luego se analiza respecto a
las TICS y posteriormente se aplica una tcnica llamada Tareas abstractas (TA), que
describe las actividades que deben ser realizadas, vistas como patrones de evaluacin
y formuladas segn una plantilla, se clasifican en dos categoras: Aprendizaje del
contenido y calidad de uso.




Marco para el anlisis de la potencialidad y validez
Georgiakakis establece la utilidad y calidad de uso de un LMS a travs de un proceso
de dos pasos: Explorar y determinar su naturaleza con base a sus caractersticas y
Examinar la usabilidad y la utilidad.
El modelo propone una serie de criterios tanto pedaggicos como tcnicos y a su vez
lo divide en prctico y educativo. Emplea listas de cotejo y una matriz de decisin
para identificar las caractersticas y clasificarlo. Despus de definidas las
caractersticas procede a establecer una serie de criterios como: Fcil de aprender y
comprender, Eciente en la realizacin de tareas, Eciente en la navegacin, Retorno
a lugares seguros y Agradable. Los valores con los que se evala son del 1 al 5.

Marco para la evaluacin
Segn Beshears la evaluacin se puede hacer por los criterios: Requerimientos
conocidos, Requerimientos futuros desconocidos, Implementacin, Soporte y Costo.
Se distribuyen 100 puntos entre ellos, tambin se puede realizar una lista de
caractersticas para cada uno de ellos del 0 al 5. La suma de todos estos valores
determina la calidad de la herramienta.


Calidad basada en las herramientas
Se basa en la presencia o ausencia de herramientas clasificados en ocho categoras y
en un conjunto de herramientas, la cual encontramos en un sitio web llamado
EduTools. Mediante un formulario el desarrollador indica las herramientas que
proporciona el sistema, donde ser evaluado por un grupo de expertos.
Las categoras y algunas herramientas son: herramientas de comunicacin como
chat, foro; herramientas de productividad como marcadores, bsqueda interna;
herramientas para el desarrollo del alumno como Autoevaluaciones, portafolio;
herramientas administrativas como Autenticacin, Registro; herramientas de
publicacin de cursos como herramientas de control de calificaciones, monitoreo de
estudiantes; Diseo curricular como plantillas de cursos, administracin del currculo;
Hardware/software como requiere un navegador web, requerimientos BD;
Precio/licenciamiento como costo, cdigo abierto
Sistemas de Gestin de Contenidos de cdigo abierto
Define trece criterios generales: Costo de uso, Mantenibilidad, Usabilidad y soporte,
Perl del vendedor y de la herramienta, Modularidad, Acorde a estndares, Capacidad
de integracin, Integracin de Objetos de Aprendizaje, Efectividad y ecacia,
Escalabilidad, Seguridad, Consideraciones de hardware y software y Soporte
multilenguaje. Adems de eso una lista de caractersticas y herramientas:
Administracin, Seguridad, Acceso, Integracin con otros sistemas, Diseo de cursos,
desarrollo e integracin, Monitoreo de cursos, Diseo de actividades, Colaboracin en
lnea y comunicaciones y Herramientas de productividad.
Cada caracterstica emplea una escala de 0 a 5 donde 0 es no existe o pobre, 3 es
promedio bsico estndar y 5 excede las expectativas del estndar.
Modelo de calidad ISO/IEC 2500
Es la integracin de las normas ISO/IEC 9126 e ISO 14598, que pretende el desarrollo
de productos de software conforme a su especificacin y evaluacin de calidad.
Define tres vistas para evaluar dicha calidad, la vista interna, relacionada con las
propiedades del software asociadas a las primeras fases del desarrollo (tamao,
complejidad, etc.); la vista externa se enfoca a la validacin del producto en trminos
de su efectividad y rapidez, uso de memoria, etc., la vista de uso se reere a la
percepcin del usuario con respecto a la efectividad del producto para la ejecucin de
tareas. Cada vista define una serie de mtricas y aunque las dos primeras vistas no son
relevantes, la vista de uso resulta til desde el punto de vista del usuario.
Este modelo permite detectar fortalezas y debilidades de un sistema y se enfoca en la
toma de decisiones para la compra y comparacin.
Estndar ISO/IEC 19796-1
Este es el primer estndar de calidad para el aprendizaje, la educacin y la
capacitacin. Se basa en el Marco de Referencia para la Descripcin de Calidad
(RFDQ) y consta de dos partes: un modelo de procesos como clasicacin de
referencia y un esquema de descripcin para el control de la calidad.
El modelo de procesos considera todo el ciclo de vida del e-Learning y tiene las
siguientes caractersticas: integracin, completitud, apertura, adaptabilidad y
unicidad. Adems se divide en siete categoras (anlisis de necesidades, anlisis de
marco de trabajo, concepcin/diseo, desarrollo/produccin, implementacin,
proceso de aprendizaje y evaluacin/optimizacin) y treinta y ocho subprocesos,
donde se debe especificar los mtodos y mtricas a tener en cuenta.
El modelo de descripcin de procesos, contiene la descripcin de las estructuras o
procedimientos sobre cmo realizar dichos procesos.
Pros y contra de las propuestas y modelos
La propuesta presentada por Kapp tiene como inconveniente su generalidad al no
establecer de forma clara una metodologa ni un rango de valores para la evaluacin.
En cuanto a la de Beshears est enfocado al proceso de implementacin lo que quiere
decir que se vuelve complejo para aquellos que no tienen conocimiento al respecto.
En cambio Georgiakakis plantea un aspecto importante que es la usabilidad, traza un
esquema de clasificacin y unos niveles, que lo hacen sencillo de utilizar, slo que su
evaluacin lo hacen expertos y en ambientes controlados.
En cuanto al marco TICS, se puede ver su enfoque a la parte tecnolgica, donde cobra
importancia la interaccin usuario-sistema. Su principal ventaja son las inspecciones
basadas en patrones, hacindola objetiva, slo que el nmero de ATs generados
puede no cubrir todas las caractersticas.
EduTools ofrece un marco genrico y un listado de funcionalidades deseables para las
herramientas, haciendo su medicin sencilla mediante una lista de cotejo. Pero su
desventaja radica en la presencia o ausencia de elementos que hacen que se realice
una larga revisin de la calidad del sistema.

La herramienta de cdigo abierto establece una metodologa cuantitativa para aplicar
a la evaluacin de calidad de un sistema LMS, solo que esta medicin es subjetiva y su
valor esta dado en la percepcin global.
La integracin de las normas ISO 9126 e ISO 14598 da como resultado una
metodologa genrica que no involucra elementos de enseanza-aprendizaje, esto lo
hace limitado, aunque su ventaja es que se puede definir una coleccin de
caractersticas y la forma en que sern medidas, estableciendo unos criterios
objetivos que evitaran las valoraciones subjetivas.
En cuanto al modelo ISO/IEC 19796-1, se enfoca mucho en el proceso de
implementacin de un esquema de aprendizaje, haciendo que el LMS no sea parte del
estndar sino parte de un subproceso. Su ventaja radica en que proporciona un
documento enfocado a la generacin de mtricas y mediciones de calidad.