APRECIACIONES REALIZADAS SOBRE LA VERSIN INFORMATIZADA DEL TEST DE APTITUDES

DIFERENCIALES (NIVEL 3) Y SU COMPARACIN CON LA VERSIN MANUAL

Gonza1, Fabio Abel; Rocabado, Oscar Esteban 1; Langellotti, Carmen1; Pearanda, Noelia1; Brunet,
Marcelo1,2; Martos Mula, Ana Josefa1,2
1

Universidad Catlica de Santiago del Estero-Departamento Acadmico San Salvador. Tlf: 4236139. Ext.
130 o 132; 2Universidad Nacional de Jujuy-Facultad de Humanidades y Ciencias Sociales. E-mail:
amartos@ucse.edu.ar
RESUMEN
ABSTRACT
INTRODUCCION
Siguiendo a Viswesvaran (2000 en Schade y cols., 2005), en aos recientes el uso de las
computadoras ha impactado en casi todos los mbitos de la vida de las personas, y la psicologa no ha
sido una excepcin. Dentro de las reas del quehacer del psiclogo, una en las que se ha ido
incorporando es en la psicometra. Surgiendo un creciente trasvase de pruebas tradicionales de lpiz y
papel a test informatizados (Mndez y cols., 2008),
En la Universidad Catlica de Santiago del Estero DASS, la necesidad de proporcionar ayuda a
los alumnos en su paso hacia los estudios universitarios ha hecho que desde el Centro de Orientacin
Estudiantil (COE) se plantee la posibilidad de que por medio de test psicomtricos, se detecten
caractersticas o particularidades, que permitan establecer planes de accin dirigidos a ayudarlos en este
momento de transicin.
El Test de Aptitudes Diferenciales (DAT) es una de las pruebas administradas en el ingreso a esta
Sede a gran cantidad de postulantes anuales. Con el fin de agilizar el proceso de obtencin de los
resultados en forma rpida y segura, se llev a cabo una primera experiencia de informatizacin del DAT,
con una presentacin de los reactivos en lpiz y papel, y el registro de las respuestas de manera
informatizada. Aunque esta versin fue validada, se consider que el hecho de presentar los reactivos en
un formato y las respuestas en otro podra ser un distractor para los alumnos, considerndose necesaria
la informatizacin completa del test (reactivos y respuestas informatizados), versin que tambin ha sido
validada.
Si bien la modalidad de aplicacin manual e informatizada podran considerarse equivalentes, se
cree que esta ltima versin informatizada podra ser ms atrayente y comprensiva para los alumnos
ingresantes ya que, la mayora de ellos son adolescentes, grupo caracterizado por su marcada
preferencia por la informacin visual. Este tipo de presentacin podra motivar ms a los alumnos,
permitiendo tambin una mayor comprensin de las consignas.
Es por ello que, considerando las directrices que desarroll la American Psychological Association
(APA) en 1986 para guiar el desarrollo, uso y la evaluacin tcnica de los test informatizados, entre otras
recomendaciones referidas a cmo ha de ser la presentacin de las pruebas, plantea que es conveniente
considerar la modalidad de presentacin de los estmulos ms adecuada en funcin del test administrado
(APA, 2002). Por lo cual el objetivo principal del presente estudio seria comparar en un grupo
homogneo de aspirantes a la UCSE DASS, las apreciaciones en ambas versiones, sobre el grado de
satisfaccin que les produce la prueba, atendiendo tanto a aspectos que refieren a la comprensin, como
a la esttica. A fin de obtener informacin relevante para mejorar la presentacin del test, antes de
proceder a la creacin de una versin informatizada mejorada.

[1]

MATERIAL Y METODO
Para analizar este tema, se trabaj con un grupo de ingresantes a las diferentes carreras del
DASS-UCSE en el ingreso de febrero de 2011 (instancia de verano).
Con el fin de contar con un poblacin lo ms homognea posible en ambos grupos se dividieron a
los ingresantes por carrera y por gnero, y de cada uno de estos grupos resultantes se seleccion al azar
los alumnos a los que se les administrara la versin manual y a los que pasaran por el pase en la
versin informatizada, repartindolos equitativamente en ambos grupos.
La muestra derivada del total de ingresantes fue de 349 aspirantes, de los cuales a 217 se les
administr el DAT de manera totalmente informatizada; mientras que a 132 les fue administrado de
manera manual.
RECOLECCION DE INFORMACION:
Inmediatamente despus de pasar el test (en cualquiera de las versiones), se les administr una
encuesta en la que se indagaron aspectos de comprensin de la informacin presentada (1- forma de
ingresar los datos, 2- procedimiento a seguir en el momento de entrar en la sesin, 3- procedimientos a
seguir al retomar la prueba en un segundo pase, 4- comprensin de las instrucciones dadas al comienzo
de las pruebas, 5- opinin sobre el tiempo para la lectura de las instrucciones, 6- comprensin o no de los
ejemplos, 7- claridad de las instrucciones sobre el inicio del tiempo para el pase de la prueba, 8- forma en
que se presentan los ejemplos y la consigna, 9- manera de volver atrs para responder preguntas
dejadas sin responder). Y aspectos relacionados a la esttica del test (1- colores empleados, 2- tamao
de las letras de instrucciones, 3- tamao de las letras de los ejemplos, 4- modalidad de contestar las
preguntas, (4- el formato del icono a continuar en versin informatizada) 5- distribucin de los estmulos
en las pantallas, 6- calidad de los estmulos).
ANALISIS DE LOS DATOS:
Dentro de cada tipo de administracin (manual o informatizada) se realizaron pruebas Chicuadrada para determinar la existencia o no de diferencias entre los porcentajes de seleccin a cada una
de las cuatro opciones de respuesta, tanto en las preguntas referidas a los aspectos de comprensin,
como a los estticos.
Tambin se realizaron pruebas Chi cuadradas para comparar los porcentajes de cada una de las
versiones, segn la opcin de respuesta en los aspectos considerados (compresin y esttico)
RESULTADOS Y DISCUSIN
Centrndonos en la encuesta sobre comprensin de la informacin, en lo que respecta a la
comprensin sobre la forma en la que se les solicita que introduzca los datos, pareci resultar mucho ms
comprensible en la versin informatizada que en la manual. El 77% de los alumnos a los que se les
administr el test de manera informatizada consider que les resultaba muy comprensible la solicitud de
los datos en esta versin; mientras que en la versin manual el 45% tambin consider que la solicitud de
los datos era muy comprensible en esta versin, pero otro 45% consider que era medianamente
comprensible. Estas diferencias resultaron significativas en la comparacin entre versiones,
observndose un porcentaje significativamente mayor de individuos que consideraron que en la versin
informatizada la introduccin era ms comprensible en comparacin a la versin manual.
En lo que se refiere a la comprensin sobre el procedimiento a seguir para comenzar el pase de
la prueba, tambin result ser ms comprensible en la versin informatizada. En esta versin el
porcentaje de los individuos que consideraron el procedimiento muy comprensible (59%) fue
significativamente mayor que los individuos que lo consideraron medianamente comprensible, poco

[2]

comprensible o nada comprensible. No obstante, en el caso de la versin manual, los mayores

porcentajes de respuestas se observaron en las opciones muy comprensible (50%), pero tambin en la
opcin medianamente comprensible (35%). Al hacer la comparacin entre formas de administracin se
pudo observar que, aunque no haba diferencias en las respuestas muy comprensible o medianamente
comprensible entre ambas versiones, siendo estas las ms elegidas tanto en la versin manual como en
la informatizada; donde si se observaron diferencias significativas entre versiones fue en el porcentaje de
los individuos que consideraban poco comprensible este procedimiento de inicio del pase, siendo el
porcentaje que eligi esta opcin significativamente mayor en la versin manual (10%) que en la
informatizada (2%).
En lo referente a la comprensin sobre el procedimiento a seguir a la hora de comenzar el test
desde una prueba determinada, no se observaron diferencias entre las versiones. En ambos casos, tanto
en la versin manual como en la informatizada, este se considera muy comprensible (manual 39%,
informatizada 42%) o medianamente comprensible (manual 52%, informatizada 49%).
Cuando se analiz la claridad de las instrucciones dadas al inicio de cada uno de los subtest de
manera escrita en ambas versiones se observ un predominio significativo de los que las consideraban
como muy claras. No obstante, la comparacin entre versiones permiti observar que, en realidad, le
porcentaje de los alumnos que consideran estas instrucciones como muy claras es significativamente
mayor entre aquellos que pasaron la prueba de modo manual (74%), frente a los que se les administr la
prueba de modo informatizado (56%). Tambin se observaron diferencias significativas entre las dos
versiones en aquellos individuos que consideraron estas instrucciones medianamente claras, siendo en
este caso mayor el porcentaje de individuos que la consideraron as en el versin informatizada (36%) en
comparacin con los que de la versin manual (23%). Es decir, que parece ser que en este caso la
comprensin de las instrucciones era mejor en la versin manual que en la informatizada.
En lo que respecta al tiempo que se emplea para presentar las instrucciones, se pudo observar
que en ambas opciones predominan los que lo consideran adecuado (Manual 74%, Informatizada 75%).
No obstante, en la comparacin entre versiones se pudo observar que en la versin manual hay ms
porcentaje de individuos que consideran que el tiempo asignado es poco (17%), en comparacin con la
versin informatizada (3%); mientras que, por el contrario, el porcentaje de individuos que consideran que
el tiempo destinado a la presentacin de las instrucciones es excesivo es significativamente mayor en la
versin informatizada (21%) que en la manual (8%). Esto se haba observado de manera informal por los
investigadores durante los pases. Parece ser que la compresin es ms rpida en la versin
informatizada que en la manual.
Cuando se pregunt a los alumnos sobre la comprensin de los ejemplos que se facilitan antes
de cada subtest, se comprob que no haba diferencias entre la versin manual y la informatizada, en
ambos casos el 72% de los encuestados consider que haba mucha comprensin de estos ejemplos.
Ante la pregunta que se le realiza cuando est por comenzar la prueba (conteo del tiempo), sobre
si est seguro de querer comenzar, en la versin informatizada se observ un predominio 59% de
individuos que consideraron la instruccin como muy necesaria; mientras que en la versin manual el
42% la consider muy necesaria, y otro 55% como medianamente necesaria. En lo referente a la
comparacin entre las dos versiones, no aparecieron diferencia significativas entre los que dieron la
respuesta muy necesaria o medianamente necesaria; pero haba un porcentaje ms alto de individuos en
la condicin informatizada (7%) que consideran que esta advertencia no es nada necesaria, en
comparacin con la versin manual donde solo contest esta opcin un 2%. Si bien la mayora considera
que se les advierta sobre el comienzo de la prueba efectivamente es muy necesario o medianamente
necesario, en la versin manual esta advertencia se ve como ms necesaria.
La pregunta sobre el hecho de si les parece perturbador que los ejemplos aparezcan en una
hoja/pantalla y las consignas en otra, no presenta diferencias entre la versin manual y la informatizada,
sealndose en ambos casos que no es nada perturbador este hecho (Manual 42%, Informatizada 50%).

[3]

Y en lo que se refiere a la compresin sobre, una vez llegado al final del subtest, si le sobra
tiempo, cmo buscar una pregunta determinada para modificarla o contestarla si no se contest
observamos que, en contra de lo que se haba observado a simple vista por los investigadores durante la
administracin de la prueba, la versin informatizada es ms clara en este aspecto. Esto se puede
apreciar por el hecho de que el porcentaje de voluntarios que consideran que esta bsqueda es muy
clara en la versin informatizada (70%) es mucho mayor que los que consideran que es muy clara en la
versin manual (22%). Tambin se puede apreciar por el hecho de los que consideran que es
medianamente clara (55%) o poco clara (15%) es significativamente superior en el caso de la versin
manual que en el caso de la informatizada (medianamente claro 20%, y poco claro 6%). Por lo tanto
podemos concluir que es ms fcil realizar esta bsqueda de preguntas no contestadas o por modificar
en la versin informatizada que en la manual.
Centrndonos ahora en las respuestas a los tems sobre esttica, en lo referente a los colores
empleados en la prueba informtica, a la mayora 58% les result agradable. Entre los encuestados en la
versin manual, un alto porcentaje consider la ausencia de colores como agradable (43%), pero ese
mismo porcentaje lo consider tambin como poco agradable. Cuando se realiz la comparacin entre
tipos de administracin, se pudo ver que no haba diferencias entre el porcentaje de individuos que
consideraron poco agradables los colores de la pantalla en el formato informatizado (33%) y aquellos que
consideraron poco agradable la presentacin manual en blanco y negro (43%). No obstante, s que se
observ que el porcentaje de los que consideraban agradables los colores de la versin informatizada
eran mayores (58%) que el porcentaje que consider agradable la presentacin en blanco y negro. No
obstante, en este anlisis aparece algo curioso y es el hecho de que el porcentaje de los que consideran
muy agradable la presentacin en blanco y negro manual es superior (8%) al porcentaje que considera
muy agradable la versin en color informatizada (2%). Esto nos lleva a considerar que, aunque en
principio la versin en color informatizada podra considerarse ms agradable para los alumnos, las
diferencias no estn tan claras.
En lo que respecta al tamao de la letra de las instrucciones aqu volvemos a ver que no hay
diferencias entre la versin manual y la informatizada, predominando en ambas los individuos que
consideran que el tamao de esta letra de las instrucciones es el adecuado (78% manual, 76%
informatizado).
No obstante, en el caso de la letra de los ejemplos, podemos ver que si bien predominan los que
la consideraron adecuada en ambas versiones; aunque al comparar entre los dos tipos de administracin
se pudo comprobar que el porcentaje que eligi esta opcin (est bien) en la versin manual es
significativamente mayor (88%) que el que la eligi esta opcin en la versin informatizada (74%).
Adems, en la versin informatizada el porcentaje de individuos que consideran el tamao de la letra
como pequeo (22%) es superior significativamente a aquellos que los consideran pequeo en la versin
manual (9%). Es decir, se considera que sera recomendable aumentar un poco el tamao de la letra de
los ejemplos en la versin informatizada.
En lo que se refiere a la forma de contestar las preguntas, la mayora de los individuos
encuestados en la versin informatizada (68%) consideran que el hecho de tener que hacer clic con el
mouse en una de las respuestas presentadas en la pantalla, lo considera muy cmodo; mientras que en
la versin manual (donde tienen que dar la respuesta en una hoja de registro diferente a la cartilla en la
que se presentan los estmulos) predominan los que consideran esta forma de dar la respuesta como
medianamente cmoda (56%). Al hacer las comparaciones entre las dos formas de administracin del
test, pudimos ver como los porcentajes de los alumnos que consideraron esta forma de respuesta poco
adecuada (21%) o adecuada (56%) fueron considerablemente mayores en la versin manual que los que
tuvieron estas consideraciones en la versin informatizada (poco adecuada 4% y adecuada 28%);
mientras que el porcentaje de los que consideraron la forma de dar la respuesta muy adecuada en la
versin informatizada es significativamente mayor (68%) que en la manual (19%). Es decir, hay una clara
preferencia por la forma de dar la respuesta a nivel informatizado.

[4]

Cuando los alumnos eran interrogados sobre su opinin en cuento a la presentacin de los
estmulos en la pantalla, la mayora los consideraban agradables, tanto en la versin Informatizada
(72%), como en la manual (74%); no encontrndose diferencias al comparar entre los dos tipos de
administracin. Lo mismo ocurra cuando a los alumnos se les pidi su opinin sobre la calidad de los
dibujos presentados en los reactivos, donde un 60%, tanto en la versin manual como en la
informatizada, consideraron los mismos como de buena calidad.
CONCLUSIONES
Se pudo comprobar que, en lo referido a la comprensin de la prueba, tanto la versin manual
como la informatizada es considerada como de fcil comprensin por parte de los alumnos.No obstante,
si comparamos las respuestas dada por los alumnos en ambas versiones (manual e informatizada) en lo
referente a la comprensin de las pruebas, vemos que hay algunas similitudes en comprensin entre los
dos grupos, aunque en otros aspectos parece ser mejor la versin informatizada. Es posible que esta
mayor comprensin en la versin informatizada se deba a que su aspecto es ms similar a los formatos
de recoleccin de informacin y de interaccin que podemos encontrar en internet, medio muy utilizado
por la gente ms joven y donde se encuentran en su salsa. Dado que la inmensa mayora de los
ingresantes a la UCSE-DASS son personas jvenes, es posible que esta mayor comprensin de la
versin informatizada venga determinada desde ese aspecto.
No obstante, hay dos aspectos en la prueba informatizada que no hay que perder de vista, ya que
pueden ser los puntos ms dbiles de esta versin. Uno es el hecho de que en la versin informatizada,
si bien al igual que en la manual predominan los individuos que consideran que las instrucciones dadas al
comienzo de la prueba son muy claras, parece que esta claridad es mayor en la versin manual que en la
informatizada. Por otro lado, cuando se trata de comenzar desde un test concreto, si bien una gran
proporcin consideran que es muy compresible cmo acceder a l, tambin es cierto que la mayora
consideran que es medianamente comprensible como hacerlo. No obstante, esto ltimo ocurre tanto en la
versin manual como en la informatizada, por lo que podemos considerar que la dificultad quizs est en
la solicitud (o en la redaccin del tem de la encuesta que no se entiende), ms que en un problema de la
versin informatizada en s.
En lo referente a los aspectos estticos, tanto la versin manual como la informatizada vuelven a
presentarse con una gran aceptacin por parte de los encuestados. Si bien en este caso las diferencias
no son tan claras como en el caso de la comprensin, tambin se podra decir que hay una mayor
aceptacin de la versin informatizada. No obstante, en este caso, a excepcin del modo de contestar las
preguntas (que implica el uso del mouse), en el resto de los aspectos estticos estudiados, los alumnos
consideran que nuestra versin informatizada es susceptible de mejoras.

BIBLIOGRAFIA:

American Psychological Association (1986) Directrices para los test informatizados. En

Principios ticos de la Evaluacin Psicolgica (1992).

Schade, N.; Hernndez, P. y Elgueta, B. (2005): Ensayo de aplicacin prctica, el test

informatizado de Memoria Memopuc. Revista Psicolgica. Vol.XIV (1). Facultad de Ciencias
Sociales, Departamento de Psicologa Universidad de Chile. pp 73 88.

Menndez, L.; Hierro, P. y Muiz, J. (2008): Actitudes hacia los test informatizados aplicados por
Internet con formato responder hasta acertar. Revista Accin Psicolgica. Vol.V (2). Universidad de
Oviedo Espaa. pp. 25-36.
[5]