UNED Tudela 1. y 2.- Introduccin.

Temas anteriores: Fiabilidad y validez del test

Psicometra. Esquema tema 8

En qu medida colabora el tem a medir el constructo? Tema 8: Anlsis de los tems: En qu medida influye el tem en la fiabilidad y validez del test?

Tema 2: Indicaciones sobre formato, redaccin, etc. de los tems. Dificultad Discriminacin Fiabilidad Validez Anlisis de los distractores Funcionamiento diferencial

Propiedades de los tems

- Estudio de tems en tests de aptitudes. Matriz de datos. 3.- Indice de dificultad. pi = IDi =
A N

Observaciones: 1.- Mide la facilidad 2.- Depende de la muestra 3.- Media y varianza del tem i. Conviene que la varianza sea mxima. 4.- Media del test = p1 + p2 + ... + pk Correccin de aciertos por azar: 4.- Discriminacin: Capacidad para diferenciar sujetos de alta, media y baja puntuacin en un criterio: a) INTERNO: puntuacin en el propio test. ndice de homogeneidad. b) EXTERNO: puntuacin en otro test (variable) Grado de validez para predecir. Lo haremos en el caso a. 4.1. ndice de discriminacin basado en grupos extremos: A Ai D= s = p s pi Ng D=1: Buen tem D=0 : Misma proporcin de acertantes. Deseable al menos 0,3 (ver pg 423) D<0: Confunde a los hbiles . Ejemplo: Resultados del tem nmero 18: (200 sujetos) N respuestas N respuestas correctas al tem incorrectas al tem Grupo superior (27%) 42 12 Grupo medio (46%) 50 42 Grupo inferior (27%) 14 40

Total 54 92 54

UNED Tudela Psicometra. Esquema tema 8 4.2. ndices de discriminacin basados en la correlacin. ID= Coef. de correlacin entre el tem y el test. 4.2.1. TEM Y TEST DICOTMICOS: Coeficiente Tabla de proporciones: tem 1 0 1 p11 p10 Test 0 p01 p00 Total py qy Ejemplo: tem Test 1 0 Total 1 40 5 45 0 15 20 35 Total 55 25 80

Total px qx 1

p11 p x p y px py qxq y

4.4.2. TEM DICOTMICO, TEST CONTINUA. Coeficiente biserial puntual Ejemplo: tem Test S1 1 20 S2 1 30 XAX p rbp = S3 0 10 sX q S4 1 10 S5 0 15 S6 1 15 Media del test = 16,67; D.T. del test = 6,86 4.2.3. TEM DICOTOMIZADO. TEST CONTINUA. Coeficiente biserial. 4.3.- Discriminacin de tems de actitudes: TEM y TEST CONTINUAS. 1er. mtodo: ceficiente de correlacin Ejemplo: tem Test Test -tem S1 4 35 31 S2 3 30 27 S3 3 32 29 S4 1 10 9 S5 2 20 18 S6 5 45 41 2 mtodo: Mediante un contraste de hiptesis.
H o : S i H1 : S > i

Si no se ha eliminado el tem (pg. 429)

S jX S jSX R j( X j) = R jX S X S j S X + S j 2 R jX S X S j
2 2

R jX =

Ejemplo: Grupo superior Grupo inferior n sujetos 31 31 Media 52 30 Cuasi desv. tp 9 12

UNED Tudela

Psicometra. Esquema tema 8

4.4.- Factores que afectan a la discriminacin (pg. 433) Variabilidad de las respuestas: A mayor variabilidad, mayor discriminacin. Dificultad del tem: Mxima discriminacin cuando p=0,5 Dimensionalidad del test: Cuantas ms dimensiones, menor dicriminacin. Fiabilidad del test: Mayor discriminacin de los tems, mayor fiabilidad del test 5- ndices de fiabilidad y de validez de los tems. Definicin IFJ = S j ID j = S j r jX (correlacin sin incluir el tem) Nota: es funcin de los coeficientes de fiabilidad (pg. 436) Definicin: IV j = S j r jY Nota: rXY es funcin de los ndices de fiabilidad y de validez (pg. 438) Si los IFj , aumenta, pero rxy disminuye . 6.- Anlisis de los distractores. Los distractores han de cumplir algunas propiedades (pg. 439): a) Han de ser aproximadamente equiprobables. b) El rendimiento de los sujetos que han elegido una respuesta incorrecta ha de ser menor que los que han elegido la correcta. c) Cada distractor ha de discriminar negativamente. Ejemplo del libro (pg. 444). Respuesta correcta: C A Nivel de aptitud Estadsticos Superior Inferior p= prop. de sujetos (de todos) que han respondido cada distractor Media en el test de todos los sujetos los que ha respondido a cada distractor rbp 20 40 0,28 5 -0,20 B 25 35 0,50 10 0,18 C (*) 55 25 0,22 9 0,29 Total 100 100

7.- Funcionamiento diferencial del tem Impacto: Si dos grupos con distinto nivel de aptitud presentan diferencia en las puntuaciones del tem. Funcionamiento diferencial: Si dos grupos con el mismo nivel de aptitud presentan puntuaciones distintas en el tem. (El tem funciona de manera distinta en los dos grupos) Procedimiento de Mantel-Haenzel (para detectar el F.D.) (pg. 449) GR: Grupo de referencia (grupo favorecido) GF. Grupo focal. Si MH>1: F.D. a favor de GR Si MH<1: F.D. a favor del GF Si MH<1: No presenta F.D.