Seminario impartido por los Doctores Susana Olmos Migueláñez y Fernando Martínez Abad del grupo GRIAL en el programa de doctorado en Formación en la Sociedad del Conocimiento

Martínez Abad, Fernando

Olmos Migueláñez, Susana

Spanish

Gestion del Repositorio Documental de la Universidad de Salamanca

Validación estadística de pruebas y escalas  Dra. Mª José Rodríguez Conde Dra. Susana Olmos Migueláñez Dr. Fernando Martínez Abad Grupo de Evaluación Educativa y Orientación (GE2O) GRupo de investigación en InterAcción y eLearning (GRIAL) Instituto Universitario de Ciencias de la Educación (IUCE) Universidad de Salamanca Salamanca, 23 de mayo de 2014 Programa de Doctorado Formación en la Sociedad del Conocimiento Seminario de doctorado 23 de mayo de 2014 Validación de ítems dicotómicos en la TCT Validación de escalas dicotómicas con TRI a través de modelos RASCH Validación de ítems y escalas continuas en la TCT: análisis factorial exploratorio Susana Olmos Migueláñez Fernando Martínez Abad  Validación estadística de pruebas y escalas La validación de escalas: base teórica de la TCT y la TRI Confirmación de estructuras de estructuras dimensionales: introducción al análisis factorial confirmatorio ¿POR QUÉ LAS TEORÍAS DE LOS TEST? (Muñiz, 2010) 1º. LOS TEST = INSTRUMENTOS DE MEDIDA INFERENCIA  DECISIONES AFECTAN A PERSONAS 2º. TEORÍAS ESTIMAR  FIABILIDAD   VALIDEZ TEORÍA CLÁSICA DE LOS TESTS – TCT- TEORÍA DE RESPUESTA AL ÍTEM –TRI- Encontrar un modelo estadístico que fundamente adecuadamente las puntuaciones de los tests y permita la estimación de los errores de medida asociados en todo proceso de medición MODELO LINEAL CLÁSICO consiste en asumir que:  Supuestos Muñiz,  1992, 2010 que no se comprueban empíricamente   TEORÍA CLÁSICA DE LOS TESTS – TCT- (I) 1. V=E(X) 2. r(v,e)=0 3. r(ej,ek)=0 1. V=E(X)  La puntuación verdadera  (V) en un test como aquella puntuación que obtendría como media si se le pasase infinitas veces el test 2. r(v,e)=0 NO EXISTE RELACIÓN entre el tamaño de la puntuaciones verdaderas (V) y de los errores (E) 3. r(ej,ek)=0 los errores (E) de medida de una persona en un test NO ESTÁN RELACIONADOS CON los errores (E) de medida en otro test distinto Test paralelos miden lo mismo con diferentes ítems TEORÍA CLÁSICA DE LOS TESTS – TCT- (II) Modelo lineal clásico X= V+E Tres supuestos Concepto Test paralelos TCT BASE FÓRMULAS FIABILIDAD VALIDEZ TEORÍA DE RESPUESTA AL ÍTEM –TRI- Variable medida Probabilidad de acertar Supuestos Muñiz, 2010, p.63 1. Existe relación funcional entre los valores que miden los ítems y la probabilidad de acertar CURVA CARACTERÍSTICAS DEL ITEM –CCI Al aumentar los valores de la variable medida aumenta la probabilidad de acertar el ítem Parámetros  a = índice de discriminación b = dificultad del ítem c = probabilidad de acertar el ítem 2. ITEM=UNIDIMENSIONALES 3. ITEMS=INDEPENDIENTES la respuesta a uno de ellos no puede estar condicionada por la respuesta a otros DIFERENCIAS ENTRE TCT Y TRI Muñiz, 2010, p.64   Índices de  dificultad y discriminación de los ítems ÍNDICE DE DIFICULTAD proporción de sujetos que lo aciertan de los que han respondido El índice de dificultad mide la dificultad del ítem, el valor es [0,1]; de tal forma que un valor próximo a 1 indica que la mayoría de los sujetos lo aciertan; en consecuencia sería un ítem demasiado fácil. Por el contrario, un ítem próximo a 0 sería aquel que no ha sido respondido correctamente por ningún participante o por muy pocos, por tanto sería un ítem difícil. Se expresa en porcentaje o en proporción.   ID= A/N Pomés y Argüelles (1995, p. 50) Propiedades psicométricas: validez y fiabilidad FIABILIDAD “grado de consistencia o constancia entre los resultados de repetidas aplicaciones de la prueba a poblaciones de características semejantes” (Pomés y Argüelles,  1991, p. 55).  Fiabilidad como consistencia interna: grado en que los distintos ítems contribuyen a la escala global. La fiabilidad se obtiene a partir de la correlación de las puntuaciones del ítem con la puntuación total del test; se considera que una prueba tiene una fiabilidad aceptable a partir de 0,7 (Morales, Urosa y Blanco, 2003), por debajo sería poco aceptable, y hablaríamos de fiabilidad muy alta a partir de 0,80. La validez se obtiene a partir de la correlación del ítem con otras variables.       VALIDEZ Característica de una prueba que indica el grado en que una prueba mide realmente aquello para lo que fue diseñada (Aiken, 2003; Martínez Arias, 1995; Herrera, 2010))   De contenido grado en que el conjunto de ítems del test constituyen buenos indicadores de lo que se pretende medir  De criterio muestra las relaciones del constructo medido con distintos instrumentos, a veces se utilizan ítem-criterio (otros instrumentos relacionados como elemento de comparación)  De constructo aporta información sobre hasta qué punto la escala se ajusta a los modelos teóricos explicativos del objeto que pretendemos medir  Predictiva el elemento de referencia es otro constructo diferente (mostrado como predictor en investigaciones previas) Propiedades psicométricas: validez y fiabilidad CONSTRUCCIÓN DE TEST- FASES   Consultar:  Muñiz, J. y Fonseca-Pedrero, E. (2008). Construcción de instrumentos de medida para la evaluación universitaria. Revista de Investigación en Educación, 5, 13-25. http://webs.uvigo.es/reined/ojs/index.php/reined/article/viewFile/40/35 Abad, F. J., Olea, J., Ponsoda, V. y García, C. (2011). Medición en ciencias sociales y de la salud. Madrid: Síntesis. Muñiz, J. (1992). Teoría clásica de los tests. Madrid: Pirámide. Muñiz, J. (2010). Las teorías de los tests: Teoría Clásica y Teoría de Respuesat al Ítem. Papeles del Psicólogo [en linea] 2010, 31 (Enero-Abril) : [Fecha de consulta: 22 de mayo de 2014] Disponible en:<http://www.redalyc.org/articulo.oa?id=77812441006> ISSN 0214-7823 Pomés, J. y Argüelles, B. (1991). Análisis de ítems de opción múltiple. Zaragoza: Secretariado de publicaciones.  Validación estadística de pruebas y escalas  Dra. Mª José Rodríguez Conde Dra. Susana Olmos Migueláñez Dr. Fernando Martínez Abad Grupo de Evaluación Educativa y Orientación (GE2O) GRupo de investigación en InterAcción y eLearning (GRIAL) Instituto Universitario de Ciencias de la Educación (IUCE) Universidad de Salamanca Salamanca, 23 de mayo de 2014 Programa de Doctorado Formación en la Sociedad del Conocimiento Seminario de doctorado 23 de mayo de 2014 

Validación estadística de pruebas y escalas

https://gredos.usal.es/bitstream/10366/124039/1/PDFSC_Seminario_Validacion_Estadistica.pdf

Validación estadística de pruebas y escalas

Abstract

Similar works

Full text

Available Versions

Gestion del Repositorio Documental de la Universidad de Salamanca