Calvo Pérez, C.

Gil Flores, Javier

Ibarra Saiz, Marisol

Rodríguez Gómez, Gregorio

Spanish

idUS. Depósito de Investigación Universidad de Sevilla

DESARROLLO DE HERRAMIENTAS PARA LA EVA-LUACIÓN Y MEJORA DE LOS RESULTADOSDEL APRENDIZAJEJavier Gil FloresUniversidad de SevillaMarisol Ibarra Saiz, Gregorio Rodríguez Gómez, y Calvo Pérez, C.Universidad de CádizINTRODUCCIÓNTradicionalmente, los aprendizajes logrados por elalumnado han constituido el principal objeto de la evalua-ción educativa, asumiendo la evaluación del aprendizajeun papel relevante entre el conjunto de actividades y tare-as que se desarrollan en los centros docentes de cualquieretapa de nuestro sistema educativo. La evaluación consti-tuiría una vía para valorar la consecución de los objetivosde aprendizaje y para fundamentar la adopción de medi-das dirigidas a reorientar y mejorar esos aprendizajes.En el estudio de los resultados de aprendizaje logradospor los alumnos en las instituciones educativas, la comuni-dad científica ha manejado el tópico “evaluación del rendi-miento” (Arias, 1990; Pérez y Nieto, 1992). Generalmen-te, en los trabajos que hacen referencia al rendimientoeducativo, la evaluación aparece asociada a las calificacio-nes escolares, mediante las que se reflejaría el nivel deaprendizaje logrado por el alumnado. Entendido de estemodo, el rendimiento educativo se ha analizado en nuestropaís poniendo en relación las calificaciones obtenidas conmúltiples variables personales, escolares, institucionales osociofamiliares, tratando de explicar por esta vía la com-plejidad del mismo (Gómez Dacal, 1992; Castejón, Mon-tañés y García, 1993 Celorrio, 1999; Ridao y Gil, 2002). Este modo de valorar el rendimiento educativo tienecomo limitación el hecho de que no siempre las institu-ciones escolares y sus profesores han valorado del mismomodo los logros de sus alumnos, existiendo la posibilidadde que en determinados contextos una misma calificaciónrefleje mayor o menor nivel de aprendizaje. Por ese moti-vo, se ha recurrido también a la medición del rendimientoacadémico buscando otros criterios diferentes a la valora-ción que el profesorado hace sobre el aprendizaje delalumnado, y que refleja en forma de calificaciones finalesde curso. Así, otra vía para valorar el rendimiento es a par-tir de pruebas externas, no elaboradas por el profesoradoresponsable del proceso de enseñanza-aprendizaje des-arrollado con los alumnos, que estarían desvinculadas tan-to de las peculiaridades curriculares de los centros comode las apreciaciones de los profesores. En este sentido se orientan las evaluaciones realizadasdesde la Administración u otras instituciones, con el finde valorar el rendimiento del alumnado. En nuestro paíspodemos citar un reciente ejemplo de este tipo de estu-dios, que ha supuesto evaluaciones en los años 2000,2003 y 2006, dentro de la denominada iniciativa PISA(Programa para la Evaluación Internacional de los Alum-nos). La finalidad es evaluar el rendimiento de los alum-nos de 15 años en un número amplio de países, que inclu-ye a los de la OCDE. Las pruebas utilizadas se basan encompetencias básicas que deben poseer los alumnos, conindependencia de las peculiaridades curriculares quecaracterizan a los sistemas educativos de los respectivospaíses, facilitando de este modo la comparabilidad entrelos resultados obtenidos.Si nos situamos a nivel del sistema educativo español,a la experiencia de PISA, hay que añadir los estudios queviene elaborando el Instituto Nacional de Evaluación yCalidad del Sistema Educativo (antiguo INCE), en los quese evalúan los aprendizajes logrados por los alumnos endiferentes etapas y áreas. Es el caso de los Informes sobre843Evaluación de la Educación Primaria (INCE, 1997, 2001;INECSE, 2005) o sobre la Evaluación de la EducaciónSecundaria Obligatoria (INCE, 2003), entre otros. Recien-temente se han puesto en marcha en la Comunidad Autó-noma de Andalucía la evaluación de diagnóstico, quesupone la aplicación en todos los centros andaluces públi-cos o concertados de pruebas para medir las competenciasbásicas en materia de comunicación lingüística y mate-máticas, de acuerdo con la regulación que se hizo del pro-ceso en la Orden de 28 de junio de 2006 (BOJA de 4 deagosto). Con ello se anticipa el escenario planteado en estesentido por la nueva Ley 2/2006, de 3 de mayo, de Educa-ción (BOE de 4 de mayo de 2006), que prevé a realizaciónde evaluaciones de diagnóstico en nuestro sistema educa-tivo. En todos los casos mencionados, las evaluaciones uti-lizan pruebas externas para valorar los aprendizajes en lasáreas fundamentales del currículum escolar. Combinando la información sobre el rendimiento que segenera en los centros a través de las calificaciones escolaresy la que procede de pruebas externas, el objetivo de nuestrotrabajo se centra en el desarrollo de una estrategia para eldiagnóstico del aprendizaje del alumnado de los niveles deEducación Primaria y Educación Secundaria Obligatoria,que pueda ser tomada como referencia para llevar a cabo laevaluación formativa del rendimiento en los centros educa-tivos. Dicha estrategia requiere el diseño previo de una seriede elementos que ha sido preciso poner a punto, a los cualesnos referiremos utilizando la denominación de herramientaspara el diagnóstico y mejora del rendimiento. El conjunto de herramientas desarrolladas puedenestructurarse en varios niveles, de acuerdo con el papelque desempeñan en el proceso de evaluación y mejora. Taly como queda reflejado la figura 1, tres son los tipos deherramientas que se han considerado:844Figura 1. Herramientas desarrolladas para el diagnóstico y mejora del rendimiento• Herramientas básicas. Son aquéllas que facilitan laobtención de información acerca de la situación de loscentros en cuanto al rendimiento logrado y el aportede orientaciones o pautas de actuación dirigidas aéstos. Se encuadran aquí un conjunto de pruebas dediagnóstico que hemos construido para la evaluaciónen cinco ámbitos de aprendizaje diferenciados, dirigi-das a los niveles de 4º de EP y 2º de ESO, un sistemade indicadores para valorar la situación de los centros,y una serie de medidas que podrían adoptarse en res-puesta a situaciones deficitarias en lo que se refiere alrendimiento logrado.• Herramientas de soporte. La gestión y explotación delas informaciones generadas por las herramientasanteriores se facilita a través de una aplicación infor-mática diseñada específicamente para esta función.Esta aplicación sirve de soporte a las tareas de eva-luación formativa del rendimiento, constituyendo elinstrumento de trabajo en el que se apoya la evalua-ción formativa realizada en los centros.• Herramientas estratégicas. Las constituyen el con-junto de procedimientos que se ofrecen a los centrospara orientarles en la evaluación y mejora del rendi-miento de su alumnado. Se concretan en una Guía deEvaluación y Mejora del Rendimiento, en la cual sedan pautas para la utilización de las herramientasbásicas y el manejo de las herramientas de soporte. En esta comunicación presentamos los aspectos fun-damentales relativos al desarrollo de las denominadasherramientas básicas.1. PRUEBAS DIAGNÓSTICAS PARA EL ALUMNA-DO DE EP Y ESOLas pruebas diagnósticas constituyen un elementoimportante en el sistema de evaluación propuesto, siendouna de las herramientas para calibrar el nivel de rendi-miento alcanzado por el alumnado de un centro. Las prue-bas van dirigidas al alumnado que finaliza los cursos 4º deEP y 2º de ESO, abarcando los aprendizajes en Matemáti-cas, Lengua Castellana y Literatura, Ciencias, LenguaExtranjera y Tecnologías de la Información y la Comuni-cación (ésta última contemplada sólo para el alumnado deESO). Han adoptado el formato de pruebas objetivas, uti-lizando preguntas de elección múltiple con cuatro posiblesopciones de respuesta.En su construcción hemos seguido las fases habitualesen el diseño de este tipo de instrumentos. Partiendo de unadefinición del objeto de evaluación, que en este caso sonlos aprendizajes en los cinco ámbitos considerados, se hanformulado ítems contando para ello con matrices de espe-cificaciones que describen el contenido evaluado, se havalorado la idoneidad de los mismos a partir del examencrítico por parte de jueces y de su aplicación piloto a unamuestra de alumnado extraída de la misma población a laque se dirigen las pruebas. Para la aplicación piloto se seleccionó aleatoriamenteuna muestra de 25 centros de las ocho provincias andalu-zas que imparten la etapa de EP, y otros 25 que impartenla ESO. En cada uno de los centros se aplicaron las prue-bas correspondientes a dos materias, que fueron respondi-das por el alumnado que en el primer trimestre del cursoescolar 2005-2006 iniciaban estudios de 5º de EP y 3º deESO. En total, participaron en la administración de laspruebas 1554 alumnos de Primaria y 4278 de Secundaria. El análisis de los resultados obtenidos en la aplicaciónpiloto ha permitido seleccionar aquellos ítems que pre-sentan mejor comportamiento desde el punto de vista psi-cométrico, teniendo en cuenta la dificultad y discrimina-ción de los mismos. Estos items han pasado a formar partede la versión definitiva de las pruebas, para las que en latabla 1 se recogen algunas de sus características.845Tabla 1. Estadísticos descriptivos y fiabilidad para las pruebas de diagnósticoPara facilitar la interpretación de los resultados obte-nidos por alumnos o centros concretos, se transformaronlas puntuaciones trasladándolas a una escala de media500 y desviación típica 100. Finalmente, las pruebasdiagnósticas se han integrado en una aplicación informá-tica a través de la cual se presentan las cuestiones alalumnado, se recogen sus respuestas y se analizan losresultados, ofreciendo retroalimentación inmediata a losusuarios. 2. SISTEMA DE INDICADORES DE RENDIMIEN-TO PARA LOS CENTROSEl objetivo de los indicadores es reflejar la situación delos centros educativos en lo que respecta al rendimientologrado. Se han tenido en cuenta para ello datos sobre losresultados obtenidos a nivel interno en los procesos deenseñanza-aprendizaje, y también datos generados por laaplicación de pruebas externas. En la tabla 2 se recogenlos indicadores empleados para medir el nivel de rendi-miento en el centro escolar. Tabla 1. Sistema de indicadores de rendimientoconsidera la formación que recibe en el centro igual osuperior a la del resto de centros de su entorno o localidad.3. MEDIDAS EN RESPUESTA A SITUACIONES DERENDIMIENTO DEFICITARIOOtra de las herramientas que se integran en la pro-puesta para llevar a cabo la evaluación formativa de losniveles de aprendizaje logrados en los centros educativosandaluces es el conjunto de medidas que podrían adoptar-se de cara a la mejora del rendimiento. La intención esconectar los resultados del diagnóstico con determinadaspautas de acción que orienten la intervención que puederealizarse desde los centros.La identificación de las medidas dirigidas a los centros seha apoyado metodológicamente en la técnica del gruponominal, en el que han participado un total de ocho personasque responden al perfil de profesores universitarios especia-lizados en organización escolar, miembros de equipos direc-tivos de centros que imparten EP y/o ESO, orientadores omiembros de la inspección educativa, todos ellos selecciona-dos por su experiencia y conocimiento de la realidad educa-tiva de los centros. Las medidas han sido identificadas, pun-846Los indicadores internos hacen referencia a resultadosde la evaluación del rendimiento en los centros, recogien-do información sobre los logros del alumnado y sobre elcomportamiento de las materias. Los indicadores externos se construyen a partir de lainformación aportada por las pruebas externas de rendi-miento a las que se ha hecho referencia en el apartadoanterior. Junto a esta información, se han utilizado tam-bién los resultados de las referidas evaluaciones de diag-nóstico que han comenzado a aplicarse en los centrossostenidos con fondos públicos en la Comunidad Autó-noma Andaluza. Este tipo de pruebas generan igualmen-te indicadores que sintetizan la posición de los centrosrespecto a las competencias medidas. Los indicadoresbasadas en pruebas externas diferencian entre medidasde conformidad y medidas de excelencia, al determinarel porcentaje de elementos de competencia medidos enun ámbito o área que son superados con puntuaciones de3 ó de 5 respectivamente, para una escala de puntuaciónque iba de 1 a 6.Finalmente, se incluye un indicador de percepción,mediante el cual se mide el porcentaje de alumnado quetuadas y priorizadas con la intención de responder a tres su-puestos de situaciones deficitarias en cuanto a rendimiento:• Bajo nivel en el rendimiento académico medido porel centro. Se trata de medidas adecuadas para centrosen los que los indicadores relativos a calificaciones enlas diferentes materias, promoción, fracaso, etc.registran valores por debajo de los umbrales de acep-tación fijados.• Nivel de rendimiento académico aceptable, pero pun-tuaciones por debajo de la media en pruebas externas.Las medidas contenidas en este bloque se dirigen acentros en los que los indicadores internos de rendi-miento registran valores adecuados, pero sus resulta-dos en las pruebas externas administradas o en lasevaluaciones diagnósticas promovidas desde laAdministración Educativa se sitúan por debajo de losniveles de aceptación mínimos establecidos para losindicadores correspondientes.• Bajo nivel de aprendizaje, según la percepción delalumnado. Aquí se incluyen medidas destinadas acentros en los que, con independencia de que concu-rran situaciones como las descritas en los dos supues-tos anteriores, existe la percepción entre el alumnadode que los niveles de aprendizaje logrados en el cen-tro son relativamente bajos. Las tres situaciones anteriores han sido consideradas encentros que imparten la etapa de la ESO, mientras que paralos que imparten la etapa de EP se ha prescindido de las per-cepciones del alumnado, debido a que la edad de los suje-tos dificulta en este caso la elaboración y expresión de jui-cios valorativos sobre los niveles de rendimiento del centro. Dependiendo de la gravedad de los déficits que llega-ran a detectarse, las medidas ofrecidas a los centros comorecomendaciones para la mejora varían en amplitud, con-siderando dos niveles. Ante situaciones ligeramente defi-citarias se presentan sólo las medidas fundamentales, queocupan los primeros lugares en la priorización realizadapor los participantes en el grupo nominal, mientras queante problemas severos de rendimiento se llega a proponerel despliegue de la totalidad de las medidas que se hanconsiderado en mayor o menor grado prioritarias en losdiferentes supuestos contemplados. A título de ejemplo, mostramos aquí las orientacionesque se han elaborado, de acuerdo con el procedimientodescrito, para el caso de centros que imparten ESO yalcanzan niveles de aprendizaje menores que en otros cen-tros de su entorno, según la percepción del alumnado (vercuadro 1). Las medidas aparecen clasificadas por temas y,dentro de éstos, ordenadas según la prioridad atribuida porlos participantes en el grupo nominal. Se ha señalado conun asterisco aquellas que se ofrecen a centros que registranun déficit ligero de rendimiento, que se corresponden conlas más puntuadas por los participantes en el grupo nomi-nal; la totalidad de las medidas van destinadas a los cen-tros en los que se diagnostica un déficit severo.847Cuadro 1: Orientaciones para centros de ESO con baja percepción de su alumnado respecto al aprendizaje conseguido4. PRECISIONES FINALESLas herramientas desarrolladas permiten llevar a caboun diagnóstico en los centros, apoyándose para ello en laGuía para la Evaluación y Mejora del Rendimiento, ela-borada con este fin, y en la aplicación informática diseña-da para gestionar el proceso de evaluación formativa. Con el trabajo realizado se ha puesto el énfasis no sóloen la elaboración de los instrumentos de diagnóstico quepermitan conocer el nivel de aprendizaje logrado por losescolares y la situación del rendimiento en el centro glo-balmente considerado, sino también y especialmente enel establecimiento de vías para conectar este diagnósticocon planes y actuaciones de mejora que permitan elevartales niveles cuando éstos son deficitarios. El interés nose agota en proporcionar una información sobre el rendi-miento académico, sino que implica también la propues-ta de líneas de trabajo para que los resultados del diag-nóstico puedan servir de cara a la intervención encontextos particulares.La aplicación piloto de las herramientas diseñadas y dela estrategia que se propone para la utilización de las mis-mas permitirá valorar directamente en los centros su ido-neidad y adecuación.BIBLIOGRAFÍAArias Blanco, M.P. (1990). Tesis doctorales sobre evalua-ción del rendimiento. Aula Abierta, 56, 206-214.Castejón, J.L.; Montañés, J.; García, A. (1993). Estrate-gias de aprendizaje y rendimiento académico. Revistade Psicología de la Educación, 13, 89-105.Celorrio, R. (1999). Factores de influencia en el rendi-miento educativo, en Revista Ciencias de la Educa-ción, 177, 7-33.Gómez Dacal, G. (1992). Rasgos del alumno, eficienciadocente y éxito escolar. Madrid: La Muralla.INCE (1997). Evaluación de la Educación Primaria.Madrid: MECINCE (2001). Evaluación de la Educación Primaria 1999.Madrid: MECD.INCE (2003). Evaluación de la Educación SecundariaObligatoria 2000. Madrid: MECD.INECSE (2005). Evaluación de la Educación Primaria2003. Madrid: MEC.Pérez, G. y Nieto, S. (1992). Análisis estadístico y biblio-métrico sobre investigaciones y estudios acerca delrendimiento académico en España (1976-1986):aspectos conceptuales y descriptivos, en Aula Abierta,60, 47-67.Ridao, I. y Gil, J. (2002). La jornada escolar y el rendimientode los alumnos. Revista de Educación, 327, 141-156.848

Desarrollo de herramientas para la evaluación y mejora de los resultados del aprendizaje

https://idus.us.es/bitstream/handle/11441/78008/DESARROLLO%20DE%20HERRAMIENTAS%20PARA%20LA%20EVALUACI%c3%93N%20Y%20MEJORA%20DE%20LOS%20RESULTADOS%20DE%20APRENDIZAJE.pdf?sequence=1&isAllowed=y

Desarrollo de herramientas para la evaluación y mejora de los resultados del aprendizaje

Abstract

Similar works

Full text

Available Versions

idUS. Depósito de Investigación Universidad de Sevilla