Presentación

La Red Iberoamericana de Investigadores en la Evaluación de la Docencia (RIIED: http://iide.ens.uabc.mx/ried/ibero/) es un colectivo que reúne a investigadoras e investigadores de diversos países latinoamericanos, Portugal y España. Su propósito es coadyuvar a la mejora de la educación a partir de las aportaciones de la evaluación

Methodological analysis of the PISA project as international assessment

En este artículo el objetivo es realizar un análisis global del Proyecto PISA como programa de evaluación internacional. Asimismo, se analizan características metodológicas de los procesos métricos que sustentan los instrumentos que se utilizan en el proyecto: las pruebas de logro y los cuestionarios de contexto. Se identifican las fortalezas y debilidades del proyecto, en diversas áreas, desde el Diseño y validación del proyecto como programa de evaluación internacional, sus usos y modos de comunicación de resultados, hasta las características métricas de sus instrumentos. Se proponen alternativas para optimizar el uso del proyecto en general y en los países involucrados en particular.  Se concluye que se trata de un proyecto que, por su calidad metodológica e impacto socio-político es valioso, si bien tiene diferentes aspectos que podrían mejorarse -tanto como programa de evaluación, como en sus fundamentos de medición educativas- para que pudiera aportar informaciones de mayor calidad y que pudieran orientar decisiones de mejora.In this paper the aim is to conduct a comprehensive analysis of PISA as international assessment program. In addition, methodological characteristics of the metrical processes underlying the instruments used in the project are also analyzed: achievement tests and questionnaires context. The strengths and weaknesses of the project in various areas are identified: from design and validation of the project as international assessment program, its uses and modes of communication of results to the metric characteristics of their instruments. They propose alternatives to optimize the use of the project in general and in particular the countries involved. It is concluded that this is a project that, for methodological quality and socio-political impact is valuable, although it has different aspects that could be improved -both as program evaluation, and educational measurements- fundamentals of measurement so that he could provide information higher quality and that could guide decisions for improvement

Dimensiones docentes y cohesión social: reflexiones desde la evaluación

La evolución de las sociedades en el s. XXI pone de manifiesto que si algo no se ha conseguido todavía a nivel humano es asegurar las posibilidades de desarrollo y dignidad para todos. Las diferencias que se observan actualmente desde las sociedades más avanzadas a las que están inmersas en graves problemas de desarrollo, son abismales y las brechas que se dan ponen de manifiesto que el ser humano, todavía, no ha sido capaz de organizarse para conseguir el objetivo social de una civilización que merezca denominase como tal. La misma ONU propuso los objetivos del milenio, y como horizonte el 2015. Actualmente ya se están empezando a oír voces, desde la propia ONU, que señalan que sería un verdadero fracaso si no se llegara a conseguir tan sólo uno de los ocho objetivos propuestos

Evaluación Criterial: determinación de estándares de interpretación (EE) para pruebas de rendimiento educativo

En este trabajo se presenta una revisión del estado de la cuestión acerca de los métodos para determinar estándares en pruebas de referencia criterial. Se analiza el concepto de estándar, sus componentes y los problemas implicados en las tareas de juicio en estos métodos. Se revisan los procedimientos para diseñar descriptores de estándares y los métodos para identificar puntuaciones de corte

Modelo para la determinación de niveles de logro y puntos de corte de los EXCALE

La determinación de los Niveles de Logro (NL) o de estándares de ejecución de los Exámenes de la Calidad y el Logro Educativos (Excale), del Instituto nacional para la Evaluación de la Educación (INEE), constituye un proceso complejo propio de la construcción de pruebas de gran escala y que implica elementos de validación. Las estrategias y procedimientos que se utilizan para lograr un adecuado sistema de interpretación de resultados de las pruebas nacionales se basan, por lo general, en métodos que han sido probados por diversas agencias evaluadoras e instituciones académicas de prestigio internacional

Manual técnico. Establecimiento de niveles de competencia

La determinación de estándares para la interpretación de los niveles de logro de los Exámenes para la Calidad y el Logro Educativos (Excale) constituye un proceso complejo en la construcción de las pruebas, el cual implica elementos de validación. La estrategia y los procedimientos utilizados para este propósito deben basarse en métodos sustentados en la experiencia que las diversas agencias e instituciones de evaluación, nacionales e internacionales han desarrollado y, a partir de ella, crear las interpretaciones de pruebas con sustento en estándares cuidadosamente diseñados, mediante soluciones ajustadas específicamente a los requerimientos de diseño, construcción y aplicación de los Excale

La evaluación del profesorado universitario en España.

El presente artículo pretende hacer una breve revisión acerca de la evaluación del desempeño del profesorado universitario en la España democrática. Se presentan: a) unas reflexiones acerca de la evaluación de la docencia, para delimitar la posición de los autores, dado que ésta condiciona indudablemente cualquier revisión; b) una breve reseña histórica de la evaluación de los docentes universitarios en España en los últimos años, desde la aprobación de la Constitución Española de 1978; c) una tipología de planes de evaluación, para definir un mapa acerca de las líneas de los planes evaluación que se aplican en España; d) las pautas técnicas para evaluar al profesorado y la presentación del modelo actual, ejemplificado en virtud de su aplicación en la universidad de Salamanca; y e) a modo de conclusión, unas reflexiones acerca de las consecuencias de la evaluación y su vinculación con la profesionalización de los docentes universitarios

Colegialidad docente: Un estudio comparativo (España/México) de validación de constructo para el diseño de un instrumento de evaluación

En Bakieva (2011) y Bakieva, Jornet y Carmona (2012) se aportan las bases teóricas y una primera validación de constructo realizada en España para el desarrollo de un instrumento de evaluación de colegialidad docente en Educación Primaria y Secundaria. Aquí presentamos un segundo análisis comparativo de los juicios de dos grupos de profesorado de España y México, que han valorado las dimensiones que componen la Colegialidad Docente. Finalmente, identificamos tres dimensiones de Colegialidad Docente: Satisfacción Laboral, como percepción de lo que ¿recibe¿ el sujeto en esa institución, Clima Institucional, como percepción exterior de lo que se vive en la institucional, y Compromiso Institucional, como percepción de lo que el sujeto está ¿dispuesto a dar¿ a la institución. El trabajo aporta evidencias de validación de la parte teórica por jueces, comparando las valoraciones de profesorado de dos países. El estudio se basa en el juicio de expertos y analiza la concordancia y nivel de las valoraciones de todos los elementos de la escala de Colegialidad en dos criterios: relevancia para el constructo teórico, y susceptibilidad de cambio de los elementos. En términos generales, puede señalarse que existe el consenso entre los jueces de España y México, y eso constituye una evidencia positiva en cuanto a la selección de elementos de evaluación establecidos para la Colegialidad Docente. En el criterio de susceptibilidad de cambio se aprecian diferencias importantes en la valoración

Evaluación de sistemas educativos:teoría y experiencia

La evaluación de sistemas educativos se ha ido constituyendo como un ámbito disciplinar que concita un gran interés socio-político y educativo. Aunque este tipo de evaluaciones ya tiene una considerable historia y un elevado impacto social, probablemente es uno de los sectores en los que mayor desconocimiento real se produce entre profesionales de la educación, administradores, gestores y la sociedad en general

La utilidad de las evaluaciones de sistemas educativos: el valor de la consideración del contexto.

En este artículo se hace una revisión de los procedimientos de evaluación de sistemas educativos. A partir de esta revisión, se analizan algunos factores relacionados con la baja utilidad de este tipo de evaluaciones. El análisis se dirige hacia el diseño deficiente de los cuestionarios de contexto. Se observa que los cuestionarios de contexto no llegan a explicar el rendimiento. Su baja capacidad de explicación del rendimiento es la causa de la baja utilidad de las evaluaciones de sistemas educativos; pues no permiten establecer recomendaciones de mejora. Se propone una base teórica y metodológica alternativa para diseñar los cuestionarios de contexto. Este tipo de metodología para diseñar los cuestionarios de contexto para la evaluación de sistemas educativos tiene como finalidad última poder asegurar la calidad teórica de los constructos que se miden, y aportar una base sólida para definir un modelo explicativo que permita extraer mayor utilidad de la información con que se trabajan las evaluaciones de sistemas. Esta propuesta indica la necesidad de tomar como referencia las aportaciones de la investigación educativa, un modelo sistémico que ayude a dar coherencia a los planes de evaluación, considerar las necesidades de información de las partes interesadas en la evaluación y un procedimiento más riguroso de diseño de instrumentos. Esta metodología es la base de otros trabajos que se presentan en este mismo número de la revista y que se citan en este artículo