La ventaja de los criterios, la escencialidad del juicio

La enseñanza es mucho más compleja que los procedimientos formales que tenemos para registrar su calidad. Todos los indicadores de calidad instruccional, formales e informales (así como los indicadores del mercado de valores cambian y la ola de calor da paso a días más fríos), [los indicadores] son simples, tienen alguna utilidad, pero existe siempre el peligro de comprenderlos mal o confiar demasiado en ellos. Evaluaciones hechas por los estudiantes y observadores administrativos son necesarias, pero rara vez han sido formalmente validadas. Ciertamente no para tomar decisiones acerca de instructores en el plano individual. Decisiones importantes acerca de un profesor (o instructor) no deben basarse en un simple indicador (o anécdota). Nosotros en los campos universitarios hemos sido capaces por mucho tiempo de hablar sensiblemente sobre la calidad de la enseñanza utilizando un lenguaje informal. Normalmente ese lenguaje es útil cuando hablamos de cursos que se ofrecen y del desarrollo de personal. El problema radica en convertir el lenguaje informal en un puntaje o perfil, así como indicar qué tan listo está [el profesor] para un ascenso (o despido) o como base para un aumento basado en mérito. La mayor parte de los perfiles basados en puntajes, técnicas de observación y listas de cotejo para la instrucción en las universidades son crudas, subjetivas, y algunas veces son causas de información errónea –aún cuando han sido analizadas y mejoradas a través de los años. Para la protección del personal de enseñanza y de otros, estamos éticamente obligados a usar múltiples clases de información para la toma de decisiones que afectan al personal y al bienestar del departamento. La revisión por portafolio y la discusión de evidencias (de enseñanza) en paneles son caminos hacia la obtención de indicadores válidos de la calidad de enseñanza. Más aún, las metas de la educación son diversas para estudiantes, profesores, instituciones y las profesiones. Esta diversidad no puede ser manipulada al promover calidad de enseñanza, pero debería ser reconocida. También debemos de tomar en cuenta lo que necesita el personal de enseñanza dentro de sus diferentes estilos y especialidades docente. Ningún estilo de enseñanza es mejor que otr

Una experiencia de investigación utilizando portafolios para evaluar la docencia universitaria

In this article, we use the findings of a study conducted in a university in the southeast of Mexico to examine strengths and limitations of portfolios to assess formatively the quality of teaching. The research is part of the study: Model for the Development and Evaluation of Academic Competencies, involving researchers from six Mexican universities. Findings of the study indicate that the use of portfolio allowed faculty members to collect evidence of the quality of their work, analyze their classroom instruction and began to involve in a dialogue for improving teaching.En este artículo, usamos los resultados de un estudio que se lleva a cabo en una Universidad del sureste de México para examinar las fortalezas y limitaciones de los portafolios para evaluar de manera formativa la calidad de la docencia. La investigación es parte del estudio: Modelo para el Desarrollo y Evaluación de Competencias Académicas e involucra a investigadores de seis universidades Mexicanas. Los resultados de la investigación indican que el uso del portafolio permitió a los docentes colectar evidencia sobre la calidad de su trabajo, analizar su práctica en el aula y comenzar a involucrarse en un diálogo para mejorar la docencia

Usando os resultados da avaliação para melhorar as práticas pedagógicas: um estudo de caso

A substantial body of research has been conducted on the use of student evaluations of college teaching. This research has mainly centered on the dimensionality, validity, reliability and generalizability of the ratings, and the study of possible biasing factors that could affect the validity of the ratings (Marsh, 1984; Braskamp & Ory, 1994; El -Hassan, 1995). Only a limited number of studies have been conducted on the longitudinal use of student ratings and their possible influence on instructional improvement. This research case study is committed to that purpose. This is a case study of a senior professor in a public research university in the Midwest. The study traces how the instructor uses the feedback from peers, his department head and students. The research is an attempt to better understand the evaluation results as feedback for instructional improvement.Un cuerpo sustancial de investigación se ha centrado en el uso de opiniones de los estudiantes para evaluar la docencia universitaria. Esta investigación se ha centrado principalmente en la dimensionalidad, validez, fiabilidad y generalización de los puntajes otorgados por los estudiantes, y el estudio de los posibles factores de polarización que podrían afectar su validez (Marsh, 1984; Braskamp y Ory, 1994; El-Hassan, 1995). Sólo un número limitado de estudios se han dirigido hacia el uso longitudinal de valoraciones de los estudiantes y su posible influencia en la mejora de la enseñanza. Esta investigación por estudio de casos se ha comprometido con dicho propósito. Se trata de un estudio de caso acerca de un catedrático en una universidad pública orientada a la investigación en el medio oeste de los Estados Unidos de América. El estudio examina cómo el instructor utiliza la retroalimentación de sus compañeros, de su jefe de departamento y de los resultados de la evaluación basados en opiniones de estudiantes. La investigación es un intento de comprender mejor los resultados de la evaluación como retroalimentación para la mejora de la enseñanza.Um corpo substancial de investigação se centrou no uso de opiniões dos estudantes para avaliar a docência universitária. Esta investigação se centrou principalmente na dimensionalidad, validez, fiabilidade e generalização dos puntajes outorgados pelos estudantes, e o estudo dos possíveis fatores de polarização que poderiam afetar sua validez (Marsh, 1984; Braskamp e Ory, 1994; O-Hassan, 1995). Só um número limitado de estudos se dirigiram para o uso longitudinal de valorações dos estudantes e sua possível influência na melhora do ensino. Esta investigação por estudo de casos se comprometeu com dito propósito. Trata-se de um estudo de caso a respeito de um catedrático numa universidade pública orientada à investigação no médio oeste dos Estados Unidos de América. O estudo examina como o instrutor utiliza a retroalimentação de seus colegas, de seu chefe de departamento e dos resultados da avaliação baseados em opiniões de estudantes. A investigação é uma tentativa de compreender melhor os resultados da avaliação como retroalimentação para a melhora do ensino

Calificando el trabajo de un estudiante de doctorado en educación musical

En este artículo reflexiono sobre los estudios de caso cualitativos tomando como ejemplo el trabajo de un estudiante de doctorado con formación en educación musical y la justificación que preparé para calificarlo. La educación musical es un buen campo curricular para mostrar que el todo es mucho más que la suma de sus partes y que las interpretaciones educativas surgen de nuestra experiencia personal, sin importar cuánto sepamos, en este caso, de música

Grading a Music Education Graduate Student Paper

En este artículo reflexiono sobre los estudios de caso cualitativos tomando como ejemplo el trabajo de un estudiante de doctorado con formación en educación musical y la justificación que preparé para calificarlo. La educación musical es un buen campo curricular para mostrar que el todo es mucho más que la suma de sus partes y que las interpretaciones educativas surgen de nuestra experiencia personal, sin importar cuánto sepamos, en este caso, de música.In this paper I reflect about qualitative case studies, taking as example a music education graduate student paper and the explanation I prepared in grading it. Music education is a good curricular field to illustrate that the whole is much more than the sum of its parts, and that educational interpretations emerges from inside experience, no matter how much expertise we have, e.g., in music.Grupo de Investigación FORCE (Formación Centrada en la Escuela) Universidad de Granad

Assessing the Quality of a University-Particularly its Teaching

[EN] Universities are complex organizations, made up of semi-autonomous sectors and even more autonomous faculty members. Tradition and rules push activities toward homogeneity. Still, most administrators, staffs and students enjoy a grand leeway in which to work. Vincent Tinto (1995) noted that it would be difficult to find a single academic culture but, different cultures, different practices of evaluation and various groups of teachers and students. Informal and formal evaluation procedures abound, and all, individually and collectively, fall far short of delivering a comprehensive statement of university quality. The greatest understanding of quality is to be found in experienced individuals who attend to the flows of information across campus and disdain efforts to make shallow ratings and reputations stand for the goodness of the whole or certain parts. The most invested in evaluation yet seldom forthright about educational quality is the administration, which of course needs both internal and external evaluation. The evaluation of teaching on campus is a particularly accessible example of complexity and assessment methods, and serves as the primary example of this document. The distinction between formative and summative evaluation is critical, and the same data seldom can serve both. The strategies for formative use of data to improve the university are said to be: The goal-based strategy, the deficit strategy, the sector-study strategy, and the self-study strategy, which overlap and complement, but get the greatest gain when the energy of self-study can be brought forth.[ES] Las universidades se constituyen en organizaciones complejas compuestas por estructuras semiautónomas y por un profesorado aún más autónomo. La tradición y las normas dirigen las actividades hacia la homogeneidad. Así y todo, la mayoría de administradores, profesores y alumnos gozan de un gran margen de libertad para desarrollar su trabajo. Vincent Tinto (1995) señala que es difícil identificar una cultura académica única, ya que existen diferentes culturas, diferentes prácticas de evaluación y diversidad de grupos en cuanto a profesores y alumnos. Abundan los procedimientos formales e informales de evaluación y todos ellos, individual y colectivamente, resultan insuficientes a la hora de generar una valoración completa de la calidad universitaria. La mejor comprensión de la calidad podemos encontrarla en aquellas personas con experiencia que atienden especialmente a los flujos de información que se dan en el campus y que rechazan los intentos por hacer de calificaciones y escalas superficiales elementos representativos de la calidad del conjunto o de alguna de sus partes. Quien más interés tiene en la evaluación, aunque pocas veces afronta con franqueza la calidad educativa, es la administración, que por supuesto necesita evaluaciones internas y externas. La evaluación de la enseñanza en el campus es un ejemplo especialmente cercano de la complejidad y de los métodos de evaluación, y constituye la referencia principal en este documento. La distinción entre evaluación formativa y sumativa es crítica, y la misma información rara vez sirve para ambas. Se dice que las estrategias del uso formativo de datos para mejorar la universidad son: la estrategia basada en objetivos, la basada en el déficit, la basada en un sector de estudio y la estrategia basada en el autoestudio, estrategias que se solapan y complementan, consiguiendo los mayores beneficios cuando se consigue poner en juego el potencial de la estrategia del autoestudio.Stake, RE.; Arbesú García, MI.; Contreras Pérez, G. (2017). Evaluando la calidad de la Universidad – Particularmente su enseñanza. REDU. Revista de Docencia Universitaria. 15(2):125-142. doi:10.4995/redu.2017.6371SWORD12514215

Enseñando para la Equidad, Aprendiendo sobre Discriminación Social en una Sociedad Meritocrática

In this paper, we will examine key points for research attention in the effort to commit educational systems to equity education. We will examine the concepts of equity, equality and discrimination. We will give specific attention to the role of teacher educators. Teachers need to understand and to be able to see social discrimination in educational systems and policies and in classroom relationships. We will claim that equity education holds low priority even in those countries making the strongest efforts at social equity and protection of human rights. And the reason for low priority as we see it is the almost universal demand for discriminating among students on narrow academic grounds.En este artículo analizamos algunos puntos clave en el ámbito de la investigación educativa en el esfuerzo de comprometer los sistemas educativos con la educación para la equidad. Examinamos los conceptos de equidad, igualdad y discriminación, prestando una atención especial al papel de la formación del profesorado en estos procesos sociales. El profesorado necesita comprender y desarrollar la sensibilidad para percibir las discriminaciones sociales tanto en las políticas y en el sistema educativo, como en las propias relaciones que se establecen dentro de las aulas. Planteamos que, incluso en aquellos países que hacen un gran esfuerzo para promover la equidad social y proteger los derechos humanos, la educación equitativa no es una prioridad. Consideramos que la razón de esa baja prioridad reside en la demanda casi universal de discriminación de los estudiantes a partir de criterios académicos restrictivos

Painting the Nation:Examining the Intersection Between Politics and the Visual Arts Market in Emerging Economies

Politics and art have throughout history, intersected in diverse and complex ways. Ideologies and political systems have used the arts to create a certain image and, depending on the form of government this has varied from clear-cut state propaganda, to patronage, to more indirect arms-length funding procedures. Therefore, artists working within the macro-level socio-political context cannot help but be influenced, inspired and sometimes restricted by these policies and political influences. This article examines the contemporary art markets of two emerging, Socialist economies to investigate the relationship between state pol-itics and the contemporary visual arts market. We argue that the respective governments and art worlds are trying to construct a brand narrative for their nations, but that these discourses are often at cross-purposes. In doing so, we illustrate that it is impos-sible to separate a consideration of the artwork from the macro-level context in which it is produced, distributed, and consumed