Compreendendo os sinais: São relevantes os modelos de medidas múltiplas da eficácia do professor para fornecer informações consistentes para professores e diretores?

There is increasing policy interest in the use of standards-based multiple measure teacher evaluation systems that include both observational and value-added measures of teacher effectiveness. The growing literature that assesses the relationships between these measures does so mainly in academic settings using a validity lens. While valuable in their own right, this evidence from research-based settings provides little evidence about how teachers and principals receive the different signals from multiple measures of effectiveness when implemented in district contexts. Using pairwise correlations and a series of ordinary least squares regressions, this study assesses the relationships between value-added measures of teacher effectiveness and an observational measure of teacher practice as implemented in a district's pilot of a new standards-based multiple-measure teacher evaluation system. We find moderate correlations between value-added and observation-based measures, indicating that teachers will receive similar but not entirely consistent signals from each performance measure. We conclude by highlighting considerations for districts working to develop and implement standards-based multiple-measure teacher evaluation systems. Cada vez hay más interés en el uso de los sistemas de medidas múltiples de evaluación docente basados en estándares con medidas de observación y de valor añadido de la eficacia docente. La creciente literatura que evalúa las relaciones entre estas medidas lo hace principalmente en el ámbito académico utilizando la lente de la validez. Si bien valiosa, la evidencia basada en la investigación proporciona poca información sobre cómo los profesores y directores reciben las diferentes señales de los múltiples medidas de efectividad cuando se implementa en contextos distritales. Utilizando correlaciones por pares y una serie de regresiones de mínimos cuadrados ordinarios este estudio evalúa la relación entre las medidas de valor agregado de la eficacia docente y una medida observacional de la práctica docente como se aplica en una prueba piloto en un distrito con un sistema de múltiples medidas. Encontramos correlaciones moderadas entre el valor agregado y las medidas basadas en la observación, lo que indica que los docentes recibían señales enteramente coherentes similares pero no de cada medida de desempeño. Concluimos resaltando consideraciones para los distritos que trabajan para desarrollar e implementar sistemas de evaluación docente de medidas múltiples basadas en estándares. Há um crescente interesse em utilizar sistemas de medidas múltiplas de avaliação de professores baseada em padrões, que incluem tanto medidas observacionais e de valor agregado sobre a eficácia do professor. A crescente literatura acadêmica avaliando a relação entre essas medidas usa principalmente o lente de validade. Embora valiosa, as pesquisas baseadas em evidências fornece pouca informação sobre como professores e diretores recebem os diferentes sinais de medidas múltiplas de eficácia quando implementado em contextos distritais. Usando correlações em pares e uma série de regressões este estudo avalia a relação entre as medidas de valor agregado de eficácia do professor e uma medida de observação da prática docente aplicada em um teste piloto em um distrito escolar com um sistema de medidas múltiplas. Foram encontradas correlações moderadas entre as medidas de valor acrescentado baseados na observação, indicando que os professores receberam sinais inteiramente coerentes semelhantes, embora não de cada medida de desempenho. Concluímos, destacando considerações para os distritos que trabalham para desenvolver e implementar sistemas de avaliação de professores com base em padrões de medidas múltiplas.