The role of students in the Docentia process after ten years of evaluation: Evaluating the teacher or the subject? That is the question

This paper proposes separating the survey of students’ satisfaction with their teachers from the survey of their satisfaction with the module, and presents the implementation of this process at the Universidad de La Laguna (ULL). Items linked to teacher performance were differentiated from those referring to the subject in the Docentia-ULL survey. The final teacher survey comprised 12 items. In order to compare it with the original 22-item sur- vey, we compared the results from the overall assessment of teachers in the original survey with a simulation of the result if the reduced survey had been applied in the period 2012- 2014 (n = 689), as well as with its actual application in the 2017-2019 rounds (n = 526). We observed an increase in Excellent teaching staff using the teacher survey and, to a lesser extent, Unfavourable teaching staff. We found that the teacher survey displayed a greater variance in overall student satisfaction com- pared to the subject survey. The results support the usefulness and validity of assessing student satisfaction through two different surveys. The two surveys would be relevant for different institutional assessment processes: the teacher survey for teacher promotion and the subject survey for degree accreditation. Adoption of the teacher survey by the univer­sity would have a positive impact on teachers’ intrinsic motivation, in particular by satisfy­ing the needs for autonomy and competence by associating them with skills that they are in control of improving.Este trabajo propone diferenciar la evaluación de la satisfacción del alumnado con el docente de la satisfacción con la asignatura, y presenta su implementación en la Universidad de La Laguna. Se diferenciaron los ítems vinculados al desempeño del docente de los referidos a la asignatura en la encuesta Docentia-ULL. La encuesta del docente quedó finalmente compuesta por 12 ítems. Para compararla con la encuesta original, de 22 ítems, contrastamos los resultados de la evaluación del profesorado en la encuesta original con una simulación del resultado si se aplicara la encuesta reducida en su lugar en el periodo 2012- 2014 (n = 689), así como con su aplicación real en las convocatorias de 2017-2019 (n = 526). Observamos un incremento del profesorado Excelente empleando la encuesta enfocada al docente y, en menor medida, del profesorado Desfavorable. Encontramos que la encuesta del docente explicaba una varianza mayor de la satisfacción general del alumnado en comparación con la encuesta de la asignatura. Los resultados apoyan la utilidad y validez de la evaluación de la satisfacción de alumnado mediante dos encuestas distintas, relevantes para distintos procesos de evaluación institucional: la del docente para la promoción del profesorado y la de la asignatura para la acreditación de los títulos. La incorporación de la encuesta del docente por parte de la universidad tendría un impacto positivo en la motivación intrín­seca del profesorado, en particular en la sa­tisfacción de las necesidades de autonomía y competencia, al asociarse con habilidades cuya mejora está «bajo su control»

Contextual Performance in Academic Settings: The Role of Personality, Self-efficacy, and Impression Management

The main purpose of this paper was to analyse the predictive role of personality, self-efficacy, and impression management on contextual performance in academic settings. A sample of 223 university students voluntarily answered a battery of tests on-line. Results showed that conscientiousness, extraversion, and agreeableness, as well as self-efficacy, predict contextual performance self-evaluations. Furthermore, the significant interaction between conscientiousness and self-efficacy multiplies their influence. Besides, impression management contributes to predicting contextual performance, but did not interact with the remaining variables. Results related to personality and self-efficacy are consistent with those found in work settings

Una mirada longitudinal : ¿Es el ?Docentia? útil para la evaluación del profesorado universitario?

El Docentia es el modelo propuesto por ANECA, y asumido por las universidades españolas para la evaluación de la calidad docente. Uno de los problemas del modelo que se viene detectando es su escasa capacidad para diferenciar al profesorado entre las distintas categorías posibles, con un sesgo muy acentuado hacia la calificación de ?Excelente?. Esto afecta al prestigio del modelo: primero, si la gran mayoría del profesorado es ?Excelente?, no se verá reflejado el profesorado que realmente destaca sobre el conjunto y, segundo, afecta a su capacidad para orientar al profesorado hacia la mejora de su docencia. En el presente estudio examinamos la capacidad discriminativa del modelo en base a la experiencia de su implementación en la Universidad de La Laguna (Docentia-ULL). Hemos simulado el resultado de la evaluación cambiando el modelo en dos sentidos. Por un lado, los pesos de las dimensiones y sub-dimensiones, así como de los topes de cada criterio, para primar la valoración del compromiso del profesorado con la formación y la innovación educativa, frente al mero cumplimiento de las obligaciones docentes. Por otro lado, los resultados de satisfacción del alumnado y de los responsables académicos pasan a actuar como requisito independiente de los méritos del docente en la evaluación. Además, se ha elevado el mínimo necesario de estas dimensiones para obtener una valoración ?Favorable?, ?Muy Favorable? o ?Excelente?. Los resultados mostraron que la disminución del peso en la evaluación de las obligaciones docentes frente a la formación e innovación produjo una distribución de la calificación del profesorado más centrada hacia las categorías intermedias. Además se compara con resultados reales obtenidos después de la implantación del modelo alternativo elegido a raíz de las simulaciones. Se discuten las implicaciones de este tipo de mejoras en la evaluación de la calidad docente y del desempeño del profesorado en la universidad española

El clima y las actitudes como factores de la seguridad en plataformas de aeropuertos

El objetivo principal de la presente investigación es estudiar la relación entre el clima y las actitudes hacia la seguridad, así como el papel que ambas variables juegan en la seguridad organizaciónal. Un objetivo secundario es el estudio del papel que juega la formación como método de cambio climático-actitudinal. Muestra en tiempo 1: 166 trabajadores, entre 21 y 62 años. Muestra en tiempo 2: 131 sujetos: 65 grupo control y 66 grupo experimental. La investigación sigue un diseño cuasiexperimental de medidas repetidas, antes y después, sobre dos grupos, uno experimental y otro de control, en cuya primera fase se estudia la relación entre la variable clima y actitud así como la influencia en ambas de factores individuales y situacionales. Los sujetos se seleccionaron y asignaron a dichos grupos en función de los intereses de las organizaciones a las que pertenecían, teniendo en cuenta el tamaño de cada una como la representatividad de todos los niveles jerárquicos. La recogida de datos utilizados en la elaboración de esta investigación se efectuó dentro del Programa COMETT II: Safety Courses for Airport Ramp Function (SCARF) patrocinado por los fondos de la CEE para la formación en el empleo de la tecnología avanzada. El SCARF es un programa integrado por cuatro cursos de formación relacionados con la seguridad. Se siguió un diseño que incluía dos momentos temporales de recogida de datos, (T1 y T2). El T1 comprendía el período anterior al desarrollo e impartición de los programas de formación. a)Cuestionario de Información General: Se elaboró este cuestionario para recoger las variables independientes del estudio (v. sociodemográficas, nivel jerárquico del puesto, ámbito funcional del puesto, antigüedad en la empresa y puesto); escala de actitudes; cuestionario para medir la v. clima de seguridad; escala de seguridad (se elaboró para recoger información sobre el nivel de seguridad de siete organizaciones que trabajn en el área de ahndling de aeropuerto). 1. La relación de algunas variables individuales o situacionales con la actitud hacia la seguridad reflejan cómo aquellos trabajadores de mayor edad y más antiguos en la organización muestran unas actitudes hacia la seguridad menos positivas que los más jóvenes y menos antiguos; 2. Se encontró un efecto similar de la variable ámbito funcional en las puntuaciones de actitud. El trabajo directo en la rampa parece llevar a una familiarización con el riesgo por parte de los trabajadores; 3. Asímismo, encontramos efectos de la v. empresa sobre la actitud, de forma que destaca la compañía de suministro con una media significativamente más alta que las otras dos empresas participantes. No obstante, este efecto se ve modulado por la influencia de la v. clima sobre la actitud, llegando incluso a desaparecer. Los resultados de esta investigación, siguiendo un diseño longitudinal, ponen de manifiesto que es posible intervenir a nivel de la actitud hacia la seguridad, mediante programas de formación específicos, fomentando así una mejora en las mismas. Sin embargo, no encontramos evidencias de que ocurra lo mismo con el clima de seguridad, aunque se siguen manteniendo las diferencias en esta variable en función de la empresa. Parece ser que el clima es un constructo relativamente estable en el tiempo, más resistente al cambio que las actitudes. Encontrar cambios significativos a nivel de esta variable pasaría por la necesidad de cambios también en la política de gestión de la Seguridad Organizacional. De la misma manera, estos resultados no reflejan cambios significativos en las conductas tras la medida tomada después de la impartición del programa de formación.CanariasES

Revista española de pedagogía

Resumen basado en el de la publicaciónSe presenta un trabajo que pretende diferenciar la evaluación de la satisfacción del alumnado con el docente de la satisfacción con la asignatura, y presenta su implementación en la Universidad de La Laguna. Se diferenciaron los ítems vinculados al desempeño del docente de los referidos a la asignatura en la encuesta Docentia-ULL. La encuesta del docente quedó finalmente compuesta por 12 ítems. Para compararla con la encuesta original, de 22 ítems, se contrastaron los resultados de la evaluación del profesorado en la encuesta original con una simulación del resultado si se aplicara la encuesta reducida en su lugar en el periodo 2012- 2014 (n = 689), así como con su aplicación real en las convocatorias de 2017-2019 (n = 526). Se observó un incremento del profesorado Excelente empleando la encuesta enfocada al docente y, en menor medida, del profesorado Desfavorable. Se encontró que la encuesta del docente explicaba una varianza mayor de la satisfacción general del alumnado en comparación con la encuesta de la asignatura. Los resultados apoyan la utilidad y validez de la evaluación de la satisfacción de alumnado mediante dos encuestas distintas, relevantes para distintos procesos de evaluación institucional: la del docente para la promoción del profesorado y la de la asignatura para la acreditación de los títulos. La incorporación de la encuesta del docente por parte de la universidad tendría un impacto positivo en la motivación intrínseca del profesorado, en particular en la satisfacción de las necesidades de autonomía y competencia, al asociarse con habilidades cuya mejora está «bajo su control»ES

FACTORES RELEVANTES PARA AUMENTAR LA PRECISIÓN, LA VIABILIDAD Y EL ÉXITO DE LOS SISTEMAS DE EVALUACIÓN DEL DESEMPEÑO LABORAL

La situación de crisis económica en nuestro país ha provocado, por una parte, un incremento del interés de las organizaciones en la evaluación del desempeño laboral. Por otra parte, está produciendo una mayor resistencia a la evaluación por parte de los evaluados, que miran con desconfianza y preocupación su evaluación en momentos de dificultades económicas. Por ello, en situaciones económicas como la actual, es muy importante desarrollar escalas de evaluación que permitan lograr la efectividad, la credibilidad y el éxito de estos sistemas. El objetivo general de este trabajo es aportar resultados dirigidos a que los sistemas de evaluación sean valorados positivamente tanto por la organización como por los participantes. Para ello es necesario que: (a) las escalas de respuesta usadas ofrezcan datos precisos y fiables; y (b) los procedimientos aplicados para la evaluación sean percibidos como justos y fiables por los participantes

RELEVANT FACTORS TO INCREASE THE ACCURACY, FEASIBILITY AND SUCCESS OF JOB PERFORMANCE EVALUATION SYSTEMS

The situation of economic crisis in Spain has motivated an increasing interest in employee performance evaluation in organizations. On the other hand, it is also producing greater resistance to this evaluation on the part of appraisees, who regard these processes with suspicion and concern in these times of economic difficulties. Therefore, in economic situations like the current one, it is very important to develop assessment scales that facilitate the effectiveness, credibility and success of these systems. The general goal of this work is to provide results that can help evaluation systems to be viewed positively by organizations as well as by their members. For this it is necessary that: (a) the response scales used offer precise and reliable data; and (b) the procedures applied to assess performance are perceived as fair and reliable by the participants

Relationships between Contextual and Task Performance and Interrater Agreement: Are There Any?

Work performance is one of the most important dependent variables in Work and Organizational Psychology. The main objective of this paper was to explore the relationships between citizenship performance and task performance measures obtained from different appraisers and their consistency through a seldom-used methodology, intraclass correlation coefficients. Participants were 135 public employees, the total staff in a local government department. Jobs were clustered into job families through a work analysis based on standard questionnaires. A task description technique was used to develop a performance appraisal questionnaire for each job family, with three versions: self-, supervisor-, and peer-evaluation, in addition to a measure of citizenship performance. Only when the self-appraisal bias is controlled, significant correlations appeared between task performance rates. However, intraclass correlations analyses show that only self- (contextual and task) performance measures are consistent, while interrater agreement disappears. These results provide some interesting clues about the procedure of appraisal instrument development, the role of appraisers, and the importance of choosing adequate consistency analysis methods

The Observational Instrument of Best Practices: An Observational Instrument to Measure Best Practice Behaviors in University Teachers

The concept of best practices emerged in various disciplines to explain the professionals‟ adequate performance in their work-related setting. In the educational context, it means theoretical and practical knowledge which includes a differentiated conduct in other teachers and in different contexts, or observable operations which can be measured by instruments specially designed for this purpose. When the university teachers best practices are behaviors, observational methodology is the main procedure to study it. In this research, five university teachers‟ behaviors during the class were analyzed, measuring them with an observational instrument, The Observational Instrument of Best Practices (OBEP), which allows the coding of indicator behaviors of best practices, including the posture, where they are looking and if the teachers address their students while they are explaining the class contents. Results show that the observational instrument is useful to measure behavioral best practices. Studied university teachers‟ behaviors have best practices during their class, but they could improve them. Some suggestions are given.Sin financiaciónNo data (2016)UE

Correlations and intraclass consistency coefficients between performance measures within each OCB Cluster.

<p>*p ≤ .05,</p><p>**p ≤ .01,</p><p>***p ≤ .001. Degrees of freedom in parentheses.</p><p>^a n = 9;</p><p>^b n = 8. Pearson correlations in the lower triangle and intraclass correlations in the upper triangle of each matrix. High OCB cluster’s overall task performance consistency: ICC(3) = -.260; n.s.; N = 9. Not-so-high OCB cluster’s overall task performance consistency: ICC(3) = .614; p ≤ .05; N = 8. ICC’s were calculated with “irr” package within R, assuming a one-way model (row effects random), and an average unit of analysis.</p><p>Correlations and intraclass consistency coefficients between performance measures within each OCB Cluster.</p