La calidad de la gobernanza del sistema educativo español. Un estudio empírico

Este trabajo presenta un estudio exploratorio de evaluación de la calidad de la gobernanza de la educación española. El instrumento de medida empleado ha consistido en un sistema de indicadores subjetivos estructurado en 6 dimensiones, 20 subdimensiones y 88 ítems que ha sido enriquecido y validado previamente mediante un estudio Delphi. La evaluación efectuada por un grupo de 21 expertos arroja una valoración global mediocre siendo la dimensión 4 «Gobernanza basada en el conocimiento, la evidencia empírica y la investigación» la más deficiente. Esa mediocridad en la calidad de la gobernanza educativa resulta compatible con la mediocridad observada en los outputs del sistema y permite conjeturar sobre una posible conexión causal entre ambas. Una posterior investigación permitirá poner a prueba esta hipótesis.UCJ

Performance in science, epistemic conceptions, and STEM vocations in Spain’s autonomous communities: evidence from PISA 2015, improvement policies, and practices

Knowledge plays a vital role as the key to long-term economic development, at both the national and regional levels. Furthermore, the new circumstances require the exercise of mature citizenship at an intellectual level and responsible citizenship in the political sphere. By its very nature, science education can make a decisive contribution towards achieving the two goals of economic development and civic progress. From this dual perspective, this work analyses the data from PISA 2015. Its aim is to provide an empirical analysis of the relative positions of the 17 Spanish autonomous communities in terms of science education. It focuses on three main variables and how they are related: students’ performance in science, their epistemic conceptions, and their STEM vocations. A number of recommendations for improvement policies and practices relating to this evidence are madeEl conocimiento desempeña un papel determinante como clave para el desarrollo económico a largo plazo, tanto en el ámbito de los estados como de sus regiones. Además, el nuevo contexto demanda el ejercicio de una ciudadanía madura en el plano intelectual y responsable en el plano político. Por su propia naturaleza, la educación científica puede contribuir decisivamente al logro de estos dos tipos de metas, de desarrollo económico y de progreso cívico. Desde esta doble perspectiva, el presente trabajo efectúa análisis secundarios sobre la base de datos de PISA 2015. Se pretende generar con ellos un diagnóstico empírico de la situación relativa de las 17 comunidades autónomas en materia de educación científica. Se ha centrado la atención en tres variables principales: el rendimiento en ciencias, las concepciones epistémicas de los alumnos y sus vocaciones STEM. En relación con tales evidencias, se formulan algunas recomendaciones sobre políticas y prácticas de mejora

Eficacia, eficiencia y equidad educativas en las Comunidades Autónomas. Financiación pública y políticas de mejora

La eficiencia en el uso de los recursos públicos es un factor esencial de una buena gobernanza. Esa centralidad del papel de la eficiencia es especialmente relevante en el caso de la educación. La organización territorial de España comporta una notable descentralización del gasto educativo público. Por tal motivo, resulta de interés efectuar un análisis comparativo de la eficiencia del gasto en las comunidades autónomas que pueda vincularse tanto a las políticas educativas desarrolladas a nivel regional como a las acciones correctoras, por parte del Estado, en favor de un mayor equilibrio interterritorial. Por otra parte, la equidad en materia resultados del sistema educativo constituye una meta indiscutible de toda sociedad que aspire a la justicia y a la cohesión social. En el presente trabajo se han calculado los valores de las variables eficacia, eficiencia del gasto educativo público y equidad de los resultados escolares para las diecisiete comunidades autónomas, a partir de análisis secundarios efectuados sobre microdatos de PISA 2015. Además, se aportan recomendaciones de interés, tanto a nivel regional como para el gobierno central, en materia de políticas educativas y, en consecuencia, se proporcionan a los poderes públicos orientaciones fundadas con la intención de facilitar su actuación sobre el sistema desde bases empíricas.UCJ

PISA 2015 y las Comunidades Autónomas españolas. Diagnósticos empíricos y políticas de mejora

PARTE I: La eficiencia en el uso de los recursos públicos constituye un factor esencial de una buena gobernanza, toda vez que en el ámbito de la gestión pública las necesidades suelen ser ilimitadas y, sin embargo, los recursos son siempre limitados. Esa centralidad del papel de la eficiencia en el seno de la gobernanza pública es especialmente relevante en el caso de la educación. En los países desarrollados, atiende el ejercicio de un derecho fundamental -con carácter universal y gratuito sobre amplios tramos de edad de la población-, por lo que requiere una utilización masiva de recursos. La organización territorial de España en regiones (Comunidades Autónomas) comporta una notable descentralización del gasto educativo público. Por tal motivo, resulta de interés efectuar un análisis comparativo de la eficiencia del gasto en las Comunidades Autónomas que pueda vincularse tanto a las políticas educativas desarrolladas a nivel regional como a las acciones correctoras, por parte del Estado, en favor de una mayor equidad interterritorial. En este trabajo se calculan los valores de la eficiencia del gasto público educativo recurriendo a un análisis secundario de los datos de PISA 2015 que han sido previamente contextualizados corrigiendo el efecto del ISEC para cada una de las pruebas y sobre cada una de las 17 comunidades autónomas. Una categorización de ellas, de acuerdo con las variables eficacia, eficiencia y equidad, permite derivar recomendaciones de interés tanto a nivel regional como del gobierno central.PARTE II: La educación científica constituye un área destacada para el desarrollo de las habilidades y de las competencias requeridas por la economía y por la sociedad del siglo XXI. Las enseñanzas STEM (Science, Technology, Engineering, Mathematics) son una extensión del anterior ámbito de reflexión sobre la importancia presente y futura de la educación científica. PISA 2015 aporta, por primera vez, los resultados de las diecisiete comunidades autónomas sobre muestras estadísticamente representativas de la correspondiente población a nivel regional. Junto con una descripción del marco conceptual y metodológico, el presente estudio cubre con fines de diagnóstico territorializado: (a) las relaciones entre rendimiento en Ciencias, vocaciones STEM y concepciones epistémicas de los alumnos; (b) la posición de las distintas comunidades autónomas, con suficiente nivel de desagregación, en materia de competencias y de conocimientos científicos; (c) la influencia del nivel socioeconómico y cultural; (d) la influencia de la variable sexo. Los análisis correspondientes son seguidos por el enunciado de políticas y de prácticas educativas para la mejora. Un segundo grupo de aportaciones se centra en una serie de análisis secundarios que toman en consideración tres niveles de aproximación: el del alumno, el de la clase y el del centro. A partir de la evidencia empírica así producida, se aborda una discusión general que se centra, principalmente, en las consecuencias futuras de lo anterior en lo social, en lo económico y en el empleo. Finalmente, se plantean las conclusiones mayores –a modo de resumen de los principales hallazgos– y se formula un conjunto de recomendaciones en términos de políticas y de prácticas para la mejora de la enseñanza y al aprendizaje científicos en España.UCJ

How much gold is in the sand? Data mining with Spain’s PISA 2015 results

Since the start of the PISA evaluations there have been numerous studies that have metaphorically tried «to separate the gold from the sand», in other words, to derive useful knowledge to guide educational practice and policy from the vast amount of data collected. However, research that uses data mining techniques to extract knowledge from the databases provided by the OECD has been less common. This paper analyses the context questionnaires from a metric perspective using a methodology based on data mining with «regression trees». Its main goal is to discover how much value (how much «gold») is in the items that compose these questionnaires, considering their use as predictors of the performance of Spanish students. The results provide a list of the items selected in the six questionnaires and their predictive value. It also provides a methodological approach to help improve the productivity of educational research derived from PISA.Desde el inicio de las evaluaciones PISA abundan los estudios que pretenden, en lenguaje metafórico, «separar el oro de la arena», esto es, producir, de la cantidad ingente de datos recogidos, conocimiento útil que guíe la práctica y las políticas educativas. Pero no son frecuentes las investigaciones que usan técnicas de minería de datos para la extracción de dicho conocimiento. En este trabajo se analizan los cuestionarios de contexto desde una perspectiva métrica, con una metodología basada en «árboles de regresión» destinada a descubrir cuánto «oro» hay en los ítems que los componen, atendiendo a su uso como predictores del desempeño de los jóvenes españoles. Como resultado se obtiene un listado de los ítems más importantes en los seis cuestionarios, junto con el valor predictivo de los mismos. Se aporta un enfoque metodológico que puede contribuir a mejorar la productividad de la investigación pedagógica derivada de PISA

Parents' WhatsApp groups and their effects on parental involvement in schools: validation of an instrument

La participación educativa de las familias es uno de los principales factores que inciden en la mejora del rendimiento académico. Con las nuevas tecnologías, la importancia creciente que el uso de herramientas de comunicación interactiva como WhatsApp está teniendo en la participación de las familias en la educación escolar exige la realización de estudios dirigidos a analizar empíricamente la misma, pues la participación tradicional está siendo desplazada por nuevas formas de interacción con importantes implicaciones en la dinámica escolar. El estudio muestra los resultados de la validación de un cuestionario dirigido a familias cuyo objetivo es recabar información acerca de dos dimensiones centrales relativas al uso y satisfacción con el WhatsApp en el entorno escolar. El instrumento definitivo, compuesto por 24 ítems, fue aplicado a una muestra de 200 padres y madres y, posteriormente, se llevó a cabo la validación mediante Análisis Factorial Exploratorio (AFE). Los resultados muestran valores elevados de fiabilidad, así como un ajuste de las dimensiones planteadas, validando el cuestionario para su aplicación definitiva.The educational involvement of families is one of the main factors that affect the improvement of academic performance. With the modern technologies, the increasing importance that the use of interactive communication tools such as WhatsApp is having in the participation of families in school education, requires the realization of studies aimed at empirically analyzing it, since traditional participation is being displaced by new forms of interaction with important implications in school dynamics. The study shows the results of the validation of a questionnaire aimed at families whose objective is to gather information about two central dimensions related to their use and satisfaction. The final instrument, composed of 24 items, was applied to a sample of 200 fathers and mothers and, subsequently, the construct validation was carried out from an Exploratory Factor Analysis (EFA). The results show high reliability values, as well as an adjustment of the proposed dimensions, validating the questionnaire for its final application.Universidad Pablo de Olavid

Rendimiento de los titulados en Psicología en las pruebas de acceso al PIR

The university degree in Psychology is one of the most popular among prospective university students. As a result, Spanish public and private universities have increased the amount of places and the number of university graduates in Psychology. Access to the National Health System is one professional possibil­ity for these graduates. Applicants must pass an exam to obtain an Internship in Clinical Psychology at the National Health System. This paper analyses the graduate’s exam performance during the period 2013-2016, and also possible differences depending on the size or the ownership of their universities of origin. The objectivity of the national call makes it possible to evaluate the educational and labor impact of universities in society. This perspective incorpo­rates a social dimension to the accountability ap­proach.ResumenEntre las titulaciones más demandadas por parte de los futuros estudiantes universitarios, figura el Grado en Psicología. Este interés ha traído consigo un incremento de la oferta de plazas en los últimos años, tanto en universidades públicas como privadas, y, consecuentemente, un aumento del número de egresados con dicho perfil académico/profesional. Dentro de las posibles salidas profesionales de estos titulados, se encuentra el acceso al Sistema Nacional de Salud. Para ello, los candidatos deben superar previamente las pruebas selectivas de acceso a plazas de formación sanitaria especializada, tras lo cual, aquellos que obtienen plaza, se incorporan al sistema de formación de posgrado en régimen de residencia (Psicólogo Interno Residente -PIR-). El presente trabajo analiza el rendimiento de los egresados de las distintas Facultades de Psicología españolas en las pruebas de acceso al Sistema Nacional de Salud durante el periodo 2013-2016, y las posibles diferencias en función de variables como el tamaño o la titularidad de las universidades. El carácter nacional de la convocatoria y la objetividad de las pruebas, hacen posible evaluar el impacto educativo y laboral de estas instituciones, incorporando al enfoque de la rendición de cuentas una dimensión social. AbstractThe university degree in Psychology is one of the most popular among prospective university students. As a result, Spanish public and private universities have increased the amount of places and the number of university graduates in Psychology. Access to the National Health System is one professional possibil­ity for these graduates. Applicants must pass an exam to obtain an Internship in Clinical Psychology at the National Health System. This paper analyses the graduate’s exam performance during the period 2013-2016, and also possible differences depending on the size or the ownership of their universities of origin. The objectivity of the national call makes it possible to evaluate the educational and labor impact of universities in society. This perspective incorpo­rates a social dimension to the accountability ap­proach

Qualitative analysis of the professional profile of a good secondary school teacher

Scientific literature has shown that teacher characteristics and skills are one of the main sources of variation in students’ academic performance. This potential that teachers have in improving the quality of the education system justifies the importance of identifying the teacher-related factors that are positively related to student learning. This study aims to contribute to this purpose by analysing the professional profile of a good secondary school teacher from the perspective of students, members of school management teams, and the teachers themselves. For this purpose, a qualitative research design was established based on an analysis of the views of the participants. Five focus groups were conducted with the participation of five members of school management teams, nine teachers and nine students. Through both the a priori and inductive coding of the content of these focus groups, the professional profile of a good teacher was identified. This profile was made up of three teaching skills and seven personal skills, specified in 79 actions. The integration of all the participants’ perspectives enabled the creation of a comprehensive proposal of an effective teacher by capturing the nuances provided by each individual perspective. Based on this, new research and actions can be designed that contribute to improving the quality of initial and in-service training for secondary school teachers.La literatura científica ha demostrado que las características y competencias del profesorado constituyen una de las principales fuentes de variación del rendimiento académico. Este potencial de los profesores para mejorar la calidad del sistema educativo justifica la importancia de conocer qué factores asociados a los docentes se relacionan positivamente con el aprendizaje de sus estudiantes. Este estudio persigue contribuir a tal propósito, al analizar el perfil profesional del buen docente de educación secundaria desde la perspectiva de los estudiantes, los miembros de los equipos directivos y los propios profesores. Para ello, se ha establecido un diseño de investigación cualitativa basado en el análisis de las percepciones de los informantes, mediante el cual se han conducido cinco grupos focales en los que han participado cinco miembros de equipos directivos, nueve profesores y nueve estudiantes. El proceso de codificación tanto apriorístico como inductivo del contenido de los grupos focales ha permitido identificar un perfil profesional del buen docente integrado por tres competencias pedagógicas y siete competencias personales que se concretan en 79 actuaciones. La integración de las perspectivas de todos los agentes permite establecer una propuesta comprehensiva del profesor eficaz, al captarse los matices que aporta cada visión particular, sobre la que diseñar nuevas investigaciones y sugerir actuaciones que contribuyan a una formación inicial y permanente de calidad para el profesorado de educación secundaria

APLICACIONES DE LA SEGMENTACIÓN JERÁRQUICA EN MEDICIÓN Y EVALUACIÓN DE PROGRAMAS EDUCATIVOS. EJEMPLOS CON UN PROGRAMA DE EDUCACIÓN FINANCIERA

This paper suggests the utilization of hierarchical segmentation or decisiontrees in educational measurement and evaluation extensively utilized in other areas, mainly in marketing, as a market survey technique. By using IBM SPSS Statistics 21, data from a survey answered by 648 Secondary Education teachers are analysed in order to evaluate a program of financial education, and the different methodological applications of the Classification and Regression Trees (CART or C&RT) are shown in the study of validity based on evidence about content and internal structure of the measures from the questionnaire of evaluation which has been used. Moreover, in a more similar trend than the one followed for evaluation in sociology, medicine or psychology programs, the characteristics of the different segments of the population are clearly identified. Among thesesegments, notable for their informative value in the evaluation of educative programmes, are the extreme groups consisting of the users that are most «enthusiastic » and «critical» with the program. From the achieved results, the methodological possibilities of this measurement and evaluation technique are discussed.With the presented empirical study, the proposal for application of decision trees techniques is justified, together with the most traditional approaches, such as lineal regression analysis and the exploratory and confirmatory factorial analysis. This is because this methodology fits more appropriately to the characteristics of the normally-used data in research and educational evaluations. Also it allows a clearer and more integrated interpretation of the results.En este trabajo se propone el uso en medición y evaluación educativa de las técnicas de segmentación jerárquica o árboles de decisión, utilizados ya extensamente en otros campos, fundamentalmente en marketing, como técnica de estudio de mercados. Mediante IBM SPSS Statistics 21 se analizan los datos de una encuesta aplicada a 648 profesores de Educación Secundaria para la evaluación de un programa de educación financiera (EF) y se ilustran diferentes posibles aplicaciones metodológicas de los árboles de clasificación y regresión (CART o C&RT: Classification And Regression Trees) para el estudio de la validez basada en evidencias sobre el contenido y la estructura interna de las medidas procedentes del cuestionario de evaluación empleado. Por otra parte, en una línea más similar a la que se ha seguido para la evaluación de programas en sociología, medicina o psicología, se llegan a identificar claramente las características de los diferentes segmentos de población, entre los que se destacan, por su valor informativo en evaluación de programas educativos, los grupos extremos, constituidos por los usuarios más «entusiastas» y los más «críticos» con el programa. A partir de los resultados obtenidos, se discuten las posibilidades metodológicas de esta técnica tanto en medición como en evaluación de programas. Con el estudio empírico presentado se argumenta la propuesta de aplicación de las técnicas arborescentes, junto con otras aproximaciones metodológicas más tradicionales, como son el análisis de regresión lineal y el análisis factorial exploratorio y confirmatorio, dado que esta metodología se ajusta mejor a las características de los datos que se suelen manejar en investigación y evaluación educativa y permite una interpretación más clara e integrada de resultados