Introducción a los Modelos Jerárquicos

Curso sobre modelos lineales jerárquicosLa realidad educativa es: Compleja Multivariada Se desarrolla y cambia en el tiempo. Multinivel. “A mi parecer, nuestra investigación es la más difícil de todas... Hacemos ciencia bajo unas condiciones que los físicos encontrarían intolerables”. Berliner, D. C. (2002): Educational Research: The Hardest Science of All. Educational Researcher, Vol. 31, No. 8, pp. 18–20. Los procedimientos y técnicas de análisis tienen que ser isomorfos con esta realidad. En este curso se ofrece una primera aproximación a los árboles de decisión y a los modelos jerárquicos lineales.Universidad de Málaga. Campus de Excelencia Internacional Andalucía Tech

Study of dimensionality using classic factor analysis and full information factor analysis: analysis of primary (5th and 6th degrees) and compulsory secondary mathematics tests

The aim of this paper is to analyze the dimensional structure of a set of mathematical achievement tests used to assess the academic achievement in the Community of Madrid during 2005-06 and 2006-07 years and in three cohorts corresponding to the following academic degrees: 5th-6th of primary education, 1st-2nd and 3-4th of compulsory secondary education (ESO). The results coming from classical factor analysis and full information factor analysis are compared. Therefore a longitudinal study is performed in order to test whether such structure remains constant along time. The results confirm that most of the tests are mostly unidimensional structures. Meanwhile, it was proven that as the complexity of the contents increase, the complexity of the dimensional structure tests increase as well

Differential study of the academic perfomance in spanish language of high-school students at Baja California (México)

El objetivo de este estudio es elaborar y validar un modelo explicativo del rendimiento académico en Lengua Española para una muestra aleatoria de estudiantes de tercero de secundaria de Baja California (México). Para ello, mediante técnicas de árboles de decisión, se obtienen subgrupos de alumnos y escuelas y posteriormente se realiza un estudio diferencial de los mismos. Con los resultados obtenidos de esta primera fase de análisis se elabora y ajusta un modelo jerárquico lineal que explica el rendimiento en función de diversas variables tanto del nivel del estudiante como del centro escolar. Adicionalmente, los resultados apuntan a que, dadas las acusadas diferencias socioeconómicas existentes, los predictores y las variables relevantes son distintas en los grupos con valores extremos. En función de ello se elabora un modelo de regresión específico para estos grupos extremos. Para el diseño y puesta en marcha de acciones y programas de mejora es muy importante tomar en consideración este efecto diferencial siendo necesario considerar estas variables que operan como oportunidades de aprendizaje sólo en algunos subgrupos aunque sean pequeños y extremos, porque en caso contrario para estos sectores de la población (que son los más desfavorecidos) las acciones de mejora que se puedan diseñar estarán desenfocadas y por tanto no resultarán de utilidad.Este trabajo ha sido realizado en el contexto del proyecto titulado Estrategia integral 2009: factores asociados al aprendizaje, financiado por el Sistema Educativo Estatal de Baja California y coordinado por la Unidad de Evaluación Educativa de la Universidad Autónoma de Baja California

Learning in the openness: the lost way of the MOOC

At the end of the 2000´s, MOOCs broke into the educational field with the promise of learning with features more suited to the demands of our times. Their connectivist genesis provided a provocative expectation regarding the potential of collaboration, sharing, reuse, and free access, as factors of a possible transformation of the current educational system, which has been characterized by being rigid and reluctant to change. Given the relevance and growing participation of MOOC in education, there is a strong interest in understanding both their functioning and structure so that they can be considered as relevant educational options for a networked society. In this sense, a mixed study was conducted on 225 MOOCs based on the four categories that make up their denomination. The results of the study show that the contributions of MOOCs as generators of shared and collaborative learning experiences as proposed in their origins are not reflected in the reality of their current offering

Statistical analysis of data in educational research

En este artículo se analizan algunas cuestiones y conceptos básicos del análisis estadístico de datos en el contexto de la investigación educativa. En primer lugar, y como fase o etapa de dicho proceso, se incide en la importancia de una adecuada formulación de objetivos e hipótesis, del diseño de la investigación, del muestreo y de la medida o recogida sistemática de información. Después de una breve descripción de los programas informáticos de análisis estadístico libres y abiertos, se presentan algunos enfoques y modelos. El tercer bloque se centra en la decisión estadística, en los contrastes y pruebas de hipótesis con especial atención a los conceptos de significatividad y tamaño del efecto.In this paper, some basic issues and concepts about statistical data analysis in the context of educational research are analyzed. First, considering the statistical analysis as a phase of the research process, the importance of questions such as the adequate formulation of objectives and hypotheses, the design of the research, sampling and measurement, is emphasized. After a brief description of free and open statistical analysis software, some approaches and models are presented. The third block focuses on the statistical decision, contrasts and hypothesis testing with special attention to the concepts of significance and effect size

Selección de escuelas de alta y baja eficacia en Baja California (México)

El presente estudio planteó la identificación y selección de escuelas de Baja California con alta y baja eficacia a partir de los puntajes de ENLACE y pruebas de contexto. Se obtuvo una muestra representativa de 85 escuelas y alrededor de 7000 estudiantes en los años 2010 y 2011, y se aplicaron modelos jerárquicos lineales para el cálculo de las puntuaciones residuales en el nivel de centro. Tras el ajuste de los 8 modelos finales, que aíslan el efecto de las variables contextuales significativas, se seleccionan, bajo criterios estadísticos, 15 centros con alto y bajo residuo. Los resultados muestran que las distribuciones de las escuelas seleccionadas son similares en ambos casos a la población de referencia. Los resultados afirman la robustez del procedimiento de selección implementado y destacan la importancia del mismo para la detección de buenas prácticas en las escuelas de alta eficacia.This study proposed to identify and select high and low-effectiveness schools in Baja California based on ENLACE (Quality of Educational Attainment Exams) scores and context tests. A representative sample of 85 schools and around 7,000 students was obtained for 2010 and 2011. Hierarchical linear models were applied to calculate residual scores at a school level. After adjustment of the 8 final models, which isolate the effect of significant contextual variables, statistical criteria were used to select 15 schools with high and low residual scores. The results show that the distributions of schools selected are similar in both cases to the reference population. The results show the robustness of the selection procedure used and highlight its significance in detecting good practices in high-effectiveness schools

Propuesta de un nuevo cuestionario de evaluación de los profesores de la Universidad del País Vasco. Estudio psicométrico, dimensional y diferencial

The aim of this paper is to analyze the new questionnaire designed by the University of the Basque Country (UPV/EHU) to evaluate its teaching staff (SET). To do it, the responses of a 941 students sample were analyzed and the following aspects of the questionnaire were studied: its reliability, dimensionality, construct and criterion validity; concluding with a differential study considering variables such as gender, disciplinary field, perceived difficulty level or subject interest. The results suggest high internal consistency that fits to the theorical dimensions: planning, process and results, enabling a formative use of information

Adaptación al espacio europeo de educación superior de un cuestionario de opinión del alumnado sobre la docencia de su profesorado

After reviewing questionnaires from other universities, taking into account the theoretical framework of the new questionnaire, the transversal skills adopted by the University and the three dimensions set out by ANECA, a series of indicators and possible items deemed suitable to be included in the new questionnaire were drawn up. This results were all compared and contrasted within various focus groups undertaken with experts in the topic, with lecturers, and with students. Based on this comparison, the pilot questionnaire, which had 18 items plus two more criterion-referenced items, was drawn up. This was applied to a sample of almost one thousand students. The analyses carried out to  the items, as well as the reliability and the validity of the test, show that the questionnaire rigorously complies with the standards required by this type of instrument. Finally, in the discussion of the results, certain controversial aspects, or those relating to improving the evaluation of the university teaching staff, are presented.  Indicated amongst these aspects, is the need to incorporate the questionnaire into a more wider-ranging evaluation plan, such as DOCENTIA, the possibility of creating banks of items, the inclusion of open items and the exigency of undertaking on-line applications of the questionnaire

El uso de la triangulación en un estudio de detección de necesidades de formación permanente en profesorado no universitario de la Comunidad de Madrid.

This article aims at highlighting the importance of triangulation as tool to compare and validate information coming from different sources and procedures. To do so, we assessed the needs for in-service training demanded by teachers and offered by the educational administration in Madrid (Spain). The data was collected using different techniques and analyzed with different data-analysis method and from this combination the results are richer and more complex. Starting with a short introduction about triangulation, we present methods, sources and analysis of the data as well main results and conclusions obtained via triangulation.El presente artículo pretende destacar la importancia de la triangulación como elemento o herramienta para comparar y validar informaciones obtenidas mediante diferentes fuentes y métodos. Para ello se apoya en los resultados de un estudio realizado en la Comunidad de Madrid con el fin de determinar las necesidades que el profesorado manifiesta con respecto a la oferta de formación permanente que se les ofrece en la actualidad. Dichos resultados son producto de la utilización de diferentes modos de recogida de información así como de diferentes técnicas de análisis de datos, hecho que los dota de mayor complejidad y riqueza. Partiendo de una breve introducción sobre la técnica de triangulación, se presentan los métodos, fuentes y análisis de datos llevados a cabo junto a los resultados y las conclusiones principales del estudio

La evaluación del profesorado español y el impacto del feedback en las prácticas docentes. Análisis de TALIS 2013

La finalidad de este trabajo es aportar evidencia sobre la relevancia que la evaluación del profesorado tiene en la práctica profesional de los docentes. Más específicamente, el objetivo concreto se centra en estudiar la relación entre las observaciones que los docentes dicen haber recibido por parte de diferentes agentes (feedback) y las prácticas que desarrollan en el aula. Para ello se han analizado las respuestas aportadas por los docentes de la muestra de España del estudio TALIS 2013. Y en primer lugar se constata que en la citada muestra, la cuarta parte de los mismos declara no haber recibido nunca ni por nadie ningún comentario o evaluación sobre su tarea, proporción que se eleva hasta casi el 30% en el caso de los centros públicos. Junto a ello parece encontrarse una cierta evidencia de que los docentes que son evaluados con mayor frecuencia y por diversidad de agentes, desarrollan en mayor grado prácticas docentes más innovadoras centradas en el aprendizaje activo de los estudiantes