Evaluation of Occupational Training Programs for women

This paper summarizes the results obtained from the evaluation of Occupational Training Programs through which we checked the quality of service and the efficiency of the introduction of women into the labour market, as well as the need to promote quality Occupational Training specifically for women that will not only facilitate their introduction into the labour market by adapting their personal skills to its needs, but will also encourage personal and social improvement

Evaluación de programas de formación ocupacional en colectivos con riesgo de exclusión social

RESUMEN Esta Tesis Doctoral se enmarca y es una continuación del Estudio de Validación del Modelo EFO que empiezan Jornet y Suárez (1996) y que Perales (2000,2002) continua y amplia centrándose en ambos casos en el Programa Inserción al Trabajo, el programa más amplio. Estos trabajos al igual que la Tesis que se presenta se desarrollan dentro del Proyecto de Evaluación de Formación Profesional Ocupacional de la Comunidad Valenciana encargada por la Consellería de Trabajo y Asuntos Sociales a la Unidad Técnica de Medición y Evaluación del Departamento MIDE. Concretamente, el objetivo principal de la Tesis es aportar evidencias de validación acerca de los instrumentos de un Modelo (Modelo EFO) para evaluar los Programas específicos de Formación Profesional Ocupacional dirigidos a colectivos con riesgo de exclusión social (mujeres, jóvenes y parados de larga duración mayores de 40 años). Se plantean, por tanto, tres líneas de estudio para alcanzar el objetivo de la Tesis: - La contextualización del estudio, a través de la realización de: o Análisis descriptivos univariados de los resultados globales items y dimensiones - La comprobación del funcionamiento diferencial del instrumento y su adecuación, a través de la realización de: o Análisis diferenciales de los resultados globales items y dimensiones o Análisis de la Consistencia Interna de la escala o Análisis de la Capacidad de Discriminación de los items y dimensiones - La determinación del sistema de interpretación de puntuaciones, a partir de la realización de: o Estudio de la Estructura Dimensional de la escala o Análisis del Peso Diferencial de las dimensiones respecto a la valoración global o Estudio de Tipologías de Perfiles de calidad identificables a partir de la escala La metodología del estudio que presentamos se enmarca en procesos de investigación evaluativa, concretamente se trataría de un estudio clásico observacional, de encuesta y de carácter diferencial implicando una aproximación psicométrica al análisis de los instrumentos de evaluación. Además podríamos decir que el estudio asume la complementariedad metodológica, otorgando la máxima importancia a recabar información para comprobar la validez y utilidad del modelo, dando mucha importancia a los resultados descriptivos como investigación natural que es. Las muestras utilizadas serían las valoraciones de los alumnos/as realizadas respecto a cada acción formativa pertenecientes a los distintos programas analizados, todas ellas representativas y poblacionales. Respecto a los resultados los estudios realizados permiten concluir que los instrumentos utilizados en el Modelo EFO son validos, fiables, creíbles y útiles para los usos que se pretendían respecto a los Programas de Formación Profesional Ocupacional establecidos para colectivos con riesgo de exclusión social. Así, concretamente se observan las siguientes evidencias de validación: - Niveles de valoración bastante satisfactorios para el conjunto de acciones formativas. - Capacidad diferencial de los instrumentos para atender a los colectivos específicos en los distintos programas - Comportamiento del instrumento a modo de una escala, de manera que el conjunto de elementos aporta información complementaria y acumulativa de la percepción de la calidad de los alumnos/as - Capacidad de discriminación del instrumento y funcionamiento similar a una escala - Estructuras factoriales diversas, de aquí el valor diferencial del instrumento - Patrones consistentes en la imagen de calidad medida a través del instrumento - Perfiles de calidad donde se da una escalación multidimensional de los niveles de satisfacción de los alumnos a través de los distintos programas. __________________________________________________________________________________________________This doctoral thesis is framed and is the continuation of the validation study of EFO model, that it was started by Jornet and Suarez (1996) and continued its elaboration by Perales (2000, 2002) . They are both centred in de Job Creation Scheme, these works, the same as the doctoral thesis that is presented, are developed in the Occupational Training Evaluation Project of de Valencia Community commissioned by the local government to the Measurement and Evaluation Technical Unit of MIDE Department. Specifically, the main objective of the thesis is to contribute to the validation evidences about the instruments of a Model (EFO Model) to evaluate the specific Occupational and Vocational Training Programs directed to social exclusion risk collective (women, young people and over 40 years old long-term unemployed). The methodology of the study that we present is framed in evaluative research processes; particularly it would be an observational classic study of survey and differential character implying a psychometrical approach to the analysis of evaluation instruments. The utilized samples would be the valuations realized by the students regarding each formative action belonging to the different analyzed programs, all of them representative and population. With regard to the results the realized studies allow to conclude that the used instruments in the EFO Model are worth, reliable, believable and useful for the uses that were sought in relation to the established Occupational and Vocational Training Programs for collective with social exclusion risk. This way, are observed the following validation evidences specifically: - Quite satisfactory levels of valuation for the group of training activities. - Differential capacity of the instruments to assist to the specific communities. - Behaviour of the instrument by way of a scale. - Discrimination capacity of the instrument and similar operation to a scale - Diverse factorial structures, from here the differential value of the instrument. - Consistent patterns in the image of quality measure through the instrument. - Quality profiles where a multidimensional escalation of the students satisfaction levels is given through the different programs

Una reflexión acerca de las tutorías universitarias a partir de las valoraciones realizadas por Profesores Tutores de la Universitat de València

ABSTRACTThis article responds to the need of reflecting about university tutoring for first year students and how to accomplish the Tutorial Action Plan (TAP) in the most effective way. This reflection is real, emerging from the considerations, contributions and personal experiences that some professors and tutors have manifested along some work sessions in relation to the implementation of the TAP at the University of Valencia. All of it, with the aim of enhancing our practice and innovating in the university context based on real experiences.RESUMENEste artículo responde a la necesidad de reflexionar acerca de las tutorías universitarias para alumnos de primero y sobre cómo llevar a cabo, de la manera más eficaz y efectiva posible, el Plan de Acción Tutorial (PAT). Esta reflexión se realiza a partir de las consideraciones, aportaciones y experiencias personales que algunos profesores/tutores han manifestado a lo largo de distintas sesiones de trabajo respecto a la implementación del PAT en la Universitat de València. Todo ello, con el objetivo de mejorar e innovar en el contexto universitario basándonos en experiencias reales.ABSTRACTThis article responds to the need of reflecting about university tutoring for first year students and how to accomplish the Tutorial Action Plan (TAP) in the most effective way. This reflection is real, emerging from the considerations, contributions and personal experiences that some professors and tutors have manifested along some work sessions in relation to the implementation of the TAP at the University of Valencia. All of it, with the aim of enhancing our practice and innovating in the university context based on real experiences

Faculty Perception of Inclusion in the University : concept, policies and educational practices

European universities must face the challenge of diversity and design inclusive practices to address it as part of their social responsibility. However, not all universities are doing the same in terms of diversity practices, so it is important to gather the perceptions of the protagonists. To this end, we have analysed university faculty's perceptions using a mixed model with a concurrent methodological strategy, including an ad hoc questionnaire validated with 880 educators, as well as 17 semi-structured interviews. The triangulation of these two instruments allowed us to analyse three key dimensions associated with the idea of attention to diversity in the university: diversity concept or culture, policies and programmes of the institution, and inclusive educational practices. The conclusion is that the faculty members are positively predisposed to get involved in the process of attention to diversity in all three dimensions, especially in the design of inclusive teaching practices such as the Universal Design of Learning (UDL), although they do point out that it is important to systematise diversity policies in research, innovation, and teaching to keep promoting the social commitment and responsibility of higher education institutions

Validation of a scale of attention to diversity for university teachers

It is the job of universities to face the greatest challenges of highereducation in the twenty-first century. Creating policies and practices to attendto diversity is part of their social responsibility. Validated instruments areessential to find out teachers’ attitudes and practices in education regardingattention to diversity. This paper aims to present the process of constructionand validation of the Scale of Beliefs, Attitudes and Practices of Attentionto Diversity for University Teachers (CAPA-PU) created for this purpose. Asurvey method with a non-experimental design was applied to a sample of 428teachers from various Spanish universities. To validate this scale, analysis ofthe content and construct preceded the selected items in the ad hoc instrumentin order to reach the representativeness of the construct. A review of theliterature on attention to diversity, especially instrument design, informedof the definition of the construct and its dimensions, representativeness,relevance, comprehension, ambiguity and clarity. In addition, reliable internalconsistency and exploratory and confirmatory factor analysis showed a fittedmodel and a five-factor structure: (1) Institutional Diversity; (2) Research,Training and Teaching Focused on Diversity; (3) Teaching and LearningPractices; (4) University Administrators’ Commitment; (5) Conception ofDiversity. In conclusion, it is evident that there is: a) current relevance of theassumed construct of attention to diversity focused on actions that providelearning opportunities to the most disadvantaged groups; and b) the need tooffer a scale such as the one created in order to attend to the processes ofeducational inclusion in Spanish universities.It is the job of universities to face the greatest challenges of highereducation in the twenty-first century. Creating policies and practices to attendto diversity is part of their social responsibility. Validated instruments areessential to find out teachers’ attitudes and practices in education regardingattention to diversity. This paper aims to present the process of constructionand validation of the Scale of Beliefs, Attitudes and Practices of Attentionto Diversity for University Teachers (CAPA-PU) created for this purpose. Asurvey method with a non-experimental design was applied to a sample of 428teachers from various Spanish universities. To validate this scale, analysis ofthe content and construct preceded the selected items in the ad hoc instrumentin order to reach the representativeness of the construct. A review of theliterature on attention to diversity, especially instrument design, informedof the definition of the construct and its dimensions, representativeness,relevance, comprehension, ambiguity and clarity. In addition, reliable internalconsistency and exploratory and confirmatory factor analysis showed a fittedmodel and a five-factor structure: (1) Institutional Diversity; (2) Research,Training and Teaching Focused on Diversity; (3) Teaching and LearningPractices; (4) University Administrators’ Commitment; (5) Conception ofDiversity. In conclusion, it is evident that there is: a) current relevance of theassumed construct of attention to diversity focused on actions that providelearning opportunities to the most disadvantaged groups; and b) the need tooffer a scale such as the one created in order to attend to the processes ofeducational inclusion in Spanish universities.

Validation of a Scale of Attention to diversity for University Teachers

It is the job of universities to face the greatest challenges of higher education in the twenty-first century. Creating policies and practices to attend to diversity is part of their social responsibility. Validated instruments are essential to find out teachers' attitudes and practices in education regarding attention to diversity. This paper aims to present the process of construction and validation of the Scale of Beliefs, Attitudes and Practices of Attention to Diversity for University Teachers (CAPA-PU) created for this purpose. A survey method with a non-experimental design was applied to a sample of 428 teachers from various Spanish universities. To validate this scale, analysis of the content and construct preceded the selected items in the ad hoc instrument in order to reach the representativeness of the construct. A review of the literature on attention to diversity, especially instrument design, informed of the definition of the construct and its dimensions, representativeness, relevance, comprehension, ambiguity and clarity. In addition, reliable internal consistency and exploratory and confirmatory factor analysis showed a fitted model and a five-factor structure: (1) Institutional Diversity; (2) Research, Training and Teaching Focused on Diversity; (3) Teaching and Learning Practices; (4) University Administrators' Commitment; (5) Conception of Diversity. In conclusion, it is evident that there is: a) current relevance of the assumed construct of attention to diversity focused on actions that provide learning opportunities to the most disadvantaged groups; and b) the need to offer a scale such as the one created in order to attend to the processes of educational inclusion in Spanish universities. Es tarea de las universidades afrontar los grandes retos de la educación superior del siglo XXI creando políticas y prácticas de atención a la diversidad como parte de su responsabilidad social. Por lo que se hace imprescindible contar con instrumentos validados para conocer las actitudes y prácticas educativas en atención a la diversidad desarrolladas por el profesorado de estas instituciones. Este artículo tiene como objetivo presentar el proceso de construcción y validación de la Escala de Creencias, Actitudes y Prácticas de Atención a la Diversidad (CAPA-PU) para Profesorado Universitario elaborada para tal fin. Esta ha sido aplicada, siguiendo un método de encuesta con un diseño no experimental, a una muestra de 428 docentes de varias universidades españolas. Para la validación de la escala se ha procedido al análisis de contenido y de constructo de los ítems seleccionados en el instrumento construido ad hoc con el fin de lograr la representatividad de los mismos sobre el constructo a medir. La revisión por parte de personas expertas en atención a la diversidad y en diseño de instrumentos informó de la definición del constructo y sus dimensiones, de su representatividad, relevancia, comprensión y claridad. El análisis de fiabilidad -como consistencia interna- y los estudios factoriales realizados -Exploratorio y Confirmatorio, muestran un modelo ajustado y una estructura de cinco factores: (1) Diversidad institucional; (2) Investigación, formación y docencia en atención a la diversidad; (3) Prácticas de enseñanza-aprendizaje; (4) Compromiso de las personas que lideran; (5) Concepción de diversidad. En conclusión, se hace patente: a) la relevancia actual del constructo de atención a la diversidad asumido y centrado en las actuaciones que permiten dar oportunidades de aprendizaje a aquellos grupos más desfavorecidos; y b) la necesidad de ofrecer una escala, como la elaborada, para atender a los procesos de inclusión educativa en las universidades españolas

La e-Evaluación del aprendizaje a través de la plataforma Aula Virtual de la Universitat de València

Este artículo presenta y analiza la innovación experimentada en distintas asignaturas de la Universitat de València en torno al concepto de la e-Evaluación y su aplicación a través de la plataforma de formación Aula Virtual. Por un lado, se presentan los aspectos teóricos más relevantes del incipiente movimiento e-Evaluación orientada al aprendizaje y, por otro, se señalan los procedimientos evaluativos establecidos con objeto de experimentar dicho cambio en diferentes titulaciones y grupos de estudiantes de dicha Universidad. La investigación presentada, Eval-Aula, se enmarca en los Proyectos de Innovación Educativa implementados en la Universitat de València durante los cursos académicos 2011-12 y 2012-13. En el equipo investigador que ha participado en esta innovación se integran ocho profesores/as de diferentes departamentos y de seis titulaciones de esta universidad. Los resultados obtenidos y las conclusiones planteadas permiten analizar los cambios positivos relacionados con la adquisición de las competencias de aprendizaje de los estudiantes y las mejoras en los procedimientos de evaluación desarrollados por los docentes universitarios desde un entorno virtual concreto de enseñanza-aprendizaje

Las competencias básicas en la nueva generación de estudiantes universitarios: Una experiencia de Innovación.

Esta contribución presenta una experiencia de innovación docente dedicada al desarrollo de competencias básicas en el estudiante universitario mediante la activación de prácticas educativas y procedimientos evaluativos que buscan promover y maximizar diversas competencias. Dicha investigación ha sido implementada en distintas titulaciones de la Universitat de València durante los cursos académicos 2011-12, 2012-13, 2013-14 y 2014-15. Participan en el estudio 1285 estudiantes a través de un muestreo accidental por accesibilidad. Tras el desarrollo de una metodología de encuesta basada en análisis descriptivos-exploratorios los datos recabados nos permiten conocer cuál es el grado de dominio percibido por los jóvenes universitarios en torno a las siguientes competencias básicas: aplicación de conocimientos, argumentación, resolución de problemas, análisis de información, comunicación, aprendizaje autónomo, sentido ético, creatividad, trabajo en equipo y evaluación. Como conclusiones del estudio se extrae que no se aprecian diferencias relevantes en cuanto al sexo de los estudiantes, que los universitarios se consideran menos capaces en la identificación de las propias necesidades formativas y en la gestión de estrategias educativas para la formación autónoma, así como en el afrontamiento de las actividades de una forma original y novedosa, entre otras

Faculty erception of inclusion in the university: concept, policies and educational practices

European universities must face the challenge of diversity and design inclusive practices to address it as part of their social responsibility. However, not all universities are doing the same in terms of diversity practices, so it is important to gather the perceptions of the protagonists. To this end, we have analysed university faculty’s perceptions using a mixed model with a concurrent methodological strategy, including an ad hoc questionnaire validated with 880 educators, as well as 17 semi‐structured interviews. The triangulation of these two instruments allowed us to analyse three key dimensions associated with the idea of attention to diversity in the university: diversity concept or culture, policies and programmes of the institution, and inclusive educational practices. The conclusion is that faculty members are positively predisposed to get involved in the process of attention to diversity in all three dimensions, especially in the design of inclusive teaching practices such as the UDL (universal design for learning), although they do point out that it is important to systematise diversity policies in research, innovation, and teaching to keep promoting the social commitment and responsibility of higher education institution

La Evaluación de Programas de Formación: tipos de planes y algunas cuestiones metodológicas.

Del mismo modo que ha ocurrido en otros contextos educativos, en la Formación para el empleo la Evaluación de Programas se está constituyendo como uno de los instrumentos fundamentales para la mejora de su Calidad. No obstante, en este ámbito inciden una gran cantidad de factores, que deben ser tenidos en cuenta si se desea orientar de forma adecuada la evaluación. (Pérez Carbonell, 1999; Villanueva y Catalá, 1997; Marí, Perales y Villanueva, 1999). Revisarlos, de forma sistemática y exhaustiva, excedería con mucho los limites razonables para esta presentación. Por ello, hemos optado por describir los tipos de planes de evaluación, tomando como criterio la Unidad de Análisis a que se refieren: personas, empresas, sociedad e Instituciones de Formación. Posteriormente, señalaremos los problemas que entendemos que son más relevantes en cuanto a sus implicaciones metodológicas, y que hemos identificado a partir de las diferentes experiencias que hemos venido realizando en este ámbito desde el Dpto. MIDE-UVEG en los últimos años. (Jornet y Suárez, 1997; Perales, 2000; Jornet, Suárez y Perales, 2000)