Construction and validation of the SON-R 5 1/2-17, the Snijders-Oomen non-verbal intelligence test

In this thesis the construction and validation of the SON-R 5,5-17 is described, the recent revision of the Snijders-Oomen non-verbal intelligence test. The SON-R is an individual test of (non-verbal) intelligence for children in the ages of 51/2 to 17 years. The test was published in 1989 with an extensive 'Manual and researchr eport' in English, German and Dutch. The thesis is for the greater part a reprint of the 'Manual and research report' with the omission of norm tablesa nd instructionsf or practical use of the test and with the addition of some new parts. ... Zie: Summar

Validity evidence of the Social and Emotional Nationwide Assessment (SENNA 1.0) inventory

Given the necessity of adequate instruments to measure socio-emotional skills, this study aimed to obtain validity evidence of the Social and Emotional Nationwide Assessment inventory (SENNA 1.0). The instrument was administered to a sample of 634 students (59% females) with a mean age of 16.3 years (SD = 1.21), from eight secondary schools of the Federal District ] of Brazil. Exploratory factor analysis indicated a six factor structure that explained 42.7% of the common variance, while confirmatory factor analysis and exploratory structural equational modeling analysis showed a moderate fit to the data. Reliability coefficients of the factor scores varied between .66 and .89. The coefficients of the convergent validity with the Reduced Scale of the Big Five Personality Factors (ER5FP) had a mean value of .59. In conclusion, the results indicate satisfactory evidence for the score validity of the SENNA 1.0 inventory

School effectiveness : multilevel regression of large scale assessment data

O objetivo deste artigo é elaborar um modelo explicativo do desempenho acadêmico de alunos da 8ª série. A análise realizada considerou a estrutura hierárquica dos dados do Sistema de Avaliação da Educação Básica (SAEB). Os resultados apontaram que 79% da variância entre as escolas no desempenho na prova de Língua Portuguesa pode ser atribuída às variáveis relacionadas à composição socioeconômica das escolas e ao status socioeconômico dos estudantes. As variáveis com efeitos positivos no desempenho dos alunos são: (a) a manutenção dos recursos tecno-pedagógicos; (b) freqüência com que os professores passam e corrigem a lição de casa; (c) grau com que os professores estão comprometidos com a aprendizagem dos seus alunos; (d) o quanto que a idade dos alunos está próxima à ideal para a série; (e) freqüência com que o estudante faz seu dever de casa e (f) se o estudante pode se dedicar integralmente aos estudos.The objective of this study is the development of a model explaining academic performance of 8th grade elementary school students. The hierarchical structure of the data collected by the Primary Education Evaluation System of Brazil was taken into account in the analysis. The results showed that 79% of the variability between schools can be attributed to variables related to the socio-economic composition of the schools and socioeconomic status of the students. Variables with a positive effect on students’ performance were: (a) the maintenance of the technical equipment; (b) the extent to which teachers give and correct homework; (c) the degree to which teachers are committed to provide good education to their students; (d) the extent to which the student´s age is approaching the ideal age for his or her class; (e) the degree to which a student makes her or his homework, and (f) whether the student can dedicate all his time to school

Use of educational assessment data in Brazil, Chile and Argentina

La disponibilidad de información relacionada con evaluaciones educacionales es grande en América Latina, principalmente después de las reformas educativas de las últimas décadas. El objetivo de este estudio es trazar un mapa de cómo los datos de las evaluaciones educativas realizadas en Brasil, Chile y Argentina son utilizados por los investigadores. La metodología empleada para la identificación y selección de los estudios fue la búsqueda de publicaciones, entre 1994 y 2014, por medio de la base de datos de la agencia CAPES. Utilizando las palabras clave: “rendimiento escolar” (en español, portugués – rendimento escolar – e inglés – school performance), SAEB, SIMCE y “Operativo Nacional de Evaluación”; se seleccionaron 27 estudios empíricos que utilizan datos de las evaluaciones de los tres países en cuestión. La revisión mostró que la técnica más utilizada fue el análisis de regresión multinivel. Se verificó que casi todos los trabajos seleccionados analizaban el impacto de factores asociados al desempeño escolar. Sin embargo, también se utilizaron los datos de las evaluaciones educativas para evaluar el papel de la escuela en la promoción de la equidad y estimar el impacto de programas educativos. Los resultados obtenidos en este estudio permiten concluir que, en general, los artículos revisados proporcionan información que puede apoyar políticas que contribuyan a la mejora de la educaciónA great amount of information related to the assessment of educational progress is available in Latin America, especially after the implementation of educational reforms during the last decades. This article aims to map how researchers use data of educational assessments conducted in Brazil, Chile and Argentina. The methodology used for identifying and selecting studies was a search for publications through the CAPES database, between 1994 and 2014. Using the keywords: "school performance", “rendimiento escolar” (in Spanish) and “rendimento escolar” (in Portuguese), SAEB, SIMCE and "National Operational Assessment"; 27 empirical studies using assessment data related to the three countries concerned were selected. The most frequently used technique in these articles was multilevel regression analysis. The review indicated that practically all of the selected articles analyzed the impact of factors associated to school performance. However, educational assessment data were also used to evaluate the role of schools in promoting equity and to estimate the impact of educational programs. The results of the present study allow the general conclusion that the revised articles supply information that can support policies that contribute the improvement of educatio

Structural equation modeling in psychology : concepts and applications

O debate sobre procedimentos e técnicas de tratamento de dados é relevante para o contexto de produção e avanço do conhecimento em várias áreas do saber. Os Modelos de Equações Estruturais são um conjunto de técnicas de tratamento de dados que têm recebido grande atenção de pesquisadores, especialmente nos últimos 10 anos. Esse procedimento de tratamento de dados possui suas raízes relacionadas a distintas áreas do conhecimento: a biometria, a econometria e a psicometria. Como conseqüência de suas peculiaridades, o relato científico em Modelos de Equações Estruturais deve considerar vários aspectos relevantes, como a definição teórica do modelo a ser testado, a especificação e identificação do modelo, além de aspectos de estimação e mensuração dos índices de adequação. Vários desses elementos são apresentados e discutidos no presente artigo focando-se nas possibilidades de aplicação na Psicologia e em ciências correlatas. Perspectivas futuras e limitações dos Modelos de Equações Estruturais são discutidas.The debate concerning procedures and techniques of data treatment is relevant in the context of production and progress of knowledge in a broad range of subject areas. In the past decade, a framework of data treatment methods denominated Structural Equation Modeling received a great deal of attention from researchers. This data treatment procedure has its historical origins related to different areas of knowledge like biometrics, econometrics and psychometrics. As a consequence of its unique characteristics, scientific report in Structural Equation Modeling should consider various relevant aspects, like the theoretical definition of the model to be tested, the specification and identification of the model, as well as estimation and measurement aspects of the adequation indices. Several of these elements are presented and discussed in the present article, focusing on the possibilities of practical application in the field of Psychology and related sciences. In addition, future perspectives and limitations of Structural Equation Modeling are also discussed

Social programs evaluation : a comparison of data analysis strategies

Este artigo apresenta uma discussão sobre questões metodológicas em relação à avaliação de programas sociais, tomando como exemplo o caso do Plano Nacional de Qualificação do Trabalhador - PLANFOR. O delineamento da pesquisa foi de um estudo quase-experimental, com três grupos: dois experimentais e um controle. A pesquisa foi realizada durante os anos de 2001 a 2004, com coleta de dados antes e depois do programa, englobando 360 instituições, sendo uma por município, cobrindo todas as regiões brasileiras. Para a coleta de dados, utilizou-se um instrumento com indicadores quantitativos (sociais e econômicos). Foram comparadas quatro estratégias de análise de dados: análise de variância (ANOVA) de mensurações repetidas (pré e pós-teste), ANOVA com escores de ganho, ANOVA com categorização dos sujeitos no pré-teste (blocking) e análise de covariância (ANCOVA). Foram ainda consideradas interpretações alternativas para os efeitos encontrados. Por fim, discutiu-se a adequação de tais estratégias para a avaliação de programas sociais.This article presents a discussion about methodological questions related to social programs evaluation, taking as an example the case of the National Worker Qualification Plan - PLANFOR. The present study used a quasi-experimental design containing three groups: two experimental groups and one control group. The research was realized from 2001 to 2004, with data collection before and after the program, and comprising 360 organizations, one per city, from all Brazilian regions. For data collection, it was used an instrument with quantitative indicators (social and economic). Four data analysis strategies were compared: analysis of variance (ANOVA) of repeated measurement (pre- and post-test scores), ANOVA with gain scores, ANOVA after subjects' categorization on their pre-test (blocking), and analysis of covariance (ANCOVA). Alternative explanations of the observed effects were considered. Finally, the suitability of these strategies to the evaluation of social programs was discussed

Questionários contextuais do SAEB: análise qualitativa baseada nos resultados da análise fatorial

O objetivo deste estudo é contribuir para o aperfeiçoamento dos questionários contextuais do Sistema de Avaliação da Educação Básica (SAEB). Esses instrumentos são uma importante fonte de informação sobre as variáveis que estão associadas com o desempenho acadêmico dos alunos. No presente estudo foram analisados os questionários do SAEB que foram aplicados na 4ª série em 2001. A análise fatorial das 163 questões relacionadas à escola revelou uma estrutura fatorial com 19 fatores de primeira ordem e 5 de segunda ordem. A estrutura fatorial ficou composta por apenas 51% do total das questões analisadas. A análise de conteúdo das questões não-incluídas na estrutura fatorial indicou como razão provável de não-inclusão a falta de uma das seguintes características: simplicidade, precisão, relevância e clareza. Espera-se que os resultados encontrados nesse estudo sejam um passo a mais para o aprimoramento das medidas de fatores escolares mensurados pelos questionários contextuais do SAEB