Teacher assessment of students’ work and social behavior - a validation study

Beeinträchtigungen des Arbeits- und Sozialverhaltens sind in sonderpädagogischen Zielgruppen häufig und stellen ein Risiko für den schulischen Lernerfolg dar. Ziel dieser Studie ist die Validierung von Items, mit denen sonderpädagogische Lehrkräfte das aktuelle Arbeits- und Sozialverhalten ihrer Schülerinnen und Schüler erfassen können. Weiterführend könnten solche Items zur Auswahl und Evaluation von Fördermaßnahmen genutzt werden. Lehrkräfte schätzten elf Items, die erwünschtes Arbeits- und Sozialverhalten abbilden, für 373 Schülerinnen und Schüler aus vier sonderpädagogischen Gruppen (Förderbedarfe Lernen und Emotionale und Soziale Entwicklung) und einer Vergleichsgruppe ein. Zudem wurde für einen Teil der Stichprobe ein standardisiertes Fragebogenverfahren durchgeführt. Es zeigt sich erwartungskonform, dass die Gruppen mit Förderbedarf ein schlechteres Arbeits- und Sozialverhalten aufweisen als die Vergleichsgruppe. Die untersuchten Items korrelieren hoch mit dem standardisierten Fragebogen. Die Ergebnisse implizieren basierend auf der Methode bekannter Gruppen und der konkurrenten Validität, dass sich die untersuchten Items zur Erfassung des Arbeits- und Sozialverhaltens eignen. Da die Überprüfung der Dimensionalität der Items kein annehmbares Modell ergibt, wird eine modifizierte Kurzskala Erfolgreiches Arbeitsverhalten zur weiteren Überprüfung vorgeschlagen. (DIPF/Orig.)Students with special needs frequently exhibit poor work and social behavior, which represents a risk for academic success. The aim of this study is to validate items that enable special education teachers to assess the current work and social behavior of their students. Such items could also be used to select and evaluate interventions. Teachers rated eleven items on appropriate work and social behavior for 373 students from four groups with special needs (learning, emotional, and social problems) and a comparison group. In addition, a standardized questionnaire was administered to part of the sample. As expected, the groups with special needs showed poorer work and a social behavior than the comparison group. The items were found to correlate strongly with the items of the standardized questionnaire. The results imply, based on the method of known groups and the concurrent validity, that the examined items are appropriate for assessing work and social behavior. Since there was no acceptable model on the dimensionality of the items, a modified short scale, Effective Work Behavior, is proposed for further investigation. (DIPF/Orig.

Development and validation of an online-survey to assess inclusive competence and attitudes of teachers

Inklusiver Unterricht konfrontiert Lehrpersonen mit neuen und komplexen Herausforderungen, zu deren Bewältigung positive Einstellungen und professionelle Kompetenzen zentrale Ressourcen darstellen. Vorliegende Erhebungsinstrumente zu ausgewählten Einstellungsaspekten sind mehrheitlich methodisch eindimensional konzipiert, handlungsleitendes Wissen und Kompetenzen werden nicht ausreichend berücksichtigt. Der Beitrag dokumentiert die Entwicklung und Validierung eines mixed-method Online-Fragebogens zur Erhebung der Einstellungen und Kompetenzen von Lehrkräften zur Inklusion. Zur Überprüfung der inhaltlichen Validität sowie der Testnebengütekriterien wurden kognitive Interviews mit 12 Lehrpersonen geführt und inhaltsanalytisch ausgewertet. Zur Reliabilitätsprüfung wurde das Instrument an einer Stichprobe von N = 77 Lehrpersonen pilotiert und statistisch analysiert. Die Ergebnisse belegen gute Reliabilitätskennwerte sowie eine inhaltlich valide, drei-dimensionale Faktorenstruktur. Die Aussagen der Interviewpartner lieferten eine hochwertige Datengrundlage zur empirisch-begründeten Revision des Instruments hinsichtlich Item-Formulierung, Antwortformate und Online-Präsentation. (DIPF/Orig.)Inclusive Education signifies new and complex challenges for teachers. To meet these challenges favorable attitudes and professional competencies are essential requirements. Current instruments focusing on specific attitude aspects are constructed methodologically one-dimensional. Practice related knowledge and competencies are taken into account insufficiently. The paper presents the generation and validation of a mixed-method Online-Questionnaire for measuring attitudes and competencies of teachers regarding inclusion. To access content validity and a high methodological quality, cognitive interviews with 12 teachers were run and analyzed using content-analysis. For reliability analysis the instrument was piloted in a sample of N =77 teachers. Statistical analyzis show high reliability scores and a valid, three dimensional factor structure. The statements of the interviewees provide detailed and sophisticated data for empirical revisions of the instrument regarding question-wording, response-format and online-presentation. (DIPF/Orig.

Class climate from the perspective of students with immigration backgrounds

Die Qualität von Schule und Unterricht zeigt sich u. a. darin, der Reproduktion sozialer Ungleichheit im Bildungswesen durch Benachteiligung von Schüler:innen mit Migrationshintergrund entgegenzuwirken. Im Rahmen aktueller Modelle zur Beschreibung von Schul- und Unterrichtsqualität wird das Klassenklima hervorgehoben; es fehlt jedoch an differenzierten Befunden zur Beurteilung des Klassenklimas aus Sicht von Schüler:innen mit Migrationshintergrund. In der vorliegenden Studie beurteilten 1292 Schüler:innen aus 49 Schulklassen der Jahrgangsstufen vier bis acht das Klassenklima auf Schul-, Klassen- und Individualebene. Mehrebenenanalysen zeigen, dass Schüler:innen mit Migrationshintergrund die Interaktion mit Lehrkräften als strenger und restriktiver wahrnehmen und den bestehenden sozialen und leistungsbezogenen Druck auf Klassenebene höher bewerten. Demgegenüber werden die Lerngemeinschaft und Schülerzentriertheit tendenziell positiver wahrgenommen. Die Befunde geben einen differenzierten Einblick in die subjektiven Wahrnehmungen einzelner Dimensionen des Klassenklimas und legen nahe, migrationsbedingte Unterschiede in der Bewertung der Lernumgebungen im Schulkontext sensibler zu berücksichtigen. (DIPF/Orig.)Counteracting the disadvantages of students with a migration background is, among other things, a quality characteristic of education and teaching. Within the framework of current models describing school and teaching quality, class climate is emphasized; however, there is a lack of differentiated findings on the evaluation of class climate from the perspective of students with a migration background. In the present study, 1292 students from 49 school classes in grades four to eight evaluated the class climate on school, class, and individual level. Multilevel analyses show that immigrant students perceive interactions with teachers as more restrictive and evaluated the social- and performance-related pressure at class level higher. In contrast, students with a migration background tent to perceive the learning community and the student centeredness of their classes more positive. The findings provide a differentiated insight into the subjective perceptions of class climate as a multidimensional construct from the perspective of students with a migration background and suggest that migration-related differences in the assessment of learning environments in the school context should be considered more sensitively. (DIPF/Orig.

Die Einflüsse internalisierender und externalisierender Verhaltensprobleme sowie anderer empirisch relevanter Faktoren auf Stresserleben in jugendlichen Peerbeziehungen

Stress perception in romantic and friendship peer relations constitutes a typical adolescent phenomenon observed across cultures. Although internalizing and externalizing problems are associated with social interaction difficulties with peers, different behavior problems have not yet been explicitly related to stress perception in peer relations. The current study addresses the question of whether internalizing, externalizing and comorbid problem behavior is associated with stress perception in peer relations. It secondly examines empirically relevant risk factors that might moderate this assumed association. Standardized instruments are applied to a sample of 1019 adolescents, including 678 with behavior problems according to an aggregated teacher-student-rating. MANCOVAs and MLRs reveal that type of behavior problem is an important variable to explain peer stress, but that socioeconomic status (e.g., parents’ highest educational level, occupational status) explains more variance. Migration background proves to be a moderator, as well. The results are in accordance with current research on the high meaning of societal macro-level variables for the social and emotional development of youths. (DIPF/Orig.)Stresserleben im Kontext romantischer und freundschaftlicher Peerbeziehungen stellt kulturübergreifend ein jugendtypisches Phänomen dar. Obwohl internalisierende und externalisierende Verhaltensprobleme oft mit sozialen Interaktionsproblemen in Peerbeziehungen einhergehen, wurde der Zusammenhang zwischen verschiedenen Verhaltensproblemen sowie Stresserleben in Peerbeziehungen noch nicht betrachtet. Die vorliegende Studie untersucht erstens die Fragestellung, ob internalisierende, externalisierende und komorbide Verhaltensprobleme mit dem Stresserleben in Peerbeziehungen assoziiert sind. Zweitens werden empirisch relevante Risikofaktoren in den Blick genommen, die den vermuteten Zusammenhang moderieren könnten. 1019 Jugendliche werden mit standardisierten Instrumenten untersucht, einschließlich 678 mit Verhaltensproblemen gemäß aggregiertem Rating der Jugendlichen sowie deren Lehrkräfte. MANCOVAs und MLRs zeigen, dass die Art der Verhaltensprobleme eine relevante Größe zur Erklärung des Stresserlebens in Peerbeziehungen darstellt. Aspekte des sozioökonomischen Status (z. B. der höchste Bildungsabschluss sowie der Beschäftigungsstatus der Eltern) erklären jedoch am meisten Varianz. Auch das Vorliegen eines Migrationshintergrundes nimmt moderierenden Einfluss. Die Ergebnisse stehen im Einklang mit Befunden zum hohen Stellenwert von Variablen auf der gesellschaftlichen Makroebene für die soziale und emotionale Entwicklung von Jugendlichen. (DIPF/Orig.

Informant discrepancies as indicators of school stress. A study about the assessment of internalizing and externalizing problem behavior rated by adolescents and their teachers

Ein herausforderndes Phänomen bei der Interpretation diagnostischer Daten sind Beurteilerdiskrepanzen, d. h. die Einschätzungen verschiedener Rater über Verhaltensprobleme bei Jugendlichen korrelieren nur moderat. Einzelne empirische Befunde legen nahe, dass Beurteilerdiskrepanzen Erklärungswert für erhöhtes schulbezogenes Stresserleben haben könnten, da sie mit Stressoren wie fehlender sozialer Unterstützung sowie Kommunikationsproblemen mit Lehrkräften assoziiert sind. Schulstress ist eine relevante Variable, die langfristig persistierende Verhaltensprobleme vorhersagt. Diese Studie untersucht die Fragestellung, ob Diskrepanzen der Selbst- und Lehrkrafteinschätzung hinsichtlich internalisierenden und externalisierenden Problemverhaltens Erklärungswert für Schulstress haben. N = 359 Jugendliche (316 mit Verhaltensproblemen) sowie deren Lehrpersonen wurden mit standardisierten Instrumenten befragt. Hierarchische Regressionsanalysen belegen den Einfluss der Beurteilerdiskrepanzen auf Schulstress, der durch Geschlechtseffekte moderiert wird. Bei Jungen mit internalisierenden Problemen treten häufig ausgeprägte Beurteilerdiskrepanzen auf, die mit erhöhtem Schulstress assoziiert sind. Die Ergebnisse unterstreichen die Bedeutung der Beurteilerdiskrepanzen als schulbezogene Stressindikatoren. Möglichkeiten sozialer Unterstützung von Jungen mit internalisierenden Problemen durch Lehrpersonen werden diskutiert. (DIPF/Orig.)A challenging phenomenon interpreting diagnostic data is informant discrepancy, since there are only moderate correlations between teachers and adolescents assessments of problem behavior. There are some empirical findings indicating that informant discrepancies might explain school stress as informant discrepancies coincide with stressors like a lack of social support and communication problems with teachers. School stress is an important variable to predict long-term problem behavior. This study addresses the question whether informant discrepancies relating to internalizing and externalizing problems are indicators of school stress. Standardized instruments are applied within a sample of N = 359 adolescents (316 with problem behavior) and their teachers. Hierarchic regression analyses reveal the impact of informant discrepancies on school stress moderated by gender. Considerable informant discrepancies often occurred in boys with internalizing problems, who also perceived the highest school stress. The results imply that informant discrepancies are relevant school stress indicators. Ways of making teachers available as source of social support for boys with internalizing problems are discussed. (DIPF/Orig.

Teachers’ subjective definitions of inclusion. An exploratory study

Bislang existieren im wissenschaftlichen Diskurs sehr unterschiedliche Verständnisse und vielerlei Definitionen von Inklusion. Auch aus der Perspektive von Lehrkräften dürften uneinheitliche subjektive Verständnisse von Inklusion vorliegen. Subjektive Definitionsweisen von Lehrkräften zu Inklusion wurden in der Forschung bislang wenig berücksichtigt, obwohl Alltagstheorien in der Praxis als handlungsleitender gelten als wissenschaftliche Theorien. Die vorliegende, explorative Studie untersucht, aus welchen inhaltlichen Elementen sich die subjektiven Definitionen von Lehrkräften zum Begriff „Inklusion“ zusammensetzen. Die als Antworten auf ein entsprechendes offenes Item („Definieren Sie Inklusion in Ihren eigenen Worten.“) vorgenommenen Definitionen einer Teilstichprobe von 182 Lehrkräften konnten durch eine induktive, qualitative Inhaltsanalyse in drei Reduktionsschleifen auf 27 Kategorien (k = 0.85) reduziert werden, die sich wiederum in 9 Dimensionen (k = 0.89) zusammenfassen ließen. Die Ergebnisse zeigen, dass Lehrkräfte Inklusion nicht einheitlich definieren und sogar innerhalb der Definitionen widersprüchliche Elemente zu finden sind. Sie beziehen sich auf unterschiedliche Bedeutungsebenen wie gesellschaftliche, wertebezogene und schulbezogene Themen, beinhalten evaluative und affektive Aspekte sowie auch negative Bewertungen. Hauptsächlich werden die Aspekte der Partizipation und Zugehörigkeit sowie der Differenzierung und Individualisierung genannt. Die Lehrkräfte thematisieren jedoch auch widrige Voraussetzungen und Ressourcen sowie potentiell schädliche Folgen von Inklusion. Die Ergebnisse leisten einen Beitrag dazu, die subjektiven Definitionsweisen von Lehrkräften zu Inklusion qualitativ zu erfassen und zu kategorisieren. Methodische Implikationen der Berücksichtigung subjektiver Definitionen von Lehrkräften in der Inklusionsforschung werden diskutiert. (DIPF/Orig.)A review of the academic scholarship provides many different understandings and various ways to define and operationalize inclusion. It stands to reason that practitioners like teachers also have inconsistent concepts of inclusion. Although there is some evidence, that the association between behavior and subjective understandings or beliefs of teachers is stronger than the relationship between academic theories and teachers’ behavior, there is a lack of research on teachers’ subjective definitions of inclusion. The study explores which content-related elements compose teachers’ subjective definitions of inclusion as a concept. A subsample of 182 teachers completed an online survey and answered the open-ended item “Define Inclusion in your own words.”. The data was analyzed using an inductive qualitative content analysis. Through three iterations of the analysis the answers were summarized in 27 categories (k = 0.85) which could be categorized by 15 dimensions (k = 0.89). Results show that teachers define inclusion in various ways. Individual subjective definitions even comprise contradictory elements. The categories are related to social, ethical, and school-related issues and also contain affective aspects and (negative) evaluations. The most frequently found categories are related to the topics of participation and membership, or differentiation and individualization. But teachers also describe aversive conditions, insufficient resources and potentially negative consequences of inclusion. The study provides a reliable coding scheme to categorize subjective definitions of teachers and thereby contributes to enhance the measurement of teachers’ subjective definitions of inclusion. Methodological implications regarding the systematic consideration of subjective definitions in empirical research on inclusion are discussed. (DIPF/Orig.

Der Zusammenhang zwischen Bildungsstufe, besonderen pädagogischen Bedürfnissen von Schülerinnen und Schülern und Einstellungen von Lehrkräften zur Inklusion in Deutschland

Positive attitudes of teachers are considered as key requirements for a successful implementation of inclusive education. Current inclusive education practices in Germany are grounded on structurally established educational levels within a traditional selective school system. Teachers’ attitudes towards inclusive education are associated with their experiences with inclusive settings and their experiences with students with special educational needs (SEN). Unequal distributions of students with (different types of) SEN across the educational levels suggest systematical differences in teachers’ experiences with SEN in inclusive settings. This study examined the relationships between the educational level (i.e. primary level, secondary level, and vocational level) and differences in teachers’ attitudes towards inclusive education with students of different types of SEN. 1 630 teachers in North Rhine-Westphalia completed an online-survey assessing three dimen sions of attitudes towards the inclusion of students with four different types of SEN. A MANOVA and a series of 3 × 4 mixed-design ANOVAs revealed significant effects of educational level on teach er attitudes. Results showed that the relationship between different types of SEN and teachers’ attitudes varied by educational level. Findings indicate that structural disparities within the German educational system are related to teachers’ attitudes toward inclusion and attitude differ ences toward the inclusion of students with different types of SEN. Implications for improvements in professional development and directions for future research are discussed. (DIPF/Orig.)Positive Einstellungen von Lehrkräften werden als zentrale Voraussetzung zur erfolgreichen Implementation schulischer Inklusion angenommen. Schulische Inklusion wird in Deutschland vor dem Hintergrund strukturell etablierter Bildungsstufen innerhalb eines traditionell selektiven Schulsystem umgesetzt. Einstellungen von Lehrkräften gegenüber der schulischen Inklusion hängen mit ihren Erfahrungen in inklusiven Unterrichtssettings sowie mit ihren Erfahrungen mit Schülerinnen und Schülern (SuS) mit Förderbedarf zusammen. Die ungleiche Verteilung von SuS mit (unterschiedlichen) sonderpädagogischen Förderbedarfen über die Bildungsstufen des Schulsystems legen systematische Unterschiede in den Erfahrungen von Lehrkräften im Umgang mit sonderpädagogischem Förderbedarf im inklusiven Unterricht nahe. Die vorliegende Studie untersucht den Zusammenhang zwischen den Bildungsstufen (Primarstufe, Sekundarstufe, berufsbildende Stufe) und Einstellungsunterschieden von Lehrpersonen gegenüber der Inklusion von SuS mit unterschiedlichen Förderbedarfen. 1 630 Lehrkräfte aus Nordrhein-Westfalen beantworteten eine Online-Befragung zur Erfassung von drei Einstellungsdimensionen hinsichtlich der Inklusion von SuS mit vier Formen sonderpädagogischen Förderbedarfs. Eine MANOVA sowie eine Serie zweifaktorieller (3 × 4) ANOVAs mit Messwiederholung auf einem Faktor belegen signifikante Effekte der Bildungsstufe auf die Einstellungen der Lehrkräfte. Die Ergebnisse zeigen, dass der Zusammenhang zwischen sonderpädagogischem Förderbedarf und Einstellung in Abhängigkeit der Bildungsstufe variiert. Es ergeben sich Hinweise darauf, dass strukturelle Unterschiede innerhalb des Schulsystems mit Einstellungen von Lehrkräften zur Inklusion und Einstellungsunterschieden gegenüber der Inklusion von SuS mit unterschiedlichen Förderbedarfen zusammenhängen. Implikationen zur Verbesserung der Aus- und Weiterbildung von Lehrkräften sowie für die zukünftige Forschung werden diskutiert. (DIPF/Orig.

Differential validity of the Tests for Attentional Performance (TAP) in the diagnosis of ADHD during adolescence

Theoretischer Hintergrund: Die Aufmerksamkeitsdefizit-/Hyperaktivitätsstörung (ADHS) gehört zu den häufigsten psychischen Störungen im Kindes- und Jugendalter. Häufig wird jedoch Kritik am diagnostischen Vorgehen und der damit verbundenen Sicherheit der Diagnosestellungen laut. So stellen eher subjektive Fremdbeurteilungsbögen ein wesentliches diagnostisches Informationskriterium dar. Neuropsychologische Testzugänge stellen eine Möglichkeit dar, objektivere Kriterien für eine Diagnosezustellung von ADHS zu liefern. Gleichzeitig ist die Eignung solcher Verfahren zur Beschreibung von ADHS nicht abgesichert. Ein in diesem Kontext häufig im deutschsprachigen Raum diskutiertes Verfahren stellt die Testbatterie zur Aufmerksamkeitsprüfung (TAP) dar. Befunde zur Eignung der TAP zur Diagnosestellung von ADHS im Jugendalter liegen zum jetzigen Zeitpunkt jedoch nicht vor. Daher soll im folgenden Beitrag die Eignung der TAP zu diesem Zweck geprüft werden. Methode: In einem ersten Schritt soll die Aufmerksamkeitsleistung von jeweils 49 Jugendlichen mit und ohne AHDS in den Untertest Alertness, Flexibilität und Go/Nogo der TAP verglichen werden. Dazu werden zunächst Mittelwertunterschiede beschrieben und mittels t-Tests überprüft. In einem zweiten Schritt soll die diagnostische Güte der einzelnen Parameter anhand von ROC-Analysen geprüft werden. Ergebnisse: In den Ergebnissen werden Unterschiede zwischen den beiden Gruppen deutlich. Die größten Unterschiede werden dabei in den Parametern der Reaktionszeitschwankungen aller drei Untertests deutlich. Gleichzeitig unterscheidet sich jedoch nur ein Parameter (SD Go/Nogo) signifikant zwischen Jugendlichen mit und ohne ADHS. In den ROC-Analysen zeigt sich nur eine geringe diagnostische Güte der Parameter der TAP. Diskussion: Die Ergebnisse stehen im Gegensatz zu bisherigen Studien, welche der TAP eine Eignung zur Diagnostik von ADHS im Kindesalter zusprechen. Auf Grundlage der hier vorliegenden Ergebnisse kann diese Eignung für das Jugendalter nicht bestätigt werden. (DIPF/Orig.)Theoretical Background:ADHD is the most frequent diagnosed childhood and adolescence mental disorder. At the same time, diagnosis of ADHD is criticized as it often comes with subjective third-party measures (as teachers’ or parents’ ratings). Such measures of neuropsychological profiles might therefore be a promising approach to objectivize and validate the ADHD diagnosis. However, evidence supporting the validity of neuropsychological approaches in diagnosing ADHD is still lacking. In this context, the German Testbatterie zur Aufmerksamkeitsprüfung(TAP; test battery for the assessment of attentional functioning) is frequently discussed as possibly being able to differentiate between subjects with and without ADHD. However, first results could confirm differential properties of the TAP in the context of diagnosing ADHD in children, insights for these properties in the subgroup of adolescents are not provided. Therefore, the goal of the paper at hand was to examine the validity of the TAPin differentiating between adolescents with and without ADHD. Method: 49 adolescents with and without ADHD were tested using the subscales Alertness, Flexibility and Go/Nogo of the TAP. Between-group-differences during the performance of these subscales were compared using T-tests. Effect sizes for mean differences were described. In a second step, the diagnostic validity of the parameters of all three subscales are explored using ROC-analyses. Results: Non-significant differences between the performances of both groups can be examined in all subscales. The largest effects can be described for the parameters of variance in reaction time. However, significant differences can only be described for one of these parameters. Results of ROC-analyses indicate low validity of TAP measures to identify adolescents with ADHD. Discussion: The results contrasted previous studies, which confirm the validity of TAP measures in differentiating children with and without ADHD. Considering the results of the paper at hand, this assumption cannot be extended to the subgroup of adolescents. Therefore, the isolated use of this neuropsychological test in diagnosing ADHD in adolescence is not recommended. (DIPF/Orig.

Stressbewältigung

Klein-Heßling J, Lohaus A. Stressbewältigung. In: Lauth GW, Linderkamp F, eds. Verhaltenstherapie mit Kindern und Jugendlichen. Praxishandbuch. 2nd ed. Weinheim: Beltz; Unpublished: 567-578