Modele analizy efektu oceniającego w pomiarze edukacyjnym

Artykuł powstał w wyniku poszukiwań optymalnego modelu analizy w ramach prowadzonych badań porównywalności oceniania i efektu egzaminatora w zakresie egzaminu maturalnego z języka polskiego i matematyki. W części pierwszej przedstawiono krótko teorię dotyczącą zagadnienia efektu oceniającego (rater effect), odnosząc je do obszaru pomiaru edukacyjnego w Polsce, w którym otrzymało ono nazwę efektu egzaminatora. Skupiono się na zagadnieniu od strony pomiarowej i nie rozważano psychologicznych podstaw oceniania. W drugiej części artykułu przedstawiono wybrane modele analizy tego efektu i wskazano, który model pozwala na oszacowanie największej liczby różnych aspektów efektu egzaminatora. Opisane zostały również symulacje sprawdzające przydatność modelu HRM-SDT do analizy danych z polskiego egzaminu maturalnego

Results of the 2002–2010 lower secondary school leaving exams on a common scale

The article presents the methodology and results of a survey on equating the lower secondary school examinations from 2002–2010. The survey was carried out by the Student Performance Analysis Unit at the Educational Research Institute. More than 10 000 students were selected for the equating study and information about more than 500 items was used. IRT models were used for equating exams, the results were presented on a latent variable scale and the observed score scale. Using this procedure, it was possible to isolate random difficulty variation between exam papers from specific years and present changes in ability level of students taking the exam. Based on the results, the level of humanities abilities of lower secondary school leavers was stable, whilst maths and science demonstrated a downward trend. Equating was validated by comparison with the results of the international PISA survey. Results for the arts and humanities were consistent with the PISA results for reading literacy. Maths and science, as compared with the PISA survey maths section demonstrated greater divergence

Wyniki egzaminu gimnazjalnego 2002–2010 na wspólnej skali

W artykule prezentowane są metodologia oraz rezultaty badania nad zrównaniem wyników egzaminu gimnazjalnego dla lat 2002–2010 przeprowadzonych przez Pracownię Analiz Osiągnięć Uczniów w Instytucie Badań Edukacyjnych. Do badania zrównującego wylosowano ponad 10 tys. uczniów i wykorzystano informacje o ponad 500 zadaniach. Do zrównania wyników egzaminu wykorzystano modele IRT, wyniki przedstawiono na skali zmiennej ukrytej oraz na skali wyników obserwowanych. Dzięki zastosowanej procedurze udało się wyizolować losowe wahania trudności między arkuszami egzaminacyjnymi w poszczególnych latach i przedstawić zmiany w poziomie umiejętności uczniów zdających egzamin gimnazjalny. Na podstawie rezultatów badania można stwierdzić, że poziom umiejętności humanistycznych gimnazjalistów jest stabilny, natomiast poziom umiejętności matematyczno-przyrodniczych wykazał trend spadkowy. W analizie dokonano walidacji zrównywania, porównując przedstawione wyniki z wynikami badania międzynarodowego, porównywalnego w kolejnych cyklach badania PISA. Wyniki dla części humanistycznej wykazują wysoką zbieżność z wynikami PISA dla czytania ze zrozumieniem. W przypadku części matematyczno-przyrodniczej egzaminu, która porównywana była z matematyką w badaniu PISA, zaobserwowano większe różnice pomiędzy rezultatami obydwu badań

Lekcja języka angielskiego z perspektywy uczniów klas trzecich gimnazjów

Wyniki Europejskiego badania kompetencji językowych (ESLC) pokazały, że w Polsce lekcja w szkole jest dla wielu uczniów jedyną okazją do regularnego kontaktu z językiem obcym. Autorzy niniejszego tekstu podjęli próbę przeanalizowania informacji dotyczących lekcji językowych, a zebranych wśród gimnazjalistów uczestniczących w badaniu ESLC. Celem artykułu jest omówienie danych kwestionariuszowych dotyczących lekcji języka w świetle aktualnego stanu wiedzy teoretycznej i praktycznej związanej z nauczaniem języków obcych oraz założeniami podstawy programowej. Podjęto również próbę odpowiedzi na pytanie, czy lekcja, której obraz wyłania się z odpowiedzi uczniów, pozwala na realizację podstawowego celu edukacji językowej, jakim jest komunikacja w języku obcym

Lessons of English in Polish schools: a third-grade lower secondary school perspective

Results from the European survey on Language Competences (ESLC) show that regular exposure to a foreign language for many Polish pupils is limited to language classes at school. in this light, the authors of this article took a closer look at the Polish ESLC findings. With a discussion on current theoretical approaches, good practice in foreign language teaching and national core curriculum requirements, the paper presents an analysis of student responses to a questionnaire about English lessons at lower secondary school. it also aims to describe how the school language class, as students describe it, achieves its basic goal in language education – communication in a foreign language