The Online Evaluation of Courses: Impact on Participation Rates and Evaluation Scores

At one of Ontario’s largest universities, the University of Ottawa, course evaluations involve about 6,000 course sections and over 43,000 students every year. This paper-based format requires over 1,000,000 sheets of paper, 20,000 envelopes, and the support of dozens of administrative staff members. To examine the impact of a shift to an online system for the evaluation of courses, the following study sought to compare participation rates and evaluation scores of an online and paper-based course evaluation system. Results from a pilot group of 10,417 students registered in 318 courses suggest an average decrease in participation rate of 12–15% when using an online system. No significant differences in evaluation scores were observed. Instructors and students alike shared positive reviews about the online system; however, they suggested that an in-class period be maintained for the electronic completion of course evaluations.  À l’Université d’Ottawa, une des plus grandes universités de l’Ontario, les évaluations de cours impliquent quelques 6 000 cours et plus de 43 000 étudiants chaque année. Plus d’un million de feuilles de papier, 20 000 enveloppes et le soutien de quelques douzaines d’employés sont nécessaires à la tâche. Pour étudier les répercussions de la transition vers un système d’évaluation en ligne, l’étude présentée visait à comparer les taux de participation et les résultats d’évaluation d’un système en ligne et d’un système manuel (papier). Les résultats d’un groupe pilote composé de 10 417 étudiants, inscrits à 318 cours, suggèrent une diminution des taux de participation moyens de 12 à 15 % avec l’utilisation du système en ligne, mais aucune différence significative dans les résultats d’évaluation n’a été observée. Par ailleurs, professeurs et étudiants ont émis des commentaires positifs sur le système en ligne, mais ont suggéré de maintenir une courte période en classe pour que les étudiants remplissent l’évaluation de leur cours en ligne

Engaging in Enhancement: Implications of Participatory Approaches in Higher Education Quality Assurance

Stemming from increased levels of participation and diversity of the student base and from growing scrutiny on the quality of university degrees, governments have begun establishing mechanisms to monitor and support quality in higher education. Faced with administrative quality assurance structures, academics often complain that little is discussed in terms of collaborative effort toward program opportunities, enhancement, and growth and that focus is solely on accountability. This paper examines the viability of participatory approaches, pulled from the field of evaluation, as a way of leading to a more meaningful enhancement-oriented quality assurance process and creating common ground across the differing interests of external and internal stakeholders to quality in higher education

Examining the Use of Lecture Capture Technology: Implications for Teaching and Learning

This study sought to provide a better understanding of how lecture capture technology is used by students and how its use is related to student satisfaction, attendance, and academic performance. Using a mixed method design with both quantitative and qualitative methods to collect data, instruments included a student questionnaire, interviews and focus groups, lecture capture usage statistics, and grades. Results showed that 63% of students were satisfied with lecture capture and 75% of students indicated that it had facilitated their learning. Students primarily used the recordings to learn what they had missed while in class (79%) or because they were absent (72%). 70% of students reported having watched at least 50% of the recorded material (27% watched all the material), and only 8% of students did not view any recordings. Student satisfaction had a significant positive relationship with the number of lectures viewed. In regards to attendance, the self-reported data from students indicated that 61% of students did not miss classes (none or just one class). Students with the greatest number of missed classes viewed the recordings more frequently. As for student achievement, 68% of students indicated that lecture capture helped them to achieve better grades. Students with lower course marks accessed the recordings more frequently than those with higher marks. Instructor perceptions were that lecture capture predominately helped average to below average students achieve slightly better marks, but had less of an impact on the grades for particularly low and high achieving students. Cette étude avait pour but de fournir une meilleure compréhension de la manière dont la capture de cours en vidéo est utilisée par les étudiants et comment son utilisation est reliée à la satisfaction des étudiants, à leur assiduité et à leurs résultats académiques. Grâce à un concept de méthodes mixtes comprenant des méthodes quantitatives et qualitatives pour recueillir les données, les instruments incluaient un questionnaire à remplir par les étudiants, des entrevues et des groupes de discussion, des statistiques sur l’emploi de la capture de cours, ainsi que des notes. Les résultats ont indiqué que 63 % des étudiants étaient satisfaits de la capture de cours et 75 % d’entre eux ont pensé que cette méthode avait favorisé leur apprentissage. Les étudiants ont principalement utilisé les enregistrements pour apprendre ce qu’ils avaient manqué quand ils étaient en classe (79 %) ou parce qu’ils étaient absents (72 %). Soixante-dix pour cent des étudiants ont indiqué qu’ils avaient regardé au moins 50 % des enregistrements (27 % avaient regardé toutes les vidéos) et seulement 8 % des étudiants n’avaient regardé aucune vidéo. La satisfaction des étudiants a eu une incidence positive importante en fonction du nombre de vidéos visionnées. En ce qui concerne l’assiduité, les données auto-déclarées par les étudiants ont indiqué que 61 % des étudiants n’avaient pas manqué de classes (aucune absence ou seulement une absence). Les étudiants qui avaient le plus grand nombre d’absences avaient regardé les vidéos plus fréquemment. En ce qui concerne les résultats des étudiants, 68 % d’entre eux ont indiqué que la capture de cours les avait aidés à obtenir de meilleures notes. Les étudiants qui avaient obtenu les notes de cours les plus basses avaient regardé les vidéos plus fréquemment que ceux qui avaient obtenu des notes plus élevées. Les instructeurs ont déclaré que la capture de cours en vidéo avait surtout aidé les étudiants de niveau moyen ou inférieur à la moyenne à obtenir des notes un peu meilleures, mais qu’elle avait eu un effet moins important sur les notes des étudiants très peu performants ou sur celles des étudiants très performants