Une approche computationnelle de la complexité linguistique par le traitement automatique du langage naturel et l'oculométrie

Le manque d'intégration des sciences cognitives et de la psychométrie est régulièrement déploré – et ignoré. En mesure et évaluation de la lecture, une manifestation de ce problème est l’évitement théorique concernant les sources de difficulté linguistiques et les processus cognitifs associés à la compréhension de texte. Pour faciliter le rapprochement souhaité entre sciences cognitives et psychométrie, nous proposons d’adopter une approche computationnelle. En considérant les procédures informatiques comme des représentations simplifiées et partielles de théories cognitivistes, une approche computationnelle facilite l’intégration d’éléments théoriques en psychométrie, ainsi que l’élaboration de théories en psychologie cognitive. La présente thèse étudie la contribution d’une approche computationnelle à la mesure de deux facettes de la complexité linguistique, abordées à travers des perspectives complémentaires. La complexité intrinsèque du texte est abordée du point de vue du traitement automatique du langage naturel, avec pour objectif d'identifier et de mesurer les attributs (caractéristiques mesurables) qui modélisent le mieux la difficulté du texte. L'article 1 présente ALSI (pour Analyseur Lexico-syntaxique intégré), un nouvel outil de traitement automatisé du langage naturel qui extrait une variété d'attributs linguistiques, principalement issus de la recherche en psycholinguistique et en linguistique computationnelle. Nous évaluons ensuite le potentiel des attributs pour estimer la difficulté du texte. L'article 2 emploie ALSI et des méthodes d’apprentissage statistique pour estimer la difficulté de textes scolaires québécois. Dans le second volet de la thèse, la complexité associée aux processus de lecture est abordée sous l'angle de l'oculométrie, qui permet de faire des inférences quant à la charge cognitive et aux stratégies d’allocation de l’attention visuelle en lecture. L'article 3 décrit une méthodologie d'analyse des enregistrements d’oculométrie mobile à l'aide de techniques de vision par ordinateur (une branche de l'intelligence artificielle); cette méthodologie est ensuite testée sur des données de simulation. L'article 4 déploie la même méthodologie dans le cadre d’une expérience pilote d’oculométrie comparant les processus de lecture de novices et d'experts répondant à un test de compréhension du texte argumentatif. Dans l’ensemble, nos travaux montrent qu’il est possible d’obtenir des résultats probants en combinant des apports théoriques à une approche computationnelle mobilisant des techniques d’apprentissage statistique. Les outils créés ou perfectionnés dans le cadre de cette thèse constituent une avancée significative dans le développement des technologies numériques en mesure et évaluation de la lecture, avec des retombées à anticiper en contexte scolaire comme en recherche.The lack of integration of cognitive science and psychometrics is commonly deplored - and ignored. In the assessment of reading, one manifestation of this problem is a theoretical avoidance regarding sources of text difficulty and cognitive processes underlying text comprehension. To facilitate the desired integration of cognitive science and psychometrics, we adopt a computational approach. By considering computational procedures as simplified and partial representations of cognitivist models, a computational approach facilitates the integration of theoretical elements in psychometrics, as well as the development of theories in cognitive psychology. This thesis studies the contribution of a computational perspective to the measurement of two facets of linguistic complexity, using complementary perspectives. Intrinsic text complexity is approached from the perspective of natural language processing, with the goal of identifying and measuring text features that best model text difficulty. Paper 1 introduces ISLA (Integrated Lexico-Syntactic Analyzer), a new natural language processing tool that extracts a variety of linguistic features from French text, primarily taken from research in psycholinguistics and computational linguistics. We then evaluate the features’ potential to estimate text difficulty. Paper 2 uses ISLA and statistical learning methods to estimate difficulty of texts used in primary and secondary education in Quebec. In the second part of the thesis, complexity associated with reading processes is addressed using eye-tracking, which allows inferences to be made about cognitive load and visual attention allocation strategies in reading. Paper 3 describes a methodology for analyzing mobile eye-tracking recordings using computer vision techniques (a branch of artificial intelligence); this methodology is then tested on simulated data. Paper 4 deploys the same methodology in the context of an eye-tracking pilot experiment comparing reading processes in novices and experts during an argumentative text comprehension test. Overall, our work demonstrates that it is possible to obtain convincing results by combining theoretical contributions with a computational approach using statistical learning techniques. The tools created or perfected in the context of this thesis constitute a significant advance in the development of digital technologies for the measurement and evaluation of reading, with easy-to-identify applications in both academic and research contexts

Modularité massive ou construction sociale? : une analyse de l'approche psychoévolutionniste de Cosmides et Tooby

Ce mémoire se veut un examen épistémologique de la thèse psychoévolutionniste de Leda Cosmides et John Tooby, principalement en ce qui concerne la modularité massive. Nous avons tâché de voir si la modularité massive permet de rendre compte des processus mentaux complexes en nous penchant plus particulièrement sur le cas des émotions. Nous explorons d'abord la thèse de Cosmides et Tooby en la distinguant d'avec d'autres conceptions comme l'écologie béhaviorale et en expliquant le rôle particulier que jouent les émotions au sein de la théorie. Nous analysons ensuite la thèse de la modularité massive et les différents arguments théoriques ou empiriques qui l'appuient, et évaluons finalement des critiques de la modularité émises par certains philosophes, dont David Buller.In this thesis, we enquired about the philosophical and empirical foundations of the psycho-evolutionary model of Cosmides and Tooby, especially with regards their Massive Modularity Thesis (MMT). We wanted to determine whether the MMT can account for complex mental processes such as emotions. The thesis first gives a general explanation of evolutionary psychology (as opposed to behavioral ecology or sociobiology) then evaluates different lines of argument for MMT. We then turn to the philosophical criticism of MMT by David Buller

Des ateliers de lecture et d'écriture comme mesure d'aide à la réussite des cours de philosophie

Comprend des références bibliographiquesAu Cégep de Saint-Jérôme, le centre d’aide du Département de philosophie a longtemps fonctionné sur la base d’aide individuelle ponctuelle ou sous forme de tutorat. Avec le temps, les professeurs ont relevé certaines lacunes dans leur façon de faire, ce qui les a incités à revoir leurs pratiques en profondeur. Après réflexion et analyse, ils en sont venus à la mise en place d’ateliers de lecture de textes philosophiques et de rédaction en philosophie pour soutenir les étudiants dans la compréhension des textes à l’étude, ceci étant préalable à la rédaction de textes argumentatifs et donc à la réussite des cours de philosophie. Dans cet article, les auteurs présentent succinctement ce nouveau mode d’intervention qu’ils ont expérimenté en mettant de l’avant ce qui leur semble constituer une nette amélioration par rapport aux pratiques antérieures. Cette mesure d’aide pourrait s’étendre à d’autres disciplines exigeant, de la part des étudiants, la lecture de textes de nature argumentative et la rédaction de textes de genre scientifique

Identifying linguistic markers of French-speaking teenagers with developmental language disorder : which tasks matter?

Purpose:This research aimed to identify reliable tasks discriminating French-speaking adolescents with developmental language disorder (DLD) from theirpeers with typical language (TL) and to assess which linguistic domains repre-sent areas of particular weakness in DLD. Unlike English, morphosyntax has notbeen identified as a special area of weakness when compared with lexicose-mantics in French preschoolers with DLD. Since there is evidence that subject–verb number agreement is consolidated in later childhood, one might expectmorphosyntax to be a particular weakness and marker of French DLD only in(pre)adolescence.Method:We administered 20 subtasks that assessed linguistic and phonolo-gical working memory skills of two groups: 17 adolescents clinically identifiedas having DLD (M= 14.1 years) and 20 (pre)teens with TL (M= 12.2 years).Using robust statistics that are less affected by outliers, we selected the mostdiscriminating subtasks between our groups, calculated their optimal cutoffscore, and derived diagnostic accuracy statistics. We combined these subtasksin a multivariable model to identify which subtasks contributed the most to theidentification of DLD.Results:Seven subtasks were selected as discriminating between our groups,and three showed outstanding diagnostic accuracy: Recalling Sentences, a multi-word task assessing lexicosemantic skills, and a subject–verb number agreementproduction task. When combined, we found that the latter contributed the mostto our multivariable model.Conclusion:This study provides evidence that the most relevant markers toidentify DLD in French teenagers are tasks assessing lexicosemantics and mor-phosyntactic domains, and that morphosyntax should be considered an impor-tant area of weakness in French-speaking teenagers with DLD

ALSI : un nouvel outil d’analyse automatisée de la complexité linguistique pour le français québécois

Estimer la complexité linguistique est un aspect important de la mesure et de l’évaluation de l’éducation qui peut servir, par exemple, à contrôler la variance indésirable attribuable à la langue ou à fournir aux élèves des textes propices à l’apprentissage. Des techniques de traitement automatique des langues permettent d’extraire différents attributs (features) qui reflètent la complexité du vocabulaire et de la structure des phrases. Dans cet article, nous présentons un nouvel outil appelé ALSI (Analyseur Lexico-Syntaxique Intégré). Nous résumons le fonctionnement de l’outil et présentons les types d’attributs qu’il peut extraire. Nous appliquons ensuite ALSI à 600 textes utilisés dans les écoles primaires et secondaires du Québec et analysons les corrélations entre les attributs et le niveau scolaire associé au texte. Les résultats montrent le potentiel d’ALSI pour la modélisation de la complexité des textes français.Estimating language complexity is an important aspect of educational measurement and assessment that can be used, for instance, to control unwanted variance due to language, or to provide students with texts that are conducive to learning. Automatic language processing techniques can be used to extract various linguistic features that reflect the complexity of vocabulary and sentence structure. In this paper, we present a new tool called ILSA (Integrated Lexico-Syntactic Analyzer), which we developed for research and educational applications. We summarize how the tool works and present the types of attributes it can extract. We then apply ALSI to 600 texts used in Quebec elementary and secondary schools and analyze the correlations between the attributes and the school grade associated with the text. The results show the potential of ALSI for modeling the complexity of French texts.Estimar a complexidade linguística é um aspeto importante da medição e da avaliação educacional que pode ser usado, por exemplo, para controlar a variação indesejada devido à linguagem ou para fornecer aos alunos textos que conduzam à aprendizagem. As técnicas de processamento automático de linguagem permitem extrair diferentes atributos (features) que refletem a complexidade do vocabulário e a estrutura das frases. Neste artigo, apresentamos uma nova ferramenta chamada ALSI (Analisador Léxico-Sintético Integrado). Resumimos o funcionamento da ferramenta e apresentamos os tipos de atributos que ela pode extrair. Em seguida, aplicamos o ALSI a 600 textos usados em escolas primárias e secundárias no Québec e analisamos as correlações entre os atributos e o ano letivo associado ao texto. Os resultados mostram o potencial do ALSI para a modelização da complexidade dos textos em francês

ILSA: an automated language complexity analysis tool for French

Estimating language complexity is an important aspect of educational measurement and assessment that can be used, for instance, to control for unwanted variance due to language, or to provide students with texts that are conducive to learning. Automatic language processing techniques can be used to extract various linguistic features that reflect the complexity of vocabulary and sentence structure. In this paper, we present a new tool called ILSA (Integrated Lexico-Syntactic Analyzer), which we developed for research and educational applications. We summarize how the tool works and present the types of attributes it can extract. We then apply ILSA to 600 texts used in Quebec elementary and secondary schools and analyze the correlations between the attributes and the school grade associated with the text. The results show the potential of ILSA for modeling the complexity of French texts.Estimer la complexité linguistique est un aspect important de la mesure et de l’évaluation de l’éducation qui peut servir, par exemple, à contrôler la variance indésirable attribuable à la langue ou à fournir aux élèves des textes propices à l’apprentissage. Des techniques de traitement automatique des langues permettent d’extraire différents attributs (features) qui reflètent la complexité du vocabulaire et de la structure des phrases. Dans cet article, nous présentons un nouvel outil appelé ALSI (Analyseur Lexico-Syntaxique Intégré). Nous résumons le fonctionnement de l’outil et présentons les types d’attributs qu’il peut extraire. Nous appliquons ensuite ALSI à 600 textes utilisés dans les écoles primaires et secondaires du Québec et analysons les corrélations entre les attributs et le niveau scolaire associé au texte. Les résultats montrent le potentiel d’ALSI pour la modélisation de la complexité des textes français.Estimar a complexidade linguística é um aspeto importante da medição e da avaliação educacional que pode ser usado, por exemplo, para controlar a variação indesejada devido à linguagem ou para fornecer aos alunos textos que conduzam à aprendizagem. As técnicas de processamento automático de linguagem permitem extrair diferentes atributos (features) que refletem a complexidade do vocabulário e a estrutura das frases. Neste artigo, apresentamos uma nova ferramenta chamada ALSI (Analisador Léxico-Sintético Integrado). Resumimos o funcionamento da ferramenta e apresentamos os tipos de atributos que ela pode extrair. Em seguida, aplicamos o ALSI a 600 textos usados em escolas primárias e secundárias no Québec e analisamos as correlações entre os atributos e o ano letivo associado ao texto. Os resultados mostram o potencial do ALSI para a modelização da complexidade dos textos em francês

L'évaluation en philosophie au collégial est-elle une loterie?

Affiche présentée dans le cadre du Colloque de l'ARC, «La relève scientifique et la recherche collégiale : pratiques inspirantes au regard des chercheuses et chercheurs, et enjeux spécifiques à la formation des étudiantes et étudiants», dans le cadre du 84e Congrès de l'Acfas, Université du Québec à Montréal, Montréal, le 10 mai 2016.La formation collégiale dans le réseau francophone implique des cours de philosophie obligatoires. Bien que des principes directeurs soient en place concernant l'équité et la qualité des évaluations au cégep, il est raisonnable de se demander si les résultats aux évaluations en philosophie représentent fidèlement l’atteinte des compétences ministérielles ou s’ils relèvent trop de la subjectivité de l’enseignant, ce qui pourrait créer des situations d'injustice envers les élèves. Une inquiétude similaire a en effet été formulée au sujet des épreuves de philosophie du bac français. Notre affiche présente les résultats d'analyses quantitatives visant à tracer un portrait de l’attribution des notes en philosophie entre 2008 et 2015 dans un cégep de la grande région de Montréal, à partir de données sur l’ensemble des cours et incluant, pour chaque inscription à un cours (N=442834), la note finale obtenue ainsi que des informations contextuelles sur l’élève. Nous avons comparé les notes obtenues dans les divers cours de philosophie entre elles, avec celles obtenues dans les autres matières et avec la moyenne générale au secondaire. Différentes variables incluses dans la base de données, telles que l'enseignant, l’âge de l’élève et le programme d'études, sont aussi prises en considération. Les résultats indiquent que, contrairement aux craintes formulées initialement, les enseignants de philosophie attribuent des notes qui semblent refléter les capacités de l’élève

Entre conservatisme et rectitude politique en enseignement supérieur : un commentaire critique sur The coddling of the American mind

Le livre The coddling of the American mind, par Greg Lukianoff et Jonathan Haidt, a généré beaucoup d’intérêt depuis sa sortie. Nous en proposons une recension critique qui situe d’abord l’ouvrage dans son contexte sociopolitique, puis en résume les idées centrales. Nous présentons ensuite une critique qui s’est concentrée sur les choix et fondements théoriques qui sous-tendent l’ouvrage, puis en évaluons une des propositions centrales, celle d’instaurer un système de discrimination positive envers les professeur⋅e⋅s ayant un alignement politique conservateur. Enfin, nous revenons sur les aspects du livre que nous avons trouvés intéressants et discutons de son utilisation potentielle en classe.The coddling of the American mind, by Greg Lukianoff and Jonathan Haidt, has generated a lot of interest since its release. We offer a critical review that first places the book in its socio-political context and then summarizes its central ideas. We then present a critique that focuses on the underlying theoretical choices and foundations of the book, to evaluate one of its central propositions, which would be to establish a system of affirmative action for conservative professors. Finally, we outline the aspects of the book that we found interesting and discuss its potential use in the classroom.El libro The coddling of the American mind, por Greg Lukianoff y Jonathan Haidt, ha generado mucho interés desde su publicación. Proponemos una revisión crítica de éste que, en primer lugar, sitúa la obra en su contexto sociopolítico y, posteriormente, resume las ideas centrales. A continuación, presentamos una crítica que se concentra sobre las elecciones y fundamentos teóricos subyacentes a la obra, lo que nos lleva a evaluar una de sus proposiciones centrales: instaurar un sistema de discriminación positiva hacia los profesores que tienen un alineamiento político conservador. Finalmente, volvemos sobre los aspectos del libro que nos parecen interesantes, discutiendo su utilización potencial en clase

L’impact du stress sur la perception de la philosophie

Comprend des références bibliographiques.Depuis plus d’une vingtaine d’années, la place des cours de formation générale dans les programmes techniques au collégial est souvent remise en question. Desautels (2004) a montré que la perception qu’ont les élèves du cours est la variable la plus importante en regard de l’intérêt, la satisfaction et la réussite en philosophie. Dans les programmes de techniques humaines du Cégep de Saint-Jérôme, les cours de philosophie sont particulièrement échoués. L’objectif de la présente étude était de documenter le lien entre la perception des cours de philosophie et le stress généré par ceux-ci. Les participants (N=303) provenaient de la technique d’éducation à l’enfance et de la technique d’intervention en loisir du Cégep de Saint-Jérôme. Parmi eux, 32,6 % exprimaient ne pas être stressés par les cours tandis que 67,4 % se disaient stressés. Une échelle de 9 items (Likert en 4 points) a été utilisée pour calculer un score de perception de la philosophie. Le groupe en accord avec le fait d’être stressé par la philosophie se distinguait des groupes en faible accord, en faible désaccord et en désaccord sur le plan de la moyenne à ce score (F(3,143) = 12,2; p < 0,001; R2 = 0,20). En outre, le niveau de stress était associé à la compréhension de la matière (χ2(3, N=303) = 26,69; p < 0,001; rτ= -0,39). Ces résultats laissent croire que de tenir compte du ressenti des étudiants concernant la philosophie pourrait améliorer leur expérience avec le cours, et donc possiblement leur réussite