Predicting the relevance of distributional semantic similarity with contextual information

International audienceUsing distributional analysis methods to compute semantic proximity links between words has become commonplace in NLP. The resulting relations are often noisy or difficult to interpret in general. This paper focuses on the issues of evaluating a distributional resource and filtering the relations it contains, but instead of considering it in abstracto, we focus on pairs of words in context. In a discourse , we are interested in knowing if the semantic link between two items is a by-product of textual coherence or is irrelevant. We first set up a human annotation of semantic links with or without contex-tual information to show the importance of the textual context in evaluating the relevance of semantic similarity, and to assess the prevalence of actual semantic relations between word tokens. We then built an experiment to automatically predict this relevance , evaluated on the reliable reference data set which was the outcome of the first annotation. We show that in-document information greatly improve the prediction made by the similarity level alone

Etude des relations sémantiques dans les reformulations de requêtes sous la loupe de l'analyse distributionnelle

International audienceStudying semantic relations in query reformulation under the scope of distributional analysis}{ In this paper, we compare a distributional resource built from a corpus of humanities and social sciences academic papers to substitutions recorded in user query logs covering the same corpus. We observed a good overlap between the two datasets (59%). These results show that distributional semantics is a fitting tool to analyze the wide variety of semantic relations involved in query reformulation. Moreover, the method that we introduce may be used for distributional resources evaluation, and is better fitted to this task than comparison with gold standards.Dans cet article, nous confrontons une base distributionnelle construite à partir d'un corpus d'articles de revues de sciences humaines à des substitutions observées dans les journaux de requêtes du moteur interrogeant ce même corpus ; le recouvrement entre les deux types de données est important (59%). Ces résultats contribuent à deux pistes de recherche : d'une part nous montrons l'adéquation de la sémantique distributionnelle pour appréhender une large palette de relations sémantiques en jeu dans les reformulations de requêtes ; d'autre part, nous introduisons des données pouvant être exploitées pour l'évaluation de ressources distributionnelles de manière bien plus satisfaisante que par la comparaison avec des "gold standards" tels que des dictionnaires de synonymes

Évaluer et améliorer une ressource distributionnelle : protocole d'annotation de liens sémantiques en contexte

National audienceL’application de méthodes d’analyse distributionnelle pour calculer des liens de proximité sémantique entre les mots est devenue courante en TAL. Toutefois, il reste encore beaucoup à faire pour mieux comprendre la nature de la proximité sémantique qui est calculée par ces méthodes. Cet article est consacré à la question de l’évaluation d’une ressource distributionnelle, et de son amélioration ; en effet, nous envisageons la mise en place d’une procédure d’évaluation comme une première étape vers la caractérisation de la ressource et vers son ajustement, c’est-à-dire la réduction du bruit en faveur de paires de voisins distributionnels exhibant une relation sémantique pertinente. Nous proposons un protocole d’annotation en contexte des voisins distributionnels, qui nous permet de constituer un ensemble fiable de données de référence (couples de voisins jugés pertinents ou non par les annotateurs). Les données produites sont analysées, puis exploitées pour entraîner un système de catégorisation automatique des liens de voisinage distributionnel, qui prend en compte une large gamme d’indices et permet un filtrage efficace de la ressource considérée

Une évaluation de l'impact des types de textes sur la tâche de segmentation thématique

International audienceThis paper aims to contribute to a better definition of the requirements of the text segmentation task, by stressing the need for taking into account the types of texts that can be appropriately considered. Our hypothesis is that while TS is indeed relevant to analyse texts with a thematic organisation, this task is ill-fitted to deal with other modes of text organisation (temporal, rhetorical, etc.). By comparing the performance of a TS system on two corpora, with either a "strong" or a "weak" thematic organisation, we show that TS is sensitive to text types.Cette étude a pour but de contribuer à la définition des objectifs de la segmentation thématique (ST), en incitant à prendre en considération le paramètre du type de textes dans cette tâche. Notre hypothèse est que, si la ST est certes pertinente pour traiter certains textes dont l'organisation est bien thématique, elle n'est pas adaptée à la prise en compte d'autres modes d'organisation (temporelle, rhétorique), et ne peut pas être appliquée sans précaution à des textes tout-venants. En comparant les performances d'un système de ST sur deux corpus, à organisation thématique "forte" et "faible", nous montrons que cette tâche est effectivement sensible à la nature des textes

La recherche scientifique dans les écoles vétérinaires françaises : développement historique et situation actuelle (2000-2010) vue par les indices bibliométriques

La recherche scientifique a joué un rôle décisif dans l’évolution de la profession vétérinaire. Les premiers vétérinaires au 18ème siècle sont considérés comme de simples techniciens à l’image des « empiriques » avec qui ils restent longtemps en concurrence. C’est en participant à l’épopée pasteurienne que les vétérinaires ont su s’imposer en tant qu’élite scientifique, notamment en assainissant les campagnes grâce à la vaccination à l’élaboration de laquelle ils ont participé. Plus tard au cours du 20ème siècle, plusieurs facteurs conduisent à un transfert de la recherche vétérinaire vers les instituts spécialisés de recherche, entraînant une importante perte de vitesse de la recherche vétérinaire conduite dans les ENV. Les années 1990-2000 ont permis de relancer la recherche au sein des ENV notamment grâce aux réformes de l’Enseignement supérieur agronome et vétérinaire. La participation des vétérinaires à une recherche de pointe est la condition sine qua non pour maintenir le niveau scientifique de l’enseignement et de la profession. Afin de faire un état des lieux de la recherche menée dans les ENV et d’évaluer l’impact de ces changements sur la production des enseignant-chercheurs des ENV, nous avons réalisé une étude de la production scientifique des ENV entre 2000 et 2010. Nous nous sommes servis des indicateurs bibliométriques fournis par les bases de données. Des propositions en vue de poursuivre la rénovation de la recherche menée dans les Ecoles vétérinaires écoulent de cette étude

Les éléments attributifs en position initiale en allemand et leurs équivalents en français – étude de corpus contrastive

Les structures attributives en tête d’énoncé sont courantes et variées en allemand. Si une projection d’éléments en fonction d’attribut n’est pas envisageable telle quelle en français, compte tenu des contraintes syntaxiques et positionnelles propres à cette langue, la comparaison entreprise nous a permis de constater que l’on peut malgré tout trouver en position initiale les mêmes contenus sémantiques remplissant des fonctions textuelles similaires, mais présentant d’importantes différences avec les structures allemandes – différences en termes de fréquence et surtout en termes de fonction (syntaxique).Attributive structures in sentence initial position are both common and varied in German. Although preposing attributive elements is not possible in French because of syntactic and word order constraints specific to the language, our comparison shows that it is however possible to find in the initial position the same semantic contents that have similar textual functions but are significantly different from the German structures with regard to frequency and especially in terms of syntactic function

Les éléments attributifs en position initiale en allemand et leurs équivalents en français – étude de corpus contrastive

Les structures attributives en tête d’énoncé sont courantes et variées en allemand. Si une projection d’éléments en fonction d’attribut n’est pas envisageable telle quelle en français, compte tenu des contraintes syntaxiques et positionnelles propres à cette langue, la comparaison entreprise nous a permis de constater que l’on peut malgré tout trouver en position initiale les mêmes contenus sémantiques remplissant des fonctions textuelles similaires, mais présentant d’importantes différences avec les structures allemandes – différences en termes de fréquence et surtout en termes de fonction (syntaxique).Attributive structures in sentence initial position are both common and varied in German. Although preposing attributive elements is not possible in French because of syntactic and word order constraints specific to the language, our comparison shows that it is however possible to find in the initial position the same semantic contents that have similar textual functions but are significantly different from the German structures with regard to frequency and especially in terms of syntactic function

A bibliometric study of scientific research in the french veterinary schools from 2000 to 2010

L’objet de cet article a été d’évaluer l’impact de la réforme du statut des enseignants-chercheurs de 1992 sur le bilan scientifique des Écoles vétérinaires françaises. Pour cela, un bilan quantitatif des recherches menées dans les ENV a été établi. À partir de la base de données ‘Web of Knowledge’, les performances collectives et individuelles ont été quantifiées par différents indices bibliométriques dont le h-index. Il a été conclu que la réforme de 1992 a en grande partie atteint ses objectifsL’objet de cet article a été d’évaluer l’impact de la réforme du statut des enseignants-chercheurs de 1992 sur le bilan scientifique des Écoles vétérinaires françaises. Pour cela, un bilan quantitatif des recherches menées dans les ENV a été établi. À partir de la base de données ‘Web of Knowledge’, les performances collectives et individuelles ont été quantifiées par différents indices bibliométriques dont le h-index. Il a été conclu que la réforme de 1992 a en grande partie atteint ses objectif

Recruiting the "Heavy-Using Loyalists of Tomorrow": An Analysis of the Aims, Effects and Mechanisms of Alcohol Advertising, Based on Advertising Industry Evaluations

Restricting alcohol advertising and marketing is a cost-effective intervention for reducing alcohol harms. However, the alcohol industry maintains that advertising does not affect consumption, claiming that its purpose is to help consumers choose brands, it is not aimed at young people, it only promotes “responsible consumption”, and any relationships with consumption are not causal. We reviewed 39 case studies (1981–2016) published by the advertising industry, which evaluate the effects of alcohol advertising campaigns. We used these to examine these industry claims. 30/39 (77%) of the case studies mentioned increasing/maintaining market share as an objective, or used this to assess the effectiveness of advertising campaigns. Most (25/39, 64%) found that campaigns increased consumption-related outcomes. Some campaigns targeted women, and heavy drinkers (e.g., Stella Artois lager, Famous Grouse whisky). Campaigns often (13/39, 33%) targeted younger drinkers. These data show that advertising does influence market share. Other effects reported in the case studies include changing the consumer profile towards: younger drinkers, women, new/lapsed drinkers, and heavy drinkers. They also present evidence of a causal relationship between advertising and consumption. In conclusion, this analysis, based on industry data, presents significant new evidence on (i) the effects of alcohol advertising on consumption-related outcomes, and (ii) the mechanisms by which it achieves those effects