On Out-of-Sample Statistics for Time-Series

This paper studies an out-of-sample statistic for time-series prediction that is analogous to the widely used R2 in-sample statistic. We propose and study methods to estimate the variance of this out-of-sample statistic. We suggest that the out-of-sample statistic is more robust to distributional and asymptotic assumptions behind many tests for in-sample statistics. Furthermore we argue that it may be more important in some cases to choose a model that generalizes as well as possible rather than choose the parameters that are closest to the true parameters. Comparative experiments are performed on a financial time-series (daily and monthly returns of the TSE300 index). The experiments are performed for varying prediction horizons and we study the relation between predictibility (out-of-sample R2), variability of the out-of-sample R2 statistic, and the prediction horizon. Cet article étudie une statistique hors-échantillon pour la prédiction de séries temporelles qui est analogue à la très utilisée statistique R2 de l'ensemble d'entraînement (in-sample). Nous proposons et étudions une méthode qui estime la variance de cette statistique hors-échantillon. Nous suggérons que la statistique hors-échantillon est plus robuste aux hypothèses distributionnelles et asymptotiques pour plusieurs tests faits pour les statistiques sur l'ensemble d'entraînement (in-sample). De plus, nous affirmons qu'il peut être plus important, dans certains cas, de choisir un modèle qui généralise le mieux possible plutôt que de choisir les paramètres qui sont le plus proches des vrais paramètres. Des expériences comparatives furent réalisées sur des séries financières (rendements journaliers et mensuels de l'indice du TSE300). Les expériences réalisées pour plusieurs horizons de prédictions, et nous étudions la relation entre la prédictibilité (hors-échantillon), la variabilité de la statistique R2 hors-échantillon, et l'horizon de prédiction.Out-of-sample statistic, time series, TSE300, Statistique hors-échantillon, séries financières, TSE300

Inference for the Generalization Error

We perform a theoretical investigation of the variance of the cross-validation estimate of the generalization error that takes into account the variability due to the choice of training sets and test examples. This allows us to propose two new estimators of this variance. We show, via simulations, that these new statistics perform well relative to the statistics considered in Dietterich (1998). In particular, tests of hypothesis based on these don't tend to be too liberal like other tests currently available, and have good power. Nous considérons l'estimation par validation croisée de l'erreur de généralisation. Nous effectuons une étude théorique de la variance de ect estimateur en tenant compte de la variabilité due au choix des ensembles d'entraînement et des exemples de test. Cela nous permet de proposer deux nouveaux estimateurs de cette variance. Nous montrons, via des simulations, que ces nouvelles statistiques performent bien par rapport aux statistiques considérées dans Dietterich (1998). En particulier, ces nouvelles statistiques se démarquent des autres présentement utilisées par le fait qu'elles mènent à des tests d'hypothèses qui sont puissants sans avoir tendance à être trop libéraux.Generalization error, cross-validation, variance estimation, hypothesis tests, size, power, Erreur de généralisation, validation croisée, estimation de la variance, test d'hypothèses, niveau, puissance

Using COTS Search Engines and Custom Query Strategies at CLEF

This paper presents a system for bilingual information retrieval using commercial off-the-shelf search engines (COTS). Several custom query construction, expansion and translation strategies are compared. We present the experiments and the corresponding results for the CLEF 2004 event

Incorporating Second-Order Functional Knowledge for Better Option Pricing

Incorporating prior knowledge of a particular task into the architecture of a learning algorithm can greatly improve generalization performance. We study here a case where we know that the function to be learned is non-decreasing in its two arguments and convex in one of them. For this purpose we propose a class of functions similar to multi-layer neural networks but (1) that has those properties, (2) is a universal approximator of continuous functions with these and other properties. We apply this new class of functions to the task of modeling the price of call options. Experiments show improvements on regressing the price of call options using the new types of function classes that incorporate the a priori constraints. Incorporer une connaissance a priori pour une tache particulière aux algorithmes d'apprentissage peut grandement améliorer leur performance en généralisation. Dans cet article, nous étudions un cas où nous savons que la fonction à apprendre est non-décroissante pour ses deux arguments, et convexe pour l'un d'entre eux. Pour ce cas particulier, nous proposons une classe de fonctions similaires aux réseaux de neurones multi-couches mais (1) avec les propriétés mentionnées plus haut, et (2) est un approximateur universel de fonctions continues avec ces propriétés et avec d'autres. Nous appliquons cette nouvelle classe de fonctions au problème de la modélisation du prix des options d'achat. Nos expériences montrent une amélioration pour la régression sur ces prix d'options d'achat lorsque nous utilisons la nouvelle classe de fonctions qui incorporent les contraintes a priori.Prior knowledge, learning algorithm, universal approximator, call options, Connaissance a priori, algorithme d'apprentissage, approximateur universel, options d'achat

Les victimes d’abus sexuels confrontées à la souffrance et à la violence de la Passion

Les croyances religieuses offrent en principe des ressources pour faire face aux événements traumatisants, mais il y a aussi des cas où elle en accroît le traumatisme ou en retarde la résolution. L’article rend compte de l’expérience de victimes d’abus sexuels durant l’enfance face à la Passion de Jésus. La réflexion s’organise autour des pôles de l’identification et de l’imitation de la figure de Jésus. Non seulement le discours traditionnel chrétien peut-il s’avérer délétère pour les victimes, mais les nombreuses approches critiques développées au vingtième siècle s’avèrent fréquemment insuffisantes pour les victimes. Il demeure donc impératif de développer une christologie qui refuse le statut de volonté divine à la souffrance et à la violence dont elle est souvent issue.Religious beliefs theoretically offer resources to help face traumatizing events, but they can also increase the trauma or delay its resolution. This article accounts for the experience of victims of childhood sexual abuse with respect to the Passion of Jesus. It is structured around the poles of identification with and imitation of the figure of Jesus. Not only can traditional Christian discourse prove to be harmful for the victims, but the many critical approaches developed during the twentieth century also frequently prove unsatisfactory for the victims. Thus, it remains crucial to develop a Christology that refuses the statute of divine will to suffering and to the violence from which it often results

Evaluating manufacturing flexibility driven by learning

Thesis (S.M. in Technology and Policy)--Massachusetts Institute of Technology, Engineering Systems Division, 2009.This electronic version was submitted by the student author. The certified thesis is available in the Institute Archives and Special Collections.Page 126 blank. Cataloged from student submitted PDF version of thesis.Includes bibliographical references (p. 110-115).A defining feature of modern industry is operating in a context of nearly continuous technological change. Nevertheless, industrial decision-makers must select technologies and implement production strategies even in the face of known-to-be-incomplete information and environmental uncertainties. Further complicating the picture, the performance, including the economic performance, associated with novel technology options is likely to change over time. To address this problem, two approaches are possible: improving the quality of currently available information, and implementing flexible production strategies. The present work characterizes how the former approach impacts the valuation of the latter. First, a dynamic approach integrating learning curves and process-based cost modeling is used to examine learning in manufacturing, thus allowing decision-makers to incorporate information about expected technology evolution into their economic evaluations of technology. The approach is applied to an automotive assembly process, and quantifies the cost impacts of learning improvements in manufacturing time, downtime, and defect rates. Analysis can be used to focus learning activities on primary learning operational drivers, and to forecast cost improvements for a novel process. Flexibility strategies are often focused on capital-intensive processes, while labor-intensive processes are thought to be inherently flexible. The existence of learning effects, however, implies that labor flexibility has costs and, potentially, benefits in the context of uncertainty. A simple automotive assembly case is used here to illustrate the impact of manufacturing learning on labor flexibility and its economic value. A framework using cash-flow and decision tree models is introduced to quantify the costs and benefits of acquiring worker flexibility, and improve information available for strategic decision-making in labor-intensive systems. The front-end characterization of the technical drivers of learning provides insight into how the value of flexibility can be impacted at the operational level, enabling managers to prioritize improvements and minimize the costs of flexibility.by Marie-Claude Nadeau.S.M.in Technology and Polic

On Out-of-Sample Statistics for Time-Series

Cet article étudie une statistique hors-échantillon pour la prédiction de séries temporelles qui est analogue à la très utilisée statistique R2 de l'ensemble d'entraînement (in-sample). Nous proposons et étudions une méthode qui estime la variance de cette statistique hors-échantillon. Nous suggérons que la statistique hors-échantillon est plus robuste aux hypothèses distributionnelles et asymptotiques pour plusieurs tests faits pour les statistiques sur l'ensemble d'entraînement (in-sample). De plus, nous affirmons qu'il peut être plus important, dans certains cas, de choisir un modèle qui généralise le mieux possible plutôt que de choisir les paramètres qui sont le plus proches des vrais paramètres. Des expériences comparatives furent réalisées sur des séries financières (rendements journaliers et mensuels de l'indice du TSE300). Les expériences réalisées pour plusieurs horizons de prédictions, et nous étudions la relation entre la prédictibilité (hors-échantillon), la variabilité de la statistique R2 hors-échantillon, et l'horizon de prédiction.This paper studies an out-of-sample statistic for time-series prediction that is analogous to the widely used R2 in-sample statistic. We propose and study methods to estimate the variance of this out-of-sample statistic. We suggest that the out-of-sample statistic is more robust to distributional and asymptotic assumptions behind many tests for in-sample statistics. Furthermore we argue that it may be more important in some cases to choose a model that generalizes as well as possible rather than choose the parameters that are closest to the true parameters. Comparative experiments are performed on a financial time-series (daily and monthly returns of the TSE300 index). The experiments are performed for varying prediction horizons and we study the relation between predictibility (out-of-sample R2), variability of the out-of-sample R2 statistic, and the prediction horizon

The incidence and types of physical contact associated with body checking regulation experience in 13–14 year old Ice Hockey players

Background: Ice hockey has one of the highest sport participation and injury rates in youth in Canada. Body checking (BC) is the predominant mechanism of injury in leagues in which it is permitted. The objectives of this study were to determine whether the incidence and types of physical contact differ for Bantam players (aged 13–14 years) who were exposed to BC at Pee Wee level (aged 11–12 years) in Calgary, Alberta versus Bantam players who were not exposed to BC at Pee Wee level in Québec City, Québec. All teams were exposed to BC at bantam level; Methods: A cohort study was conducted in Québec City and Calgary. Sixteen games for Calgary and 15 for Québec City were randomly selected and analysed with a validated observation system to quantify five intensities of physical contact and to observe different types of physical contact such as slashing and holding; Results: A total of 5610 incidences of physical contact with the trunk and 3429 other types of physical contact were observed. Very light intensity trunk contact was more frequent in Calgary (adjusted incidence RR (ARR): 1.71; 95% CI: 1.28–2.29). Holding (ARR: 1.04; 95% CI: 1.02–1.07) and slashing (ARR: 1.38; 95% CI: 1.07–1.77) were more frequent in Calgary; Conclusion: Results suggest that players’ physical contacts differ between Bantam leagues in which BC was permitted at Pee Wee level and leagues in which it was not permitted until Bantam level. View Full-Tex

Enquête sur la valeur des activités offertes par École en réseau (EER) en 2020-2021 : Rapport de recherche

L'École en réseau (ÉER) oeuvre au Québec et offre depuis plusieurs années des activités en réseau destinées aux classes pour enrichir l'environnement d’apprentissage ainsi que des activités de développement professionnel. Afin de mieux cerner les besoins des classes et des enseignants ainsi que les retombées des activités proposées, une enquête par questionnaire a été conduite au printemps 2021 afin de dresser le bilan des activités de l’année scolaire 2020-2021 (activités de classes et activités de développement professionnel) et de documenter les retombées associées à cette participation. Une attention particulière a été accordée aux petites écoles, qui sont une part importante de la mission d’ÉÉR1. Ce sondage s’adressait aux enseignants du préscolaire, du primaire et du secondaire ou aux stagiaires s’étant inscrits à au moins une activité de l’ÉER en 2020-2021. Les objectifs du sondage étaient de : 1. Établir le portrait de l’utilisation des activités réalisées en 2020-2021; 2. Mesurer la perception des enseignants quant à l’offre de l’ÉER et évaluer les retombées associées à l’expérience vécue; 3. Faciliter la bonification future des activités de l’ÉER pour 2021-2022 afin de répondre davantage aux besoins des enseignants

Étude pilote de l’entretien motivationnel chez des personnes condamnées pour conduite avec facultés affaiblies

Dans cette étude pilote contrôlée et randomisée (N = 51), nous avons examiné l’impact d’une intervention brève, l’entretien motivationnel (EM, Motivational Interviewing), comparée à une simple séance d’information comme condition contrôle, chez des personnes condamnées pour conduite avec facultés affaiblies. Les participants devaient avoir un diagnostic actif d’abus ou de dépendance à l’alcool et devaient être recrutés en dehors des programmes officiels de traitement pour conducteurs avec facultés affaiblies de façon à tester l’EM chez des individus qui n’étaient pas nécessairement prêts à changer. Nous avons évalué le pourcentage de jours de forte consommation d’alcool (≥ 6 consommations standards d’alcool par jour), les résultats à l’AUDIT et l’utilisation de services après trois et six mois de suivi. Les résultats indiquent que l’exposition à l’EM a entraîné une réduction significativement plus grande du nombre de jours à forte consommation d’alcool et du nombre de visites à des professionnels de la santé après six mois de suivi. L’ampleur des effets observés est comparable à celle que l’on peut retrouver dans d’autres études employant l’EM avec différentes populations ayant un problème d’alcool. Quoique préliminaires, ces résultats suggèrent que l’emploi de l’EM pourrait être avantageux, même chez des individus qui ne sont pas engagés dans un processus de réhabilitation. Une étude plus approfondie du potentiel de l’EM conduisant directement à une amélioration de la conduite en état d’ébriété est clairement justifiée.A pilot randomized controlled trial (N = 51) investigated the impact of a brief intervention approach : Motivational Interviewing (MI), compared to a simple information session as a control condition, in offenders convicted of driving under the influence (DUI). Participants had a current diagnosis of alcohol abuse or dependence, and were recruited outside of mandated DUI remedial programs, in order to test MI in individuals who were not necessarily prepared to change. We evaluated the percentage of days of significant alcohol consumption (≥ 6 standard drinks a day), AUDIT scores and service utilization at three and six months follow-up. Results indicated that exposure to MI resulted in a significantly greater reduction in the number of days of significant alcohol consumption and fewer visits to health professionals at six months follow-up. Observed effect sizes were comparable to other studies of MI in different populations with alcohol problems. While preliminary, these results suggest that MI for DUI could have benefits, even in individuals who are not involved in a remedial process. A comprehensive study of MI’s potential in more directly improving drinking and driving outcomes is clearly warranted.En este estudio piloto controlado y aleatorio (N = 51), hemos examinado el impacto que produjo una breve intervención, la entrevista de motivación (EM, Motivational Interviewing), en personas condenadas por conducir con facultades debilitadas, comparándola a una simple sesión de información como condición de control. Los participantes debían tener un diagnóstico activo de abuso o de dependencia de alcohol y haber sido reclutados fuera de los programas oficiales de tratamiento para conductores con facultades debilitadas, con el objetivo de probar la entrevista de motivación en individuos que no estaban necesariamente preparados para cambiar. Hemos evaluado el porcentaje de días de fuerte consumo de alcohol (≥ 6 consumos regulares de alcohol por día), los resultados en la verificación y la utilización de los servicios luego de tres y seis meses de seguimiento. Los resultados indican que la exposición a la entrevista de motivación generó una reducción significativamente más importante de días de fuerte consumo de alcohol y de la cantidad de visitas a profesionales de la salud luego de seis meses de seguimiento. La amplitud de los efectos observados es comparable a la que se puede encontrar en otros estudios que emplean la entrevista de motivación con diferentes poblaciones que tienen un problema de alcohol. Si bien preliminares, estos resultados sugieren que el uso de las entrevistas de motivación podría ser ventajoso, incluso con individuos que no están comprometidos en un proceso de rehabilitación. Se justifica ampliamente un estudio más profundo de las posibilidades de la entrevista de motivación como medio para lograr directamente una mejoría en cuando a la conducción de vehículos en estado de ebriedad