DIRA system architecture : from acoustics to linguistics

This article describes the architecture and the operation of the DIRA (Integrated Dialogue and Automatic Recognition) continuous speech recognition system in its present stage of development . The DIRA system is a supervised multi-expert system . The supervisor dynamically arranges the tasks of its expert modules, which are each attached to one of the subdomains of the speech recognition problem, i .e. the acoustic/phonetic, the lexical-, the syntactic/semantic-, the prosodie- and ftnally the pragmatic domain . A blackboard serves as message interchange medium between these expert modules, as well as long-terra memory for the speech recognition process as a whole . The supervisor is an opportunistic planner : it reasons on the data present ai the blackboard and « calculâtes » the best strategy (a scheme for the activation the expert modules) to resolve the carrent problem . The operation of the individual expert modules is also addressed in this article : the APD's (Acoustic-Phonetic Decoders) with their knowledge bases represented as rules controlling the transitions in ATN's (Augmented Transition Networks), the linguistic analyzers using the same A TN concept and the principle of functional lexical grammars, the comprehensive analyzer founded on the principle of lexical priming and ftnally the rulebased prosodie analyzer . The operation of the speech recognition system is commented, while providing examples and test results .Cet article décrit l'architecture et le fonctionnement du système de reconnaissance de la parole DIRA (DIRA : Dialogue Intégré et Reconnaissance Automatique) dans son état actuel. Ce système est un système multi-experts supervisé . Le superviseur organise les tâches de ses experts qui sont attachés aux diverses sources de connaissances : acousticophonétiques, lexicales, syntaxico-sémantiques, prosodiques et pragmatiques . Le tableau noir sert de boîte à lettre pour la communication de messages entre les divers modules ainsi que de mémoire à long terme où toutes les hypothèses en cours de construction sont consignées . Le superviseur est un planificateur opportuniste : il raisonne sur les données présentes dans le tableau noir et « calcule » la stratégie la meilleure pour activer les experts. Les experts sont également décrits dans cet article : les DAP (décodages acoustico-phonétiques) avec leurs bases de connaissance représentées sous forme de règles qui contrôlent les transitions d'un ATN (Augmented Transition Network), les analyseurs linguistiques utilisant aussi le concept d'ATN compilé et la notion de grammaire lexicale fonctionnelle, la compréhension fondée essentiellement sur le phénomène d'amorçage sémantique et enfin l'analyseur prosodique à base de règles . La mise en ouvre de ce système est commentée à travers des exemples et les résultats de reconnaissance sont discutés

DÉCODAGE ACOUSTICO-PHONÉTIQUE EN MACRO-TRAITS ET TRAITS

Ce papier décrit l'avancement de notre système de DAP (Dicodage Acoustico-Phonétique) et l'évaluation des résultats acquis depuis les articles déjà présentés [1][2]. Ce module est inclus dans un projet plus vaste de reconnaissance multi-expert DIRA (Dialogue Intégré et Reconnaissance Automatique) - où chaque expert (expert lexical, expert syntaxico-sémantique, expert de compréhension, expert de décodage acoustico-phonétique) est piloté par un superviseur général - et il est composé de deux parties : ascendante et descendante. Cet article présente rapidement la paramétrisation du signal (fondamental, énergie, modèle d'oreille, indices acoustiques dérivés de ce modèle ...) et la segmentation du signal employée, puis plus en détail l'architecture générale du DAP ainsi que le formalisme et le type de connaissances utilisées. Les résultats après la phase de filtrage des résultats de localisation, nous montre les avantages de ce formalisme et les erreurs qu'il reste à corriger à l'issue de cette phase, ce qui indique le rôle prépondérant de la partie descendante du DAP et le type de règles la composant (phonologiques, contextuelle ...).This paper describes the progress of our APD (Acoustic Phonetic Decoding) module as well as the evaluation of the results obtained since the presentation of the articles [1] and [2]. This module is incorporated in the continuous speech recognition multi-expert system DIRA (Integrated Dialogue and Automatic Recognition), in which each expert module (lexical analyzer, syntactic/semantic analyzer, comprehensive analyzer and acoustic phonetic decoder) is guided by a general supervisor. Furthermore, it is composed of two distinctive steps : a bottom-up and a top-down steps. The following text briefly describes (a) the signal parametrization (pitch, energy, ear-model acoustic cues, etc ...) as well the signal segmentation applied and (b) in more details the system architecture of the APD module and (c) the formalisms and (d) knowledge types used. The results obtained after filtering (correction of erroneous localizations) phase will be used to demonstrate the advantages of those formalisms and type of localization errors that rest to be resolved. They will also demonstrate the importance of the top-down APD module

UDRIVE D51.1 eUropean naturalistic Driving and Riding for Infrastructure and Vehicle safety and Environment

The aim of Task 5.1 is to identify and select, among the outcomes of SP4, the results that are relevant to infer recommendations for measures improving road safety and sustainability. Due to time constraint, the analyses and the recommendations have been done in less time that it was planned at the beginning of the project. The key outcomes of the SP4 work with particular reference to crash risk, unsafe driving, and eco-driving will be studied and organized in terms of relevance to safety and sustainability policies and potential actions towards road users, vehicle and road. Recommendations have been developed to propose actions to stakeholders that can be implemented in the near future to increase safety and sustainability of road transport. This work integrates several reviews of different measures implemented previously in France, Germany, Netherlands and United Kingdom in terms of road safety measures. Then, the recommendations consider possible updates of existing measures and the development of new measures

Risk factors, crash causation and everyday driving

The UDRIVE Naturalistic Driving Study (NDS) is the first large scale European project to observe driving behaviour directly in the field. Its goal was to identify risky driving behaviour, understand what drivers commonly do (everyday driving), why and when driver’s attention is diverted from the road (distracted driving), focus on power two wheelers (PTW), pedestrians and cyclists as they are road users that are exceptionally exposed to crashes (vulnerable road users; VRU) and learn about the properties of sustainable driving behaviour (eco-driving). One of the advantages of this project is the unique opportunity to observe critical events while they occur, and with the help of the records, go back in time and investigate what may have caused them. Drivers from France (FR), Germany (GE), Poland (PL), Spain (SP), the Netherlands (NL), and the UK volunteered to participate in this study. Mechanics equipped their vehicles with cameras and sensors and thus created a fleet of 200 vehicles. This included 120 cars (FR, GE, PL, NL, and UK), 40 scooters (SP), and 40 trucks (NL). The data was collected in a box, referred to as data acquisition system (DAS), which was installed in the trunk of the vehicles. It recorded videos of seven to eight cameras, CAN, GPS and acceleration data. The data was collected between a time period of 12 to 21 months, accumulating 87 871 hours of data. This deliverable reports the results of normal and risky driving behaviour while the findings of the other research topics will be reported in respective deliverable

UDRIVE D51.1 eUropean naturalistic Driving and Riding for Infrastructure and Vehicle safety and Environment

The aim of Task 5.1 is to identify and select, among the outcomes of SP4, the results that are relevant to infer recommendations for measures improving road safety and sustainability. Due to time constraint, the analyses and the recommendations have been done in less time that it was planned at the beginning of the project. The key outcomes of the SP4 work with particular reference to crash risk, unsafe driving, and eco-driving will be studied and organized in terms of relevance to safety and sustainability policies and potential actions towards road users, vehicle and road. Recommendations have been developed to propose actions to stakeholders that can be implemented in the near future to increase safety and sustainability of road transport. This work integrates several reviews of different measures implemented previously in France, Germany, Netherlands and United Kingdom in terms of road safety measures. Then, the recommendations consider possible updates of existing measures and the development of new measures

Pierre et Marie Curie. Papiers. II — PAPIERS ET CORRESPONDANCE. LXXIX-CI Pierre et Marie Curie. Lettres reçues. C Tabouis -Vouillemin.

Curie, Marie Sklodowska, Mme Pierre. PapiersCurie, Pierre. Note(s) prises à des coursEnseignement. Cours professé par Émile SarrauEnseignement. Note(s) de cours prises par Pierre CurieInstitut du radium. manuscrit(s) provenant de luiJournal. Marie Curie (avril 1906-avril 1907)Labouisse, Ève Curie, Mme Henry Richardson. Manuscrit(s) provenant d'elleLangevin, Hélène Joliot-Curie, Mme Michel. Manuscrit(s) provenant d'elleSarrau, Émile, membre de l'Institut, ingénieur. Note(s) prises à son coursSciences. Papiers scientifiques. Pierre et Marie CurieContient : Tabouis, Geneviève Le Quesne, Mme Robert, journaliste. Lettre(s) ; Talbot, Hayden. Lettre(s) ; Tanaka, S., physicien. Lettre(s) ; Tanaka, S., physicien. Lettre(s) reçue(s) ; Tattegrain, André, conseiller municipal de Paris. Carte(s) ; Taylor, George F.. Lettre(s) ; Taylor & Francis, éditeurs du Philosophical Magazine. Lettre(s) ; Taylor & Francis, éditeurs du Philosophical Magazine. Lettre(s) reçue(s) ; Raýman, Bohuslaw, chimiste. Lettre(s) ; Tchécoslovaquie. Académie de l'Empereur François-Joseph.. Lettre(s) ; Tchécoslovaquie. Ministère des Travaux publics.. Lettre(s) ; Tchécoslovaquie. Ministère des Travaux publics.. Lettre(s) reçue(s) ; Tchécoslovaquie. Société royale des sciences et des lettres de Bohême.. Lettre(s) ; Tchécoslovaquie. Société royale des sciences et des lettres de Bohême.. Lettre(s) reçue(s) ; Tcheng, Cheng. Lettre(s) ; Tcheng, Cheng. Lettre(s) reçue(s) ; Teinturier, R.. Lettre(s) ; Teinturier, R.. Lettre(s) reçue(s) ; Teixier, Henri. Lettre(s) ; Teixier, Henri. Lettre(s) reçue(s) ; Temps (Le). Lettre(s) reçue(s) ; Terquem, Henri. Lettre(s) ; Terquem, Henri. Lettre(s) reçue(s) ; Holweck, Fernand, physicien. Lettre(s) reçue(s) ; Holweck, Fernand, physicien. Lettre(s) ; Thackara, A. M., consul général des États-Unis en France. Carte(s) ; Theile, Albert, journaliste. Lettre(s) ; Theillaumat, H., Mme G. Lettre(s) ; Theillaumat, H., Mme G. Lettre(s) reçue(s) ; Theml, Franz. Lettre(s) ; Thévenin, Docteur Charles. Lettre(s) ; Thewlis, Malford Wilcox. Lettre(s) ; Thézard, Paul. Lettre(s) ; Thézard, Paul. Lettre(s) reçue(s) ; Thèze, Marquis de. Lettre(s) ; Thèze, Marquis de. Lettre(s) reçue(s) ; Thibaud, Jean. Lettre(s) ; Thiébaut, Napoléon-Eugène-Émile, diplomate. Lettre(s) ; Thofehrn, Herbert. Lettre(s) reçue(s) ; Thomas, Charles C., journaliste. Lettre(s) ; Thomas, Charles C., journaliste. Lettre(s) reçue(s) ; Thompson, Robert H.. Lettre(s) ; Thompson, Robert H.. Lettre(s) reçue(s) ; Thomson, Sir Joseph John, physicien. Lettre(s) ; Thomson, Lady Joseph John. Carte(s) ; Thomson son and Laidlaw, tailleurs à Glasgow. Lettre(s) ; Cremer, M., de la compagnie Thomson Houston. Lettre(s) ; Thorpe, Jocelyn Field, chimiste. Lettre(s) ; Thorpe, Jocelyn Field, chimiste. Lettre(s) reçue(s) ; Thuillier-Landry, Docteur L.. Lettre(s) ; Thuillier-Landry, Docteur L.. Lettre(s) reçue(s) ; Thurneyssen, Mlle M.. Lettre(s) reçue(s) ; Tisdale, W. E.. Lettre(s) ; Tisdale, W. E.. Lettre(s) reçue(s) ; Titulesco, Nicolae, homme politique. Lettre(s) ; Tolkowsky, Marcel, ingénieur. Lettre(s) ; Tolkowsky, Marcel, ingénieur. Lettre(s) reçue(s) ; Tomarkin, L. W.. Lettre(s) ; Tomarkin, L. W.. Lettre(s) reçue(s) ; Trabacchi, G. C.. Lettre(s) ; Tracy, Docteur Martha. Lettre(s) ; Tracy, Docteur Martha. Lettre(s) reçue(s) ; Tran Mong Bach. Lettre(s) ; Tran Mong Bach. Lettre(s) reçue(s) ; Treillard, Odon, fabricant de pipes. Lettre(s) ; Treillard, Odon, fabricant de pipes. Lettre(s) reçue(s) ; Trillat, Jean-Jacques, membre de l'Institut. Lettre(s) reçue(s) ; Trimurti, N.. Lettre(s) ; Trow, Waldo Duane. Lettre(s) ; Trow, Waldo Duane. Lettre(s) reçue(s) ; Trowbridge, Augustus. Carte(s) ; Truillé (M. et Mme Jean). Lettre(s) ; Truillé (M. et Mme Jean). Lettre(s) reçue(s) ; Tsai, Y. B., recteur de l'université de Pékin. Carte(s) ; Tuffier, Professeur Théodore, de l'Académie de médecine. Lettre(s) ; Tuffier, Professeur Théodore, de l'Académie de médecine. Lettre(s) reçue(s) ; Tufts, James Hayden, président de l'université de Chicago. Lettre(s) ; Turauskas, Édouard, journaliste. Lettre(s) ; Turauskas, Édouard, journaliste. Lettre(s) reçue(s) ; Turner, Abby H.. Lettre(s) ; Turpain, Albert, physicien. Lettre(s) ; Tygodnik Illustrowany. Lettre(s) ; Tyson, Russell. Carte(s) ; Uhler, Mrs Horace Scudder. Carte(s) ; Barbier-Hugo, Mme L., vice-présidente de la Croix-Rouge française. Lettre(s) ; Union des Femmes de France. Lettre(s) ; Beauregard, Mme A., directrice de l'Union des femmes de France. Lettre(s) ; Chardayre, Mme B.. Lettre(s) ; Union des Femmes de France. Lettre(s) reçue(s) ; Chardayre, Mme B.. Lettre(s) reçue(s) ; Bachelet, Mme D., de la Croix-Rouge française. Lettre(s) ; Union Générale des Élèves Techniciens. Lettre(s) ; Union Générale des Élèves Techniciens. Lettre(s) reçue(s) ; Union Rationaliste. Document(s) la concernant ; Upmark, Eva. Lettre(s) ; Urbain, Georges, membre de l'Institut, physicien. Lettre(s) ; Urbain, Pierre. Lettre(s) ; Oldenbourg, Sergiei F.. Lettre(s) ; Oldenbourg, Sergiei F.. Lettre(s) reçue(s) ; Merrill, Docteur Théodore C.. Lettre(s) ; Merrill, Docteur Théodore C.. Lettre(s) reçue(s) ; Usines métallurgiques de la Basse-Loire. Lettre(s) ; Utagawa, Kin, journaliste. Lettre(s) ; Vaillant, Pierre, physicien. Lettre(s) ; Valbel, Roger. Lettre(s) reçue(s) ; Valbreuze, Robert de. Lettre(s) reçue(s) ; Merzbach, Alice Reitlinger, Mme Georges, pseud. Alice-George Vallières. Lettre(s) ; Merzbach, Alice Reitlinger, Mme Georges, pseud. Alice-George Vallières. Lettre(s) reçue(s) ; Valobra, Alfredo. Lettre(s) ; Valobra, Alfredo. Lettre(s) reçue(s) ; Valot, Docteur Guy. Lettre(s) ; Valot, Docteur Guy. Lettre(s) reçue(s) ; Vals, Vincent. Lettre(s) ; Vals, Vincent. Lettre(s) reçue(s) ; Van Aubel, Edmond. Carte(s) ; Van Dyke, Paul, historien. Lettre(s) ; Van Lint, Victor, ingénieur. Lettre(s) ; Van Lint, Victor, ingénieur. Lettre(s) reçue(s) ; Van Steenbrugghe, A., fabricant d'instruments de chirurgie. Lettre(s) ; Van Steenbrugghe, A., fabricant d'instruments de chirurgie. Lettre(s) reçue(s) ; Vantongerloo, Georges, sculpteur et peintre. Lettre(s) ; Vantongerloo, Georges, sculpteur et peintre. Lettre(s) reçue(s) ; Varona, Jerónimo Vecino. Lettre(s) ; Zawadzki, Jozef. Lettre(s) ; Lesniowski, Docteur Antoni. Lettre(s) ; Orlowski, Docteur Witold. Lettre(s) ; Kochanowski, Jan. Lettre(s) ; Kalinowski, recteur de l'université libre de Varsovie. Télégramme(s) ; Vendel, Docteur S. N.. Lettre(s) reçue(s) ; Venkataramaiah, Yechuri, physicien. Lettre(s) ; Venkayya, P., géologue. Lettre(s) ; Vernadsky, Wladimir, physicien. Lettre(s) ; Verneau, Docteur René. Lettre(s) ; Verone, Salvador. Lettre(s) ; Verone, Salvador. Lettre(s) reçue(s) ; Verschaffelt, Jules Émile. Lettre(s) ; Verschaffelt, Jules Émile. Lettre(s) reçue(s) ; Viborel, Lucien. Lettre(s) ; Vie (La) universitaire. Lettre(s) ; Vie (La) universitaire. Documents ; Viellard, L. Le Couteulx Du Molay, Mme Louis. Lettre(s) ; Viellard, L. Le Couteulx Du Molay, Mme Louis. Lettre(s) reçue(s) ; Vienne (Autriche). Uvachrom-Union.. Lettre(s) ; Vienne (Autriche). Uvachrom-Union.. Lettre(s) reçue(s) ; Viénot, Jacques. Lettre(s) ; Viénot, Jacques. Lettre(s) reçue(s) ; Viereck, George Sylvester. Lettre(s) ; Viereck, George Sylvester. Lettre(s) reçue(s) ; Vigouroux, Docteur Adrien. Lettre(s) ; Villat, Henri, membre de l'Institut. Lettre(s) ; Vilno (Lithuanie). Association des étudiants en chimie.. Lettre(s) ; Volterra, Vito, homme politique. Lettre(s) ; Vouillemin, Général Charles-Ernest. Carte(s)Numérisation effectuée à partir d'un document de substitution