Providing automatic multilingual text generation to artificial cognitive systems

This contribution addresses the incorporation of a module for advanced user interaction into an artificial cognitive vision system to include the human-in-the-loop. Specifically, the document describes a method to automatically generate natural language textual descriptions of meaningful events and behaviors, in a controlled scenario. One of the goals of the system is to be capable of producing these descriptions in multiple languages. We will introduce some relevant stages of the whole system, and concentrate on the linguistic aspects which have been taken into account to derive final text from conceptual predicates. Some experimental results are provided for the description of simple and complex behaviors of pedestrians in an intercity crosswalk, for Catalan, English, Italian, and Spanis

Begriffliche Situationsanalyse aus Videodaten bei unvollständiger und fehlerhafter Information

Diese Arbeit beschäftigt sich mit der automatischen Erkennung komplexer Situationen in Bildfolgen im Videoüberwachungskontext. Bei der Behandlung von Daten aus natürlichen Umgebungen ergeben sich Schwierigkeiten. Diese Arbeit erweitert dazu den verwendeten Formalismus um die Behandlung von Unschärfe, fehlender Information und Komplexität, zeigt die Robustheit der Situationserkennung bei natürlichen Szenarien und stellt die generische Anwendbarkeit auch über Diskursbereichsgrenzen hinaus heraus

Videogestützte Umfelderfassung zur Interpretation von Verkehrssituationen für kognitive Automobile

Es wird einen holistischer Ansatz zur Interpretation von Verkehrssituationen vorgestellt, der aus den drei Teilen Umfelderfassung, Wissensmodellierung und Situationsinterpretation besteht. Die Umfelderfassung dient dazu, das Umfeld des Fahrzeug durch unterschiedliche Sensorik zu beobachten und die zur Fahrzeugführung relevanten Informationen zu extrahieren. Mit Hilfe einer Ontologie werden Situationen beschrieben und durch das Fallbasierte Schließen klassifiziert und bewertet

Behavioral Knowledge Representation for the Understanding and Creation of Video Sequences

The algorithmic generation of textual descriptions of real world image sequences requires conceptual knowledge. The algorithmic generation of synthetic image sequences from textual descriptions requires conceptual knowledge, too. An explicit representation formalism for behavioral knowledge based on formal logic is presented which can be utilized in both tasks -- Understanding and Creation of video sequences