A Hierarchical Segmentation Algorithm for Face Analysis. Application to Lipreading

International audienceA hierarchical algorithm for face analysis is presented in this paper. A color video sequence of speaker's face is acquired, under natural lighting conditions and without any particular make-up. The application aims at providing geometrical features of the face for scalable video transmission when no specific model of the speaker face is assumed. First, a logarithmic hue transform is performed from RGB to HI (hue, intensity) color space. Next, a Markov random field modeling regularizes motion and hue information within a spatiotemporal neighborhood. The hierarchical segmentation labels the different areas of the face. Results are shown on the lower part of the face and compared with standard color segmentation algorithm (fuzzy c-means). A speaker's lip shape with inner and outer borders is extracted from the final labeling and used to initialize an active contours stage

Automatique

Licenc

Détection de mouvement dans les séquences d'images. Mises en oeuvre temps réel.

National audienc

Instrumentation programmée pour TP d'électronique distant

National audienceDans le cadre de TP d'électronique s'adressant à des élèves-ingénieurs ou à des étudiants d'IUT, l'utilisation de l'instrumentation programmée par bus GPIB permet d'automatiser les mesures.Ceci conduit à un gain de temps, une limitation du risque d'erreur de mesure et une meilleure précision sur le tracé des courbes,laissant aux étudiants plus de temps pour l'interprétation des résultats.Elle permet en outre de répondre au besoin d'enseignement pratique à distance, puisque les appareils de mesure physiquement dans la salle de TP peuvent être pilotés via un navigateur Internet (protocole HTTP).On présente ici quatre expériences de TP concernant la caractérisation d'un amplificateur BF de puissance (ampli audio), le tracé générique de courbes de Bode, la possibilité d'instrumentation à distance, et enfin la caractérisation d'un transistor MOS.On décrit succinctement les bancs de mesure et les résultats visualisés sur les interfaces graphiques

Une architecture alternative pour la mise en oeuvre temps réel d'un algorithme markovien de détection de mouvement

Dans cet article, nous présentons dans un premier temps un algorithme simple et robuste de détection de mouvement, basé sur une approche markovienne, et dans un deuxième temps une architecture matérielle spécifique pour son implantation en temps réel. Les mises en oeuvre de ce type d'algorithmes sont généralement réalisées sur des machines parallèles. De récents travaux proposent aussi l'implantation d'algorithmes simplifiés sur réseaux résistifs intégrés sur des circuits VLSI. Après l'étude détaillée de notre algorithme, nous proposons une solution alternative de mise en oeuvre, validée par le développement d'une carte prototype intégrant l'ensemble du processus de détection (de l'acquisition vidéo à la visualisation des masques finaux). Une cadence de traitement de l'ordre de 15 images par seconde est obtenue

Pros and Cons of the Nonlinear LUX Color Transform for Wireless Transmission with Motion JPEG2000

International audienc

Théorie de l’évidence pour suivi de visage

Le suivi de visage par caméra vidéo est abordé ici sous l’angle de la fusion évidentielle. La méthode proposée repose sur un apprentissage sommaire basé sur une initialisation supervisée. Le formalisme du modèle de croyances transférables est utilisé pour pallier l’incomplétude du modèle a priori de visage due au manque d’exhaustivité de la base d’apprentissage. L’algorithme se décompose en deux étapes. La phase de détection de visage synthétise un modèle évidentiel où les attributs du détecteur de Viola et Jones sont convertis en fonctions de croyance, et fusionnés avec des fonctions de masse couleur modélisant un détecteur de teinte chair, opérant dans un espace chromatique original obtenu par transformation logarithmique. Pour fusionner les sources couleur dépendantes, nous proposons un opérateur de compromis inspiré de la règle prudente de Denœux. Pour la phase de suivi, les probabilités pignistiques issues du modèle de visage garantissent la compatibilité entre les cadres crédibiliste et probabiliste. Elles alimentent un filtre particulaire classique qui permet le suivi du visage en temps réel. Nous analysons l’influence des paramètres du modèle évidentiel sur la qualité du suivi.This paper deals with real time face detection and tracking by a video camera. The method is based on a simple and fast initializing stage for learning. The transferable belief model is used to deal with the prior model incompleteness due to the lack of exhaustiveness of the learning stage. The algorithm works in two steps. The detection phase synthesizes an evidential face model by merging basic beliefs elaborated from the Viola and Jones face detector and from colour mass functions. These functions are computed from information sources in a logarithmic colour space. To deal with the colour information dependence in the fusion process, we propose a compromise operator close to the Denœux cautious rule. As regards the tracking phase, the pignistic probabilities from the face model guarantee the compatibility between the believes and the probability formalism. They are the inputs of a particle filter which ensures face tracking at video rate. The optimal parameter tuning of the evidential model is discussed

Segmentation automatique des lèvres d'un locuteur

Ce papier propose un algorithme non supervisé de segmentation des lèvres d'un locuteur. Une caméra fournit une séquence couleur du visage du locuteur sans éclairage ni maquillage particulier. Afin de s'affranchir des conditions d'éclairage, une transformée logarithmique définit un nouvel espace couleur (teinte, luminance). Ensuite, une approche par champ aléatoires de Markov segmente la teinte caractéristique des lèvres combinée à une détection de mouvement dans un cadre spatio-temporel. Parallèlement, la région d'intérêt principal et des paramètres géométriques sont mesurés automatiquement. Ceux-ci peuvent par la suite être intégrés dans une nouvelle étape de l'application multimédia envisagée (visiophonie, visioconférence)

A Component Model for Transmission and Processing of Synchronized Multimedia Data Flows

International audienceOur research deals with distributed multimedia applications built on software components. Currently, multimedia data are omnipresent on the Internet. However, this network is not designed to support and transmit multimedia data. In this perspective, it is necessary to introduce quality of service management in this kind of applications. In this paper, we are particularly interested in the inter-flow synchronization (e.g. audio and image flows of a video). We develop a component model in order to tackle the synchronization between multimedia flows from the source (e.g. media capture) to the destination (e.g. media player). This model is named OSAGAIA* and is made of two entities. The first one is called elementary processor. It is used as the runtime environment (component container) for multimedia components. The second one is called conduit. It is used to transport synchronous multimedia flows between elementary processors. So, distributed applications are composed of multimedia components (within containers) connected by multimedia flows (within conduits). We are working on a distributed prototype which validates the synchronization algorithms that we use. It is implemented with Java language using JMF (Java Media Framework) API and TCP/IP as network protocol

A Multimedia Oriented Component Model.

International audienc