unknown

Face cloning and video spatialization : tools for virtual teleconference

Abstract

In this paper, we propose powerful virtual image processing tools (face cloning and video spatialization) which can be useful to design new teleconferencing systems offering a better comfort for users even if very low bit rate links are used . These tools allow a new teleconferencing concept, relying on the metaphor of a virtual meeting room where participants can choose their position and point of view. In particular, we propose video cloning modules to represent all participants vith 3D synthetic models of their face, constructed from range data with simplex meshes . These models are meant to be visualized under a point of view different from the camera which analyses the facial motion of the speakers . Besides, the realism of the virtual meeting room is improved by video spatialization techniques, which aims at synthesizing new points of view from a limited set of uncalibrated views of an existing room .Dans cet article, nous proposons des algorithmes de traitement d'image vidéo (tels que le clonage de visages et la spatialisation vidéo) qui peuvent être utilisés pour définir de nouveaux systèmes de vidéoconférence offrant plus de « confort d'utilisation » que les systèmes actuels, malgré des liaisons très bas-débit. Ce nouveau concept repose sur la métaphore d'une salle de réunion virtuelle où les utilisateurs pourront choisir leur place. En particulier, nous proposons des modules de clonage vidéo pour représenter les participants par l'intermédiaire de modèles synthétiques 3D de leur visage, obtenus par création de maillages simplexes sur des données Cyberware. Ces modèles sont visualisables sous des points de vue différents de celui de la caméra qui analyse les mouvements des participants. Par ailleurs, le réalisme de l'espace de réunion virtuelle est renforcé par des techniques de spatialisation vidéo qui a pour but de créer des points de vue inédits à partir d'images statiques non-calibrées d'une salle de réunion existante

    Similar works