Re-identification by Covariance Descriptors

International audienceThis chapter addresses the problem of appearance matching, while employing the covariance descriptor. We tackle the extremely challenging case in which the same non-rigid object has to be matched across disjoint camera views. Covariance statistics averaged over a Riemannian manifold are fundamental for designing appearance models invariant to camera changes. We discuss different ways of extracting an object appearance by incorporating various training strategies. Appearance matching is enhanced either by discriminative analysis using images from a single camera or by selecting distinctive features in a covariance metric space employing data from two cameras. By selecting only essential features for a specific class of objects (\textit{e.g.} humans) without defining \textit{a priori} feature vector for extracting covariance, we remove redundancy from the covariance descriptor and ensure low computational cost. Using a feature selection technique instead of learning on a manifold, we avoid the over-fitting problem. The proposed models have been successfully applied to the person re-identification task in which a human appearance has to be matched across non-overlapping cameras. We carry out detailed experiments of the suggested strategies, demonstrating their pros and cons \textit{w.r.t.} recognition rate and suitability to video analytics systems

Video Covariance Matrix Logarithm for Human Action Recognition in Videos

International audienceIn this paper, we propose a new local spatio-temporal descriptor for videos and we propose a new approach for action recognition in videos based on the introduced descriptor. The new descriptor is called the Video Covariance Matrix Logarithm (VCML). The VCML descriptor is based on a covariance matrix representation, and it models relationships between different low-level features, such as intensity and gradient. We apply the VCML descriptor to encode appearance information of local spatio-temporal video volumes, which are extracted by the Dense Trajectories. Then, we present an extensive evaluation of the proposed VCML descriptor with the Fisher vector encoding and the Support Vector Machines on four challenging action recognition datasets. We show that the VCML descriptor achieves better results than the state-of-the-art appearance descriptors. Moreover, we present that the VCML descriptor carries complementary information to the HOG descriptor and their fusion gives a significant improvement in action recognition accuracy. Finally, we show that the VCML descriptor improves action recognition accuracy in comparison to the state-of-the-art Dense Trajectories, and that the proposed approach achieves superior performance to the state-of-the-art methods

Robuste Detektion, Verfolgung und Wiedererkennung von Personen in Videodaten mit niedriger Auflösung

Mit der zunehmenden Menge an Bilddaten im Videoüberwachungssektor wächst die Chance, Straftaten besser aufklären zu können. Allerdings ist dafür ein immenser Aufwand für die Auswertung der Bilder erforderlich, die oft nicht mehr vollständig ohne Computerunterstützung durch Personen gesichtet werden können. Diese Arbeit umfasst Methoden und Verbesserungen auf Basis neuartiger Personenrepräsentationen für die Detektion, Verfolgung und erscheinungsbasierte Wiedererkennung von Personen

Robuste Detektion, Verfolgung und Wiedererkennung von Personen in Videodaten mit niedriger Auflösung

Mit der zunehmenden Menge an Bilddaten im Videoüberwachungssektor wächst die Chance, Straftaten besser aufklären zu können. Allerdings ist dafür ein immenser Aufwand für die Auswertung der Bilder erforderlich, die oft nicht mehr vollständig ohne Computerunterstützung durch Personen gesichtet werden können. Diese Arbeit umfasst Methoden und Verbesserungen auf Basis neuartiger Personenrepräsentationen für die Detektion, Verfolgung und erscheinungsbasierte Wiedererkennung von Personen