Reconstructions faciales à partir d'images tridimensionnelles de crânes humains par recalage et modèle déformable pour l'identification de personnes

Facial reconstruction from a cranial skeleton is an important technique in several scientific areas, especially in forensic sciences, archaeology, and palaeontology. It is used for skull identification and recognition of people. It can be classified, among reconstructive identification methods. It is most often used as a last resort, when all other techniques fail to produce a person presumed identity. This thesis addresses the facial reconstruction problem from three-dimensional (3D) images of human skulls, considered as unknown. We present a 3D computerized facial reconstruction method based on recent techniques of medical imaging, where the main objectives are the processing speed and the elimination of the subjectivity by leaning particularly on mathematical criteria for evaluating the results. Our method is based on a model deformable approach constrained by the knowledge of soft tissues thicknesses, at a certain number of characteristic landmarks. It uses, for each facial reconstruction, a 3D image of a reference head from which skull and skin are extracted, and a 3D image of the skull of the unknown head for which the skin should be reconstructed. The facial reconstruction process is divided into two main stages. An initialization step of the deformable model, based on a non-linear registration technique guided by B-Spline Free-Form Deformations (FFD) model. We therefore, propose an automatic initialization that is achieved only from a reference skull and skin set as well as an unknown skull. At first, a transformation of the reference skull image into the unknown skull image is computed. Then, we apply the same transformation to deform the reference skin image in order to obtain a new skin, which is considered close to the unknown skin and that will be used as initialization of the final facial reconstruction. In the second step, the initial skin, resulting from the transformation computed previously, is refined by means of a 3D deformable model based on simplexes meshes that is attracted by some characteristic landmarks previously computed by a calculation of Mean and Gaussian curvatures. The landmarks are fixed according the positions of the anthropological landmarks of Rhine and Campbell [Rhine and Campbell, 1980]. The evolution of our deformable model is done according to different internal and external forces among which the Gradient Vectors Flow force (GVF) and a balloon force. This method has been tested on thirteen sets of skull/skin data, extracted from 3D-MRI of individual heads of children and adults. For each facial reconstruction, two skull/skin sets corresponding to a reference head and a head with unknown skin are selected according to similar anthropological characteristics. By this method, encouraging results are obtained. The reconstructed shapes remain faces, visibly acceptable, and are relatively close to the real faces.La reconstruction faciale à partir d'un squelette crânien est une technique importante dans plusieurs domaines scientifiques, en particulier dans les sciences médico-légales, l'archéologie et la paléontologie pour l'identification de crânes et la reconnaissance de personnes. Elle fait partie des méthodes d'identification reconstructive et est utilisée le plus souvent en dernier recours, lorsqu'aucune autre technique ne permet de présumer l'identité inconnue de la personne. Cette thèse aborde la problématique de la reconstruction faciale à partir d'images tridimensionnelles (3D) de crânes humains considérés comme étant inconnus. Nous présentons une méthode de reconstruction faciale 3D informatisée reposant sur des techniques récentes d'imagerie médicale avec comme principaux objectifs la rapidité du traitement et l'élimination de la subjectivité en s'appuyant en particulier sur des critères mathématiques pour évaluer les résultats. Notre méthode est fondée sur une approche par modèle déformable contraint par la connaissance des épaisseurs des tissus mous en un certain nombre de points de repère caractéristiques. Elle utilise, pour chaque reconstruction faciale, une image 3D d'une tête de référence dont nous extrayons la peau et le crâne, et une image 3D du crâne d'une tête inconnue dont nous voulons reconstruire la peau. La procédure de la reconstruction faciale est divisée en deux principales étapes. Une étape d'initialisation du modèle déformable est fondée sur une technique de recalage non linéaire guidé par un modèle de déformations de forme libre (FFD) à base de B-splines. Nous proposons donc une initialisation automatique, réalisée uniquement à partir d'un ensemble crâne et peau de référence et du crâne inconnu. Nous calculons, dans un premier temps, une transformation de l'image 3D d'un crâne de référence vers celle du crâne inconnu. Ensuite, nous appliquons la même transformation pour déformer l'image de la peau de référence vers une nouvelle peau que nous considérons proche de la peau inconnue et qui servira d'initialisation à la reconstruction faciale finale. Dans une seconde étape, la peau initiale, résultant de la transformation calculée précédemment, est raffinée à l'aide d'un modèle déformable 3D à base de maillages simplexes qui est attiré par un ensemble des points de repère caractéristiques préalablement calculés par un calcul des courbures moyenne et gaussienne, et fixés selon les positions des repères anthropologiques de Rhine et Campbell [Rhine et Campbell, 1980]. L'évolution de notre modèle déformable est effectuée suivant différentes forces internes et externes dont la force de champ de vecteurs de gradients (GVF) et une force de pression. Cette méthode a été testée sur treize ensembles de données crâne/peau issus d'IRM-3D de têtes d'individus enfants et adultes. Pour chaque reconstruction faciale, deux ensembles crâne/peau correspondant à une tête de référence et à une tête dont la peau est à reconstruire sont sélectionnés selon des caractéristiques anthropologiques similaires. Par cette méthode, nous obtenons des résultats encourageants. Les formes reconstruites restent des visages, visiblement acceptables, et sont relativement proches des visages réels

Reconstructions faciales à partir d'images tridimensionnelles de crânes humains par recalage et modèle déformable pour l'identification de personnes

This thesis addresses the difficult problem of facial reconstruction from three-dimensional (3D) images of human skulls, considered as unknown. We present an original 3D computerized facial reconstruction method based on recent techniques of medical imaging, where the main objectives are the processing speed and the elimination of the subjectivity by leaning particularly on mathematical criteria for evaluating the results. Our method is based on a model deformable approach constrained by the knowledge of soft tissues thicknesses, at a certain number of characteristic landmarks. It is based on known cases of skull / skin couples. The facial reconstruction is obtained in two main stages. A first registration step of the skull of the known head on the skull of the unkown head, and an estimation of the unkown skin is deducted from this registartion and anthropometric information about the skin thicknesses at different points of the surface. Deformable models adapted to the problem, integrating these constraints, have been used for that. This method has been tested on thirteen sets of skull/skin data, extracted from 3D-MRI of individual heads of children and adults. For each facial reconstruction, two skull/skin sets corresponding to a reference head and a head with unknown skin are selected according to similar anthropological characteristics. By this method, encouraging results are obtained. The reconstructed shapes remain faces, visibly acceptable, and are relatively close to the real faces.Cette thèse porte sur le problème difficile de la reconstruction faciale à partir d images tridimensionnelles (3D) de crânes humains considérés comme étant inconnus. Nous présentons une méthode de reconstruction faciale 3D informatisée originale reposant sur des techniques récentes d imagerie médicale avec comme principaux objectifs la rapidité du traitement et l élimination de la subjectivité en s appuyant en particulier sur des critères mathématiques pour évaluer les résultats. Notre méthode est fondée sur une approche par modèle déformable contraint par la connaissance des épaisseurs des tissus mous en un certain nombre de points de repère caractéristiques. Elle s'appuie sur des cas connus de couples crâne /peau. La reconstruction faciale est réalisée en deux principales étapes. Une première étape de recalage de l'os de la tête connue sur l'os de la tête inconnue, puis une estimation de la peau inconnue déduite de ce recalage et d'informations anthropométriques sur les épaisseurs de peau en différents points de la surface. Des modèles déformables adaptés au problème, intégrant ces contraintes, ont été utilisés pour cela. Cette méthode a été testée sur treize ensembles de données crâne/peau issus d IRM-3D de têtes d individus enfants et adultes. Pour chaque reconstruction faciale, deux ensembles crâne/peau correspondant à une tête de référence et à une tête dont la peau est à reconstruire sont sélectionnés selon des caractéristiques anthropologiques similaires. Par cette méthode, nous obtenons des résultats encourageants. Les formes reconstruites restent des visages, visiblement acceptables, et sont relativement proches des visages réels.PARIS-Télécom ParisTech (751132302) / SudocSudocFranceF

Identifying the Best Machine Learning Algorithms for Brain Tumor Segmentation, Progression Assessment, and Overall Survival Prediction in the BRATS Challenge

Gliomas are the most common primary brain malignancies, with different degrees of aggressiveness, variable prognosis and various heterogeneous histologic sub-regions, i.e., peritumoral edematous/invaded tissue, necrotic core, active and non-enhancing core. This intrinsic heterogeneity is also portrayed in their radio-phenotype, as their sub-regions are depicted by varying intensity profiles disseminated across multi-parametric magnetic resonance imaging (mpMRI) scans, reflecting varying biological properties. Their heterogeneous shape, extent, and location are some of the factors that make these tumors difficult to resect, and in some cases inoperable. The amount of resected tumor is a factor also considered in longitudinal scans, when evaluating the apparent tumor for potential diagnosis of progression. Furthermore, there is mounting evidence that accurate segmentation of the various tumor sub-regions can offer the basis for quantitative image analysis towards prediction of patient overall survival. This study assesses the state-of-the-art machine learning (ML) methods used for brain tumor image analysis in mpMRI scans, during the last seven instances of the International Brain Tumor Segmentation (BraTS) challenge, i.e., 2012-2018. Specifically, we focus on i) evaluating segmentations of the various glioma sub-regions in pre-operative mpMRI scans, ii) assessing potential tumor progression by virtue of longitudinal growth of tumor sub-regions, beyond use of the RECIST/RANO criteria, and iii) predicting the overall survival from pre-operative mpMRI scans of patients that underwent gross total resection. Finally, we investigate the challenge of identifying the best ML algorithms for each of these tasks, considering that apart from being diverse on each instance of the challenge, the multi-institutional mpMRI BraTS dataset has also been a continuously evolving/growing dataset

Identifying the Best Machine Learning Algorithms for Brain Tumor Segmentation, Progression Assessment, and Overall Survival Prediction in the BRATS Challenge

Gliomas are the most common primary brain malignancies, with different degrees of aggressiveness, variable prognosis and various heterogeneous histologic sub-regions, i.e., peritumoral edematous/invaded tissue, necrotic core, active and non-enhancing core. This intrinsic heterogeneity is also portrayed in their radio-phenotype, as their sub-regions are depicted by varying intensity profiles disseminated across multi-parametric magnetic resonance imaging (mpMRI) scans, reflecting varying biological properties. Their heterogeneous shape, extent, and location are some of the factors that make these tumors difficult to resect, and in some cases inoperable. The amount of resected tumor is a factor also considered in longitudinal scans, when evaluating the apparent tumor for potential diagnosis of progression. Furthermore, there is mounting evidence that accurate segmentation of the various tumor sub-regions can offer the basis for quantitative image analysis towards prediction of patient overall survival. This study assesses the state-of-the-art machine learning (ML) methods used for brain tumor image analysis in mpMRI scans, during the last seven instances of the International Brain Tumor Segmentation (BraTS) challenge, i.e., 2012-2018. Specifically, we focus on i) evaluating segmentations of the various glioma sub-regions in pre-operative mpMRI scans, ii) assessing potential tumor progression by virtue of longitudinal growth of tumor sub-regions, beyond use of the RECIST/RANO criteria, and iii) predicting the overall survival from pre-operative mpMRI scans of patients that underwent gross total resection. Finally, we investigate the challenge of identifying the best ML algorithms for each of these tasks, considering that apart from being diverse on each instance of the challenge, the multi-institutional mpMRI BraTS dataset has also been a continuously evolving/growing dataset