46 research outputs found
Approches orientées modèle pour la capture des mouvements du visage en vision par ordinateur
No full textRecalage de visage et caractérisation d'expression faciale à partir de séquences vidéos ont suscité ces dernières années de nombreuses recherches dans le cadre d'applications référencées vision. Si le système visuel humain permet de localiser spontanément un visage et ses principales composantes, et de différencier les expressions faciales, ces mêmes tâches transposées dans le cadre de la vision par ordinateur restent des sujets ouverts. L'approche classique mettant en oeuvre un modèle 3D pour analyser des séquences vidéos faciales comporte deux étapes de difficulté croissante : une adaptation globale de la pose du modèle et une adaptation locale de la forme du modèle. Dans ce contexte, nous proposons une méthode robuste d'estimation de la pose 3D globale de la tête dans des séquences vidéos acquises dans un contexte réaliste. La démarche adoptée consiste en une mise en correspondance de primitives 3D du modèle (géométrie, indice de visibilité) avec des primitives 3D extraites des images (mouvement, texture) par minimisation d'une fonctionnelle relativement aux paramètres 3D de pose. Concernant la capture des mouvements non rigides du visage, nous avons développé une méthode de recalage par prototypes déformables pour le suivi des parties du visage les plus expressives dans une communication (bouche, yeux). Les prototypes déformables associés aux éléments faciaux d'intérêt sont modélisés par des B-spines interpolant les paramètres MPEG-4 de définistion du visage...During the last years, face tracking and facial expression characterisation in video sequences have motivated intensive research in the field of computer vision. Although intuitive for humans, locating faces and facial components and distinguishing between various facial expressions in video sequences remains today a widely open issus in computer vision. The most common approach for 3D model-based analysis of facial image sequences involve two steps of increasing difficulty, namely : 1) global 3D model pose adaptation and 2) local model shape adaptation. Within this context, we propose a method for 3D model-based head tracking in video sequences acquired in realistic conditions. The proposed approach relies on the matching between 3D model features (geometry, visibility index) and 2D image features estimated throughout the sequence (motion, texture). The maching is performed by minimizing a cost function with respect to the 3D pose parameters....PARIS5-BU Saints-Pères (751062109) / SudocSudocFranceF
Analyse multi-vues d'objets 3D pour interactions collaboratives
No full textThe objective of this thesis is the 3D reconstruction of real objects for collaborative interactions. Within this framework, the goal is to reconstruct an object from a small number of calibrated views (8 to 12 images), and then insert the obtained numerical models into shared collaborative environments for further visualization and manipulation. The thesis is organized as follows. First, in the general introduction, we introduce the context of the research presented in this work. We present the acquisition system developed within our laboratory, and show the relationship between the calibration of this system, the image acquisition process, and the collaborative interactions with the reconstructed objects. Then, in a first chapter, we present some aspects of 3D geometry applied to computer vision. We present the projective geometry theory, the classical linear and non-linear camera models, and some stereoscopic vision results useful for the rest of the document. The second chapter is dedicated to the issue of camera calibration. After a state-of-the-art of camera calibration methods, we propose a robust camera calibration method based on the robust estimation of the perspective projection matrix. The calibration pattern used is a cube with faces of different colours. The proposed calibration algorithm uses one image per camera to perform the calibration. However, in order to increase the accuracy of the camera parameters estimation, multiple images can also be used. Our method yields a robust estimation of the camera parameters while minimizing the amount of user interaction requested. In order to validate the method, we introduce a set of new objective criteria for evaluation and comparison of camera calibration methods. The proposed criteria are based on rectification and 3D reconstruction of an unknown coplanar point set, a virtual pattern, and the re-estimation of the known parameters of stereoscopic systems. Our calibration method is finally validated according to the proposed criteria. The third chapter3D tackles the issue of 3D reconstruction of real objects . After a comprehensive state-of-the-art of 3D reconstruction methods, we present our proposed multiresolutiuon 3D reconstruction algorithm, which is adapted to collaborative interaction tasks. Our contributions specifically concern new algorithms for voxel visibility and photo-consistency estimation. The proposed 3D reconstruction method is then tested and validated upon a set of images of real objects from existing benchmark databases. The fourth chapter handles the collaborative interactions with 3D objects. First, the calibration of our acquisition system composed of eight cameras is presented. Experimental results concerning 3D reconstruction of objects available in our laboratory are then presented. Finally, collaborative interactions with the reconstructed objects are illustrated within the framework of three existing interfaces in the France Telecom R\&D laboratories: MOWGLI, DigiTable and Spin3D. A concluding section summarizes the contributions of this thesis and opens perspectives of future work.EVRY-INT (912282302) / SudocEVRY-BU (912282101) / SudocSudocFranceF
Modélisation in-silico des voies aériennes (reconstruction morphologique et simulation fonctionnelle)
No full textDans les nouveaux protocoles thérapeutiques par voie inhalée, le dosage des particules actives reste un problème complexe qui dépend de trois principaux facteurs : leur taille, la dynamique des flux et les variations de calibre bronchique. Contribuant au projet RNTS RMOD, la recherche développée dans cette thèse propose une modélisation in-silico de la structure des voies aériennes supérieures (VAS) et proximales (VAP) à partir d examens tomodensitométriques. La modélisation développée fait coopérer des méthodes originales de segmentation des images, de construction de surface maillée et d analyse morphofonctionnelle. Une modélisation unifiée des VAP et VAS est obtenue pour la première fois. Elle démontre la pertinence des approches développées, ouvrant la voie aux études fonctionnelles prenant en compte les paramètres morphologiques susceptibles d influer localement ou globalement sur la dynamique des écoulements.In the new therapeutic protocols by inhalation, dosing the actives particles is still a complex issue which depends on three main parameters : the size, the fluid dynamics and the bronchial calibre variations. As a contribution of the RNTs project RMOD, the research developed in this thesis proposes an in-silico modelisation of the Upper Airwavs (UAw) and Proximal Airways (Paw) structure from computer tomography data. The developed modelisation uses original methods for image segmentation, meshed surface construction and morphofonctional analysis. A unified modelisation of the Uaw and Paw is obtained for the first time. It shows the pertinence of the developed approach, leading to functional studies which takes into account the morphological parameters influencing locally or globally on the fluid dynamics.PARIS5-BU Saints-Pères (751062109) / SudocSudocFranceF
3D Graphics Standardization in MPEG-4
No full textThis chapter is dedicated to professionals of 3D graphics industry, solution providers for on-line systems involving 3D content (games, persistent universes, virtual spaces with graphical representation), students and professors in digital sciences. The first section aims at presenting the background of the compression for multimedia signals. The second section presents the latest developments in MPEG-4 with respect to the compression and streaming of 3D graphics objects and scenes. The MPEG-4 tools, categorized into geometry, appearance and animation, are introduced. While MPEG standards specify only the bit-stream syntax and the architecture of the decoder, scheme for encoders’ implementation are presented in this section. In the third section we describe a recently adopted MPEG model for 3D graphics consisting in opening the representation of graphics primitives to any XML-based format and completing it with binarization and compression layers. This shift in the manner of using MPEG-4 for 3D graphics is concretized in Part 25 of MPEG-4 (Preda, Jovanova, Arsov& Prêteux, 2007). </jats:p
Compression de maillages 3D statiques et dynamiques
No full textLes contenus 3D statiques et dynamiques sont aujourd'hui exploités à grande échelle dans le cadre d'applications multimédias professionnelles et grand public (CAO, télémédecine, jeux vidéo...). Cette thèse propose quatre approches originales de compression de maillages 3D : deux concernent les modèles statiques et les deux autres les modèles dynamiques. La première méthode, appelée TFAN (Triangle Fan-based compression), vise à assurer une compression efficace de maillages 3D, sous une contrainte de basse complexité de calcul du décodeur. Le codeur TFAN a été récemment (Avril 2008) retenu par le standard ISO/MPEG-4 pour une normalisation future. La deuxième approche est dédiée au codage des maillages 3D denses. Elle exploite une approximation (sans perte de connectivité) par surfaces BSplines, couplée à un codage JPEG2000. Elle offre des performances de compression efficaces à bas débit tout en assurant la fonctionnalité de scalabilité en qualité. La troisième technique, appelée MCGV (Multi-Chart Geometry Video), traite de la compression de maillages 3D dynamiques. MCGV exploite une représentation sous forme d'images géométriques 2D, compressées par les codeurs standardisés JPEG ou MPEG-4. L'approche MCGV assure de hautes performances de compression à bas débit et des fonctionnalités avancées (e.g., streaming, scalabilité...). Enfin, la quatrième contribution de cette thèse concerne la méthode de compression dite FAMC (Frame-based Animated Mesh Compression), fondée sur une stratégie de compensation du mouvement par modèle de peau. En raison de ses hautes performances de compression et de l'ensemble des fonctionnalités supportées, FAMC est promu dans le standard ISO/MPEG-4.Static and dynamic 3D meshes are widely exploited by professional and general public applications (e.g., CAD, telemedicine and video games). This Ph.D. thesis proposes four original approaches to compress 3D meshes: two of them handle static models and the other two the dynamic ones. The first method, called TFAN (Triangle FAN-based compression), aims at efficiently coding 3D meshes under a low decoder complexity constrain. The TFAN codec was recently retained (April 2008) for a future ISO/MPEG standardization. The second approach is dedicated to dense 3D meshes. It exploits a B-Spline approximation (with connectivity preservation) coupled with a JPEG2000 encoding. The B-Spline approach offers high compression performances for low bitrates while ensuring the functionality of quality scalability. The third technique, called MCGV (Multi-Chart Geometry Video), compresses dynamic 3D meshes. It exploits a geometry-images-based representation compressed by using the standard encoders JPEG and MPEG-4. The MCGV approach ensures high compression performances for low bitrates while supporting advanced functionalities (e.g., streaming and scalability). Finally, the fourth contribution of the Ph.D. thesis concerns the FAMC (Frame-based Animated Mesh Compression) compression method, which exploits a skinning-based motion compensation strategy. Because of its high compression performances and the complete set of functionalities it supports, the FAMC technique was promoted as an ISO/MPEG standard.PARIS5-BU Saints-Pères (751062109) / SudocSudocFranceF
Modélisation et animation intéractive de visages virtuels de dessins animés
No full textLa production de dessins animés 2D qui suit un schéma mis en place dans les années 1920 fait intervenir un très grand nombre de compétences différentes. Par opposition à ce mode de travail traditionnel, la production de films de synthèse 3D, en exploitant des technologies et des outils les plus récents, devient intéressante en termes de temps et coûts de fabrication. Dans ce contexte compétitif, cette thèse a pour objectif de contribuer au développement d'une plate-forme de reconstruction, déformation et animation de modèles 3D de visages pour les dessins animés 2D. Nos contributions ont porté sur l'élaboration d'une méthode de conception de visages virtuels 3D à partir d'une part d'un modèle 3D et d'autre part d'un ensemble de dessins 2D représentant les caractéristiques faciales, la mise au point d'une procédure de création de poses clés, utilisant plusieurs méthodes de déformation non-rigide et la conception d'un module d'animation 3D compatible avec le standard MPEG-4/AFX.The production of 2D cartoons that follows a pattern established in the 1920 involves a very large number of different skills. In contrast to this traditional way, the production of 3D films, using the most recent technology and tools, becomes interesting in terms of time and manufacturing costs. In this competitive context, this thesis aims to contribute to development a platform reconstruction, deformation and animation of 3D models faces for 2D cartoons. Our contributions have focused on the development of a methodology to create 3D virtual faces from a 3D model and a set of 2D drawings representing facial features, the development of a procedure for creating key poses, using several methods of non-rigid deformation and design of a 3D animation module compatible with the standard MPEG-4/AFX.PARIS5-BU Saints-Pères (751062109) / SudocSudocFranceF
Animated Characters within the MPEG-4 Standard
No full textThe first 3D virtual human model was designed and animated by means of the computer in the late ’70s. Since then, virtual character models have become more and more popular, making a growing population able to impact the everyday real world. Starting from simple and easy-to-control models used in commercial games, to more complex virtual assistants for commercial1 or informational2 Web sites, to the new stars of virtual cinema,3 television,4 and advertising,5 the 3D character model industry is currently booming. </jats:p
Quantification du remodelage bronchique en tomodensitométrie volumique
No full textLa possibilité d'analyser de manière précise et automatique la réactivité et le remodelage bronchique représente un enjeu clé de l'imagerie des voies aériennes. Le défi majeur est de fournir au praticien des outils pour un diagnostic fiable et pour le suivi des variations morphologiques des bronches, induites par les différentes pathologies affectant les voies respiratoires. Dans ce contexte, cette thèse a pour objectif de développer des techniques de quantification des calibres bronchiques et de les intégrer dans un système applicatif visant l'aide au diagnostic, le planning chirurgical, le choix et le suivi thérapeutique. La méthode développée repose sur une segmentation automatique des bords intérieur et extérieur de la paroi bronchique à partir d'examens tomodensitométriques (TDM) mise en œuvre, par une approche orientée modèle déformable. La spécificité du modèle tient à son initialisation forte au niveau de la lumière bronchique, à sa représentation géométrique et topologique adaptée à la morphologie bronchique suivant l'espace d'analyse choisi (2D, en section de coupe et 3D, volumique) et à la définition des forces impliquées dans la formulation discrète de la dynamique de déformation. Les nouveaux outils d'investigation bronchique qui en résultent sont ensuite testés et validés de manière quantitative sur des données TDM synthétiques et qualitativement sur des données cliniques. Les données synthétiques sont générées à travers le développement d'un simulateur TDM bronchique 3D, capable de reproduire des images volumiques réalistes de morphologies bronchiques complexes, paramétrables et parfaitement contrôlées. Enfin, un logiciel dédié à l'analyse morphologique des voies aériennes proximales est mis en place à partir des approches de quantification développées. Applicable en routine clinique, le logiciel propose une nouvelle appréhension des variations des calibres bronchiques en permettant d'afficher l'information relative à l'épaisseur pariétale en complément des techniques de visualisation standards (rendu de surface, bronchoscopie virtuelle).PARIS5-BU Saints-Pères (751062109) / SudocSudocFranceF
