Il est fréquent que les éditeurs de photos redimensionnent régulièrement des objets, ou les déplacent vers le haut, le bas ou latéralement, mais des chercheurs de l’Université Carnegie Mellon et l’Université de Californie ont ajouté une dimension supplémentaire à l’édition de photos en permettant aux éditeurs de tourner ou renverser des objets comme ils veulent, et même d’exposer des surfaces non visibles sur la photo originale, en utilisant librement des modèles 3D disponibles en stock d’objets du quotidien.
Une chaise dans une photo d’un salon, par exemple, peut être retournée ou même mise à l’envers sur la photo, affichant les côtés de la chaise qui auraient été cachées de l’appareil photo, mais apparaissant être réalistes.
Cette manipulation en trois dimensions d’objets dans une simple photo 2D est possible: parce que les modèles numériques 3D de nombreux objets du quotidien (les meubles, les ustensiles de cuisine, voitures, vêtements, appareils) sont facilement disponibles en ligne.
L’équipe de recherche dirigée par Yasser Sheikh, professeur de recherche en robotique, a découvert qu’ils pouvaient créer des modifications réalistes en adaptant des modèles dans la géométrie de la photo, puis appliquer les couleurs, les textures et l’éclairage compatibles avec la photo.
« Dans le monde réel, nous sommes habitués à manipulation des objets- en les soulevant, en les faisant tourner ou renverser», a déclaré Natasha Kholgade, étudiant doctorat à l’Institut de robotique et auteur principal de l’étude. «Nous avons créé un l’environnement qui vous donne la même liberté lors de l’édition d’une photo. »
A l’origine, le système a été conçu pour fonctionner à l’aide de l’imagerie numérique, mais les chercheurs ont constaté que cela peut également être utilisé pour manipuler des images de photos de peinture et historiques. Les objets qui peuvent être manipulés dans les photos peuvent donc être animés.
Des chercheurs ont démontré que l’oiseau en Origami tenu dans la main peut être transformé pour battre des ailes et s’envoler, ou un taxi montré dans une scène de rue peut entrer en lévitation, et retourner pour révéler son châssis et s’envoler dans les airs.
La principale faiblesse du fait d’utiliser des modèles 3D accessibles au public est que les modèles correspondent rarement à une photo précise. Des variations se produisent entre les modèles et les objets physiques, les objets de la vie réelle comme des coussins de siège et des sacs à dos qui sont parfois déformés dès lors qu’ils sont utilisés, et les apparences peuvent changer à cause du vieillissement, des aux intempéries ou de l’éclairage.
Pour corriger les variations, les chercheurs ont développé une technique pour aligner semi-automatiquement le modèle à la géométrie de l’objet dans la photo tout en préservant les symétries de l’objet. Le système évalue alors automatiquement l’éclairage de l’environnement et l’apparence des parties cachées de l’objet – la face visible d’un coussin de siège ou d’une banane est utilisée pour créer une apparence plausible pour le côté opposé. Si la photo ne contient pas d’informations d’aspect pertinent, comme le dessous d’un taxi – le système utilise l’apparence du modèle 3D en stock.
Bien qu’une grande variété de modèles en stock soit disponible en ligne, les modèles ne sont pas disponibles pour tous les objets dans une photo. Mais grâce à la large diffusion de technologies de numérisation et d’impression 3D, la sélection est de mieux en mieux et de plus en plus importante. La question la plus urgente sera bientôt, non pas de savoir si un modèle particulier existe en ligne, mais si l’utilisateur peut le trouver.
http://www.cmu.edu/news/stories/archives/2014/august/august5_photoeditingin3D.html
