mardi 12 janvier 2010

Rapport décembre 2009

1. Bilan rapide

Les travaux menés jusqu'à présent ont porté sur la transformation d'un logiciel de ray-tracing open source en un outil utilisable pour nos tests, à savoir un outil d'inversion de l'équation radiométrique par le principe classique d'analyse/synthèse minimisant les différences entre une image simulée et une image réelle.

Le ray-tracer retenu à cet effet est LuxRender, qui a l'avantage de posséder une IHM et de mettre à disposition des exporteurs pour différents logiciels de modélisation 3D, dont Blender (open source). LuxRender est open source (GPL), et est basé sur PBRT (Physically Based Rendering), développé à l'Université de Stanford.

Les modifications apportées jusqu'à maintenant à LuxRender sont principalement :

  • la possibilité de spécifier la réponse spectrale des canaux de la caméra

  • la possibilité de sortir des images d'éclairement au sol, et non plus seulement des images de luminance au niveau du capteur

Le calcul d'image d'éclairement a permis une première validation de l'outil, en réalisant l'inversion sur une scène, dans le cas lambertien, sous hypothèse d'une atmosphère sans diffusion ni absorption. Dans ce cas, on a pour tout point P de la scène : (1).

Cette inversion triviale a été réalisée sur un modèle 3D synthétique, qui a permis de simuler une image de luminance (avec la version initiale de LuxRender ; cf. fig. 1), et de calculer une image d'éclairement (avec la version modifiée de LuxRender ; cf. fig. 2). L'équation (1) nous a alors redonné les valeurs de la réflectance (ici un albédo) des matériaux utilisés dans le modèle 3D, avec une très bonne précision (cf. fig. 3).

Il n'y avait ici pas de difficulté théorique, d'autant plus que l'on a utilisé uniquement des données simulées, mais cela a permis de prendre en main le code source de LuxRender.




Fig. 1 : Image de
luminance « réelle » (ici simulée)





Fig. 2 : Image
d'éclairement simulé





Fig. 3 : Image de
réflectance calculée


L'algorithme présenté précédemment est en réalité itératif : on a besoin des réflectances des matériaux pour estimer les termes réfléchis de l'éclairement. On initialise donc ces réflectances arbitrairement, on les affine par division de la luminance par l'éclairement simulé, et on réitère jusqu'à convergence.

En pratique dans le cas présenté ici, la convergence est très rapide : 3 itérations (faites « à la main ») ont été tout à fait suffisantes, en donnant un albédo initial de 0.5 à tous les matériaux.


2. Évolution envisagée

Dans le cas général (utilisation d'un modèle de BRDF par type de matériau et coefficient d'extinction de l'atmosphère non nul), on n'a pas de formule aussi simple pour l'inversion, et il faudra procéder par minimisation.

Cette minimisation nécessite de faire un lancer de rayons complet à chaque itération, i.e. à chaque fois que l'on fait varier les paramètres à estimer (paramètres des BRDF, et éventuellement des sources lumineuses et des conditions atmosphériques). Recalculer une image par ray-tracing à chaque itération mènerait à des temps de calcul énormes ; sur une idée de M. Brédif, on souhaite donc n'effectuer qu'une seule phase de lancer de rayons, en calculant pour chaque pixel i de l'image de luminance rendue non plus une valeur de type RGB, mais l'expression de cette valeur en fonction des paramètres de la scène : .

En effet, ces fonctions fi des paramètres ne dépendraient plus que de la géométrie de la scène, et ce pré-calcul permettrait de synthétiser rapidement la luminance en fonction des paramètres à estimer (extension des techniques de ré-éclairement au changement de matériaux).

Pour introduire cette optimisation dans LuxRender, il faut que les rayons lancés ne transportent pas seulement une valeur numérique, mais une expression contenant à la fois des constantes liées à la géométrie de la scène et des variables symboliques représentant les paramètres à estimer. D'après une première analyse (cf. fig.4), cela paraît possible sans trop modifier le fonctionnement de base de LuxRender, en rajoutant la création des variables symboliques à la lecture de la scène (classe Scene du diagramme UML), et en faisant manipuler ces variables symboliques lors du lancer de rayons (classe SurfaceIntegrator).

Cette modification de LuxRender pour lui faire manipuler des variables symboliques est donc le travail actuellement en cours.


3. Conclusion

Une fois validé, l'outil LuxRender modifié serait une base pour réaliser les objectifs de cette thèse. En effet, on dispose d'un jeu d'images terrestres réelles d'une scène urbaine. Si l'on sait les segmenter en zones homogènes, on pourrait alors estimer les paramètres du modèle de BRDF choisi pour chaque zone. Pour cela, il sera également indispensable d'utiliser la redondance apportée par le multi-vue.

.

Aucun commentaire:

Enregistrer un commentaire