Online Tracking of Outdoor Lighting Variations for Augmented Reality with Moving Cameras - Archive ouverte HAL Access content directly
Journal Articles IEEE Transactions on Visualization and Computer Graphics Year : 2012

Online Tracking of Outdoor Lighting Variations for Augmented Reality with Moving Cameras

(1, 2) , (3, 4, 1)
1
2
3
4

Abstract

In augmented reality, one of key tasks to achieve a convincing visual appearance consistency between virtual objects and video scenes is to have a coherent illumination along the whole sequence. As outdoor illumination is largely dependent on the weather, the lighting condition may change from frame to frame. In this paper, we propose a full image-based approach for online tracking of outdoor illumination variations from videos captured with moving cameras. Our key idea is to estimate the relative intensities of sunlight and skylight via a sparse set of planar feature-points extracted from each frame. To address the inevitable feature misalignments, a set of constraints are introduced to select the most reliable ones. Exploiting the spatial and temporal coherence of illumination, the relative intensities of sunlight and skylight are finally estimated by using an optimization process. We validate our technique on a set of real-life videos and show that the results with our estimations are visually coherent along the video sequences.
Vignette du fichier
5500.jpg (248.99 Ko) Télécharger le fichier Fichier principal
Vignette du fichier
vr.pdf (885.54 Ko) Télécharger le fichier
Vignette du fichier
00495.jpg (167.69 Ko) Télécharger le fichier
Vignette du fichier
01038.jpg (154.54 Ko) Télécharger le fichier
Vignette du fichier
01524.jpg (170.9 Ko) Télécharger le fichier
Vignette du fichier
1200.png (375.63 Ko) Télécharger le fichier
Vignette du fichier
300.png (376.19 Ko) Télécharger le fichier
Vignette du fichier
4097.jpg (249.04 Ko) Télécharger le fichier
Vignette du fichier
4340.jpg (256.12 Ko) Télécharger le fichier
Vignette du fichier
900.png (342.89 Ko) Télécharger le fichier
Vignette du fichier
building.flv (27.92 Mo) Télécharger le fichier
Vignette du fichier
car.flv (4.15 Mo) Télécharger le fichier
Vignette du fichier
color_cluster_191.png (16.97 Ko) Télécharger le fichier
Vignette du fichier
feature_Figure_191.png (393.06 Ko) Télécharger le fichier
Vignette du fichier
init_Figure_191.png (391.39 Ko) Télécharger le fichier
Vignette du fichier
lab_1000.png (466.06 Ko) Télécharger le fichier
Vignette du fichier
lab_505.png (467.42 Ko) Télécharger le fichier
Vignette du fichier
lab_832.png (479.42 Ko) Télécharger le fichier
Vignette du fichier
MVI_1614_00508.jpg (139.7 Ko) Télécharger le fichier
Vignette du fichier
MVI_1614_01118.jpg (139.2 Ko) Télécharger le fichier
Vignette du fichier
MVI_1614_01654.jpg (140.33 Ko) Télécharger le fichier
Vignette du fichier
Online_Tracking_of_Outdoor_Lighting_Variations_for_Augmented_Reality_with_Moving_Cameras.ppt (3.32 Mo) Télécharger le fichier
Vignette du fichier
planarSeg.png (333.53 Ko) Télécharger le fichier
Vignette du fichier
shadow.png (6.71 Ko) Télécharger le fichier
Vignette du fichier
wrong1200.png (376.83 Ko) Télécharger le fichier
Vignette du fichier
wrong300.png (375.99 Ko) Télécharger le fichier
Vignette du fichier
wrong900.png (343.63 Ko) Télécharger le fichier
Format : Figure, Image
Origin : Files produced by the author(s)
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Video
Format : Video
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Other
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Format : Figure, Image
Loading...

Dates and versions

hal-00664943 , version 1 (07-03-2012)

Identifiers

Cite

Yanli Liu, Xavier Granier. Online Tracking of Outdoor Lighting Variations for Augmented Reality with Moving Cameras. IEEE Transactions on Visualization and Computer Graphics, 2012, 18 (4), pp.573-580. ⟨10.1109/TVCG.2012.53⟩. ⟨hal-00664943⟩
573 View
1087 Download

Altmetric

Share

Gmail Facebook Twitter LinkedIn More