Petitcoursphoto Print

Petit cours de Petit cours de
photographie
numérique
Préliminaire photographie
numérique
Cours d’ouverture L-INP F. Sur - ENSMN F. Sur - ENSMN
Une brève histoire Photographie = écriture de la lumière

Une brève histoire
de la photographie de la photographie
Petit cours de La lumière

Chambre noire
Objectif
But du cours : La lumière
Chambre noire
Objectif
photographie numérique Profondeur de champ

Défauts optiques
Exposition
Une introduction aux problèmes scientifiques de la
Profondeur de champ
Défauts optiques
Exposition
L’image numérique
photographie (numérique) ; L’image numérique
Capteurs Capteurs
Bruit En particulier, impact du logiciel sur l’image ; Bruit
Frédéric Sur Couleur
Dynamique
Couleur
Dynamique
Numérisation Problèmes scientifiques / techniques actuels et Numérisation
École des Mines de Nancy Fichier informatique

implications sur ce qu’est une image numérique.
Fichier informatique
La photographie La photographie
Loria computationnelle computationnelle
Correction des défauts Correction des défauts
optiques optiques
www.loria.fr/~sur/enseignement/ouvertureLINP/
Débruitage
Restauration
Pour aller plus loin : traitement du signal (math. & proba.), Débruitage
Restauration
HDR
Caméra plénoptique
électronique, optique, cours de photographie, histoire de HDR
Conclusion l’art, etc. Conclusion
1/126 2/126

Une brève histoire de la photographie photographie
numérique
Chambre noire (camera obscura, pinhole camera) photographie
numérique
F. Sur - ENSMN F. Sur - ENSMN
Une brève histoire Une brève histoire

Ou : qu’est-ce qu’une image ? La lumière

Chambre noire
La lumière
Chambre noire
Objectif Objectif
Profondeur de champ Profondeur de champ
Défauts optiques Défauts optiques
Exposition Exposition
→ 1997 : première photographie couleur en une du L’image numérique L’image numérique

Capteurs Capteurs
New York Times. Bruit Bruit
Couleur Couleur
Dynamique Dynamique
→ ∼ 6 milliards de photos sur Flickr en 2011. Numérisation Numérisation
Fichier informatique Fichier informatique
→ ∼ une heure de vidéo déposée chaque seconde sur La photographie

computationnelle
La photographie
computationnelle
Youtube en 2012. Correction des défauts
optiques
Correction des défauts
optiques
Débruitage Débruitage
Restauration Restauration
HDR
Sténopé HDR
Conclusion Conclusion
Connu d’Aristote (4ème siècle av. J.-C.)
Renaissance : découverte de la perspective
3/126 4/126
Nicéphore Niépce photographie
numérique
Point de vue du Gras photographie
numérique

La lumière La lumière
Chambre noire Chambre noire
Objectif Objectif
L’image numérique L’image numérique

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
Numérisation Numérisation
computationnelle computationnelle
optiques optiques
HDR HDR
Caméra plénoptique Caméra plénoptique
Conclusion Première photographie (1827) Conclusion

Procédé héliographique : 1820-1830 Temps de pose : sans doute plusieurs jours !
Surface sensible : bitume de Judée sur une plaque de verre Problème : arrêter la réaction chimique due à la lumière.
5/126 6/126

Daguerréotype photographie
numérique
Le Boulevard du Temple (1838) photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
Louis Daguerre, associé de Niépce. Numérisation Numérisation
Plaque de cuivre recouverte de iodure d’argent, développée à La photographie

computationnelle
La photographie
computationnelle
la vapeur de mercure. Correction des défauts
optiques
optiques
Positif uniquement (pas de reproduction) Débruitage
Restauration
Débruitage
Restauration
Brevet acquis par le gouvernement français, qui en dote HDR
HDR
libéralement le monde entier . Conclusion Conclusion
Daguerréotypes chers, mais daguerréotypomanie .

À partir d’aujourd’hui, la peinture est morte ! Temps de pose : > 10 minutes.
7/126 8/126
Procédé Talbot : le calotype photographie
numérique
Noyade de Hippolyte Bayard, 1840 photographie
numérique

Positif sur papier
de la photographie (pas de reproduction) de la photographie
Chambre noire 1839 : première exposition Chambre noire
Abbaye de Lacock (1835) Objectif Objectif
Profondeur de champ
Défauts optiques
de photographies. Profondeur de champ
Défauts optiques
1ère photographie avec Exposition Exposition
négatif. L’image numérique

Capteurs
Le cadavre du Monsieur que vous voyez ci-derrière est celui de M. Bayard, inventeur du procédé dont Capteurs
Bruit Bruit
Couleur vous venez de voir ou dont vous allez voir les merveilleux résultats. À ma connaissance, il y a à peu près Couleur
Dynamique Dynamique
Numérisation trois ans que cet ingénieux et infatigable chercheur s’occupait de perfectionner son invention. Numérisation
L’Académie, le Roi et tous ceux qui ont vu ces dessins que lui trouvait imparfaits les ont admirés comme
vous les admirez en ce moment. Cela lui fait beaucoup d’honneur et ne lui a pas valu un liard. Le
optiques optiques
Débruitage
gouvernement qui avait beaucoup trop donné à M. Daguerre a dit ne rien pouvoir faire pour M. Bayard Débruitage
William Henry Fox Talbot : photogenic drawing . Restauration
et le malheureux s’est noyé. Oh ! instabilité des choses humaines ! Les artistes, les savants, les journaux
Restauration
HDR HDR
Feuille de papier enduite de chlorure d’argent dans sa se sont occupés de lui depuis longtemps et aujourd’hui qu’il y a plusieurs jours qu’il est exposé à la
chambre noire : le négatif. morgue personne ne l’a encore reconnu ni réclamé. Messieurs et Dames, passons à d’autres, de crainte
que votre odorat ne soit affecté, car la figure du Monsieur et ses mains commencent à pourrir comme
Moins bonne qualité que daguerréotype, et brevet.
9/126 vous pouvez le remarquer.
10/126

La photographie en couleurs : l’autochrome photographie
numérique
Kodak Brownie (1900) photographie
numérique

Frères Lumière 1903. Objectif Objectif
Grains de fécule de Exposition Exposition

pomme de terre teints Capteurs Capteurs
en rouge, vert, bleu, sur Bruit
Couleur
Bruit
Couleur
une plaque de verre. Dynamique
Numérisation
Dynamique
Numérisation
Image unique. La photographie La photographie
optiques optiques
HDR HDR
George Eastman (fondateur Kodak) : film celluloid (1885). Caméra plénoptique
Temps de pose : plusieurs minutes. Premiers films en couleur modernes : Kodachrome (1935) et
Agfacolor (1936).
11/126 12/126
Leica (1925) photographie
numérique
Polaroid (1948) photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
Oskar Barnack - Leica 1925 Correction des défauts
optiques
optiques
Film 24x36 : appareil compact Restauration Restauration
HDR HDR
Problème petit format : agrandissement nécessaire Caméra plénoptique Caméra plénoptique
(donc grain de la pellicule fin) Conclusion Tirage instantané Conclusion
13/126 14/126

Etc. photographie
numérique
L’appareil photo numérique photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
Jusque fin XXème siècle, améliorations des techniques Restauration Restauration
HDR HDR
chimie / optique / électronique Caméra plénoptique Caméra plénoptique
Mavica (Sony) : prototype en 1981.
(automatismes : autofocus, mesure d’exposition. . .) Conclusion Conclusion
490 x 570 points (280 000 pixels)
15/126 16/126
APN photographie
numérique
XXIème siècle (1) photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
1997-2000 Premiers APN grand public : Sony Mavica. computationnelle computationnelle
Lecteur de disquette 3,5 pouces optiques optiques
1.3Mp Restauration Restauration
HDR HDR
600 - 1000 dollars Caméra plénoptique
10-20 megapixels Caméra plénoptique
Camera : quelques dollars.
Mais traitement d’images (logiciel)
17/126 18/126

XXIème siècle (2) photographie
numérique
Vers la photographie computationnelle photographie
numérique

Chambre noire
Objectif
Définition : (wikipedia) Chambre noire
Objectif
Profondeur de champ
Défauts optiques
Computational photography or computational imaging refers Profondeur de champ
Défauts optiques
Exposition
to computational image capture, processing, and Exposition

Capteurs
manipulation techniques that enhance or extend the Capteurs
Bruit
Couleur capabilities of digital photography. Bruit
Couleur
Dynamique Dynamique
→ à la croisée de l’optique, du traitement du signal / image, Fichier informatique
computationnelle de la vision par ordinateur. computationnelle
optiques optiques
HDR HDR
Logiciel embarqué Conclusion Conclusion
19/126 20/126
High dynamic range (HDR) photographie
numérique
Appareil photo plénoptique photographie
numérique

Objectif Objectif
Profondeur de champ
Défauts optiques
Lytro Profondeur de champ
Défauts optiques
Exposition
(2012) Exposition

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
Restauration
HDR
Mise au point en post-traitement. Restauration
HDR
Conclusion
Lien www Conclusion
21/126 22/126

Gigapan photographie
numérique
Photosynth 3D (Microsoft) photographie
numérique

Objectif Objectif
Carnegie Mellon University / NASA / Google Défauts optiques Défauts optiques
Exposition
Que faire avec une grande collection de photographies ? Exposition

→ Panoramas gigapixels interactifs. Capteurs Capteurs
Bruit
Couleur
Lien www Bruit
Couleur
Dynamique Dynamique
Lien www Numérisation Numérisation
optiques optiques
HDR HDR
23/126 24/126
Plan photographie
numérique
Plan photographie
numérique

1 Une brève histoire de la photographie Une brève histoire
1 Une brève histoire de la photographie La lumière La lumière
Chambre noire 2 La lumière Chambre noire
Objectif Objectif
Profondeur de champ Chambre noire Profondeur de champ
2 La lumière Défauts optiques Défauts optiques
Exposition Objectif Exposition
L’image numérique Profondeur de champ L’image numérique

3 L’image numérique Capteurs
Bruit Défauts optiques
Capteurs
Bruit
Couleur Couleur
Dynamique Exposition Dynamique
4 La photographie computationnelle Fichier informatique Fichier informatique
computationnelle 3 L’image numérique computationnelle
5 Conclusion Correction des défauts
optiques
optiques
Restauration
HDR
4 La photographie computationnelle Restauration
HDR
5 Conclusion
25/126 26/126

Plan photographie
numérique
Le modèle de la caméra à sténopé photographie
numérique
F. Sur - ENSMN U F. Sur - ENSMN

V
M(x, y , z) Une brève histoire
de la photographie Y de la photographie
X
2 La lumière Chambre noire Chambre noire
Objectif Z Objectif
Chambre noire Profondeur de champ C 0
C Profondeur de champ
Objectif Exposition Exposition
Profondeur de champ L’image numérique

m(u, v )
Capteurs Capteurs
Défauts optiques Bruit Bruit
Couleur P Couleur
Exposition Dynamique Dynamique
3 L’image numérique computationnelle computationnelle
optiques optiques
Débruitage
C : centre optique Débruitage
HDR
Restauration
HDR
Caméra plénoptique (CC 0 ) : axe optique Caméra plénoptique
5 Conclusion
Conclusion
C 0 de coordonnées (0, 0, −f ) dans (C , X, Y, Z) Conclusion
f : distance focale
27/126 28/126
Le modèle de la caméra à sténopé photographie
numérique
Anamorphose de volume photographie
numérique
U F. Sur - ENSMN F. Sur - ENSMN
V
M(x, y , z) Une brève histoire Une brève histoire
Y de la photographie de la photographie
X
Z Objectif Objectif
C0 C Profondeur de champ Profondeur de champ

m(u, v ) Capteurs Capteurs
Bruit Bruit
P Couleur Couleur
Dynamique Dynamique
Théorème de Thalès et relation entre (U, V ) et (X , Y ) computationnelle computationnelle
donne (u, v ) en fonction de (x, y , z). Correction des défauts
optiques
optiques
Application : (u, v ) coordonnées dans l’image en pixels, Restauration

HDR
Restauration
HDR
(x, y , z) coordonnées dans le monde 3D. Caméra plénoptique Caméra plénoptique
La focale f régit le rapport de reproduction. Source : DXO

→ défaut inhérent à la projection sur un plan.
28/126 29/126

Inconvénients de la caméra à sténopé photographie
numérique
Plan photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Défauts optiques Bruit
Couleur Couleur
→ nécessite un temps de pose long La photographie

computationnelle 3 L’image numérique
La photographie
computationnelle
(plusieurs secondes / minutes avec un film moderne) Correction des défauts
optiques
optiques
→ taille du sténopé :
Restauration
HDR
HDR
trop grand : image floue, peu contrastée Conclusion

5 Conclusion
Conclusion
trop petit : diffraction (donc flou)

30/126 31/126
Avec une lentille photographie
numérique
Exercice 1 photographie
numérique

Lentille de la photographie de la photographie
U
V M(x, y , z)
Y Chambre noire Chambre noire
X Objectif Objectif
C Z L’image numérique L’image numérique

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
m(u, v ) Dynamique Dynamique
P
optiques optiques
(modèle de lentille mince) Restauration Restauration
HDR HDR
avec lentille : intégration des rayons lumineux Caméra plénoptique Caméra plénoptique
→ objectif Conclusion Conclusion
Lien www
32/126 33/126

Solution photographie
numérique
Exercice 2 photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
HDR HDR
35/126 36/126
Solution photographie
numérique
Plan photographie
numérique

Objectif Objectif

Capteurs Capteurs
Couleur Couleur
optiques optiques
Restauration
HDR
HDR
5 Conclusion
38/126 39/126

Notion de profondeur de champ photographie
numérique
Notion de profondeur de champ photographie
numérique

Objectif Objectif
Grande ouverture Faible ouverture L’image numérique
Capteurs Capteurs
Bruit
Couleur
À focale fixée : Bruit
Couleur
Dynamique
Numérisation ouverture grande : faible profondeur de champ Dynamique
Numérisation
ouverture petite : grande profondeur de champ
Diaphragme = pupille computationnelle computationnelle
À ouverture fixée : Correction des défauts
Lien www optiques
Débruitage longue focale : plus faible profondeur de champ optiques
Débruitage
HDR faible focale : plus grande profondeur de champ HDR
Conclusion → portrait : focale assez longue, grande ouverture Conclusion
(pas d’anamorphose, sujet détaché du fond)

→ paysage : diaphragme fermé.
40/126 41/126
Plan photographie
numérique
Défauts des lentilles : vignettage photographie
numérique
1 Une brève histoire de la photographie Une brève histoire Une brève histoire
Objectif Objectif
Chambre noire Profondeur de champ Profondeur de champ
Objectif Exposition Exposition
Profondeur de champ L’image numérique L’image numérique

Capteurs Capteurs
Défauts optiques Bruit Bruit
Couleur Couleur
Exposition Dynamique Dynamique
3 L’image numérique computationnelle computationnelle
optiques optiques
HDR
Restauration
HDR
5 Conclusion Problème inhérent à la lentille mince / au sténopé.
42/126 43/126

Défauts des lentilles : distorsions géométriques photographie
numérique
Défauts des lentilles : aberrations chromatiques photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques Corrections : Correction des défauts
optiques
Restauration Utilisation de fluorine Restauration
HDR HDR
En barrillet En coussinet Caméra plénoptique Double achromatique Caméra plénoptique
Conclusion Triplet apochromatique Conclusion
Corrections : groupement de lentilles Cas de la photo IR ou UV.

44/126 45/126
Défauts des lentilles : et aussi. . . photographie
numérique
Plan photographie
numérique

– Astigmatisme / coma (défauts de non-uniformité)
– Courbure de champ Une brève histoire
– Réflexions parasites diffuses (flare). . . La lumière La lumière
Objectif Objectif
Finalement : Profondeur de champ Chambre noire Profondeur de champ

Capteurs Capteurs
Couleur Couleur
optiques optiques
Restauration
HDR
HDR
Focale fixe : 4 à 8 lentilles, éventuellement groupées. Conclusion Conclusion
Téléobjectif : 2 à 7 groupes (jusque 15-20 lentilles). 5 Conclusion
46/126 47/126

Éclairement : le nombre d’ouverture photographie
numérique
Ouverture : f /N photographie
numérique

Objectif Objectif

Capteurs Capteurs
Diaphragme vu en F sous l’angle solide : Ω = πD 2 /(4f 2 ). Bruit

Couleur
Bruit
Couleur
Éclairement par un flux lumineux parallèle à l’axe optique Dynamique

Numérisation
Dynamique
Numérisation
(en lux) : Fichier informatique Fichier informatique
πD 2 πTL computationnelle computationnelle
E =Ω·T ·L= TL = Correction des défauts Correction des défauts
4f 2 4N 2 optiques
Ouverture du diaphragme : D = f /N optiques
T : facteur de transmission de l’objectif Restauration

HDR → objectif ouvrant à f /2 (i.e. N = 2), f /4 (i.e. N = 4), etc. Restauration
HDR
L : luminance de la source lumineuse (proportionnelle à Éclairement inversement proportionnel à N 2
l’intensité lumineuse de la source).
Conclusion √ Conclusion
→ ouvertures standardisées en progression géom. raison 2 :
N = f /D est le nombre d’ouverture f/1, f/1,4, f/2, f/2.8, f/4, f/5,6, f/8 ; f/11. . . (cran)
48/126 49/126
Principe de réciprocité photographie
numérique
Exercice photographie
numérique

Durée d’exposition : t Chambre noire Même exposition pour : Chambre noire
Objectif Objectif
Exposition lumineuse : H = E · t Défauts optiques

Exposition t = 1/100 sec., f/4
Défauts optiques
Exposition
→ quantité de lumière cumulée par unité de surface pendant t L’image numérique L’image numérique
(en lux.s) Capteurs
Bruit
t= sec., f/2,8 Capteurs
Bruit
Couleur Couleur
Principe de réciprocité :
Dynamique
Numérisation t = 1/25 sec., f/ Dynamique
Numérisation
Multiplier (resp. diviser) le temps de pose par 2 en fermant La photographie t= sec, f/22 La photographie
(resp. ouvrant) d’un cran donne la même exposition. Correction des défauts Correction des défauts
optiques optiques
HDR HDR
50/126 51/126

Sensibilité photographie
numérique
Exercice photographie
numérique
Photographie correctement exposée : la surface sensible Une brève histoire Une brève histoire
reçoit la bonne quantité de lumière La lumière Exemple : même exposition pour : La lumière
→ celle qui permet d’obtenir une image qui n’est ni trop Objectif Objectif
claire ni trop sombre .

Profondeur de champ
Défauts optiques
100 ISO, t = 1/100 sec., f/4 Profondeur de champ
Défauts optiques
(notion forcément un peu arbitraire) L’image numérique ISO, t = 1/200 sec., f/2,8 L’image numérique
Capteurs Capteurs
Bruit Bruit
Définition : sensibilité S = H0 /H
Couleur
Dynamique
200 ISO, t = 1/100 sec., f/ Couleur
Dynamique
où H est l’exposition nécessaire, et H0 une constante. Fichier informatique
200 ISO, t = sec., f/4 Fichier informatique
Unité de la sensibilité : ISO. La photographie

computationnelle
La photographie
computationnelle
Correction des défauts ISO, t = 1/800 sec., f/5,6 Correction des défauts
→ une surface de sensibilité 200 ISO a besoin de 2 fois optiques
Débruitage
optiques
Débruitage
moins d’exposition lumineuse qu’une surface de sensibilité Restauration
HDR
Restauration
HDR
100 ISO pour être correctement exposée. Caméra plénoptique Caméra plénoptique
53/126 54/126
Ouverture / temps de pose / sensibilité photographie
numérique
L’obturateur : contrôle du temps de pose photographie
numérique
F. Sur - ENSMN Exemple de l’obturateur plan focal (à rideaux) F. Sur - ENSMN

→ effet rolling shutter Une brève histoire
La lumière Curtain 2 La lumière

Objectif Objectif
Sensor
Profondeur de champ x Profondeur de champ
Exposition y Exposition
→ effets esthétiques. L’image numérique L’image numérique

Capteurs Capteurs
Bruit Bruit
Lien www Couleur

Dynamique
Couleur
Dynamique
Fichier informatique Curtain 1 Fichier informatique
optiques Jacques-Henri Lartigue optiques
Restauration Une Delage au grand prix de l’Automobile-Club de France de 1912 Restauration
HDR HDR
Lien www
Définition : Synchro-X (1/100 s . . .1/500 s)

56/126 57/126

Plan photographie
numérique
Plan photographie
numérique

1 Une brève histoire de la photographie 1 Une brève histoire de la photographie
2 La lumière La lumière
Chambre noire
Chambre noire
Objectif Objectif
3 L’image numérique Exposition 3 L’image numérique Exposition
Capteurs L’image numérique Capteurs L’image numérique

Capteurs Capteurs
Bruit Bruit Bruit Bruit
Couleur Couleur
Couleur Dynamique Couleur Dynamique
Dynamique Fichier informatique Dynamique Fichier informatique
Numérisation La photographie
computationnelle
computationnelle
Fichier informatique Correction des défauts
optiques
optiques
HDR HDR
4 La photographie computationnelle Caméra plénoptique 4 La photographie computationnelle Caméra plénoptique
5 Conclusion 5 Conclusion
58/126 59/126
Les capteurs imageurs photographie
numérique
Plan photographie
numérique

1 Une brève histoire de la photographie
La lumière
Chambre noire
Chambre noire
Objectif Objectif
Exposition 3 L’image numérique Exposition
L’image numérique Capteurs L’image numérique

Capteurs Capteurs
Bruit Bruit Bruit
Couleur Couleur
Dynamique Couleur Dynamique
Fichier informatique Dynamique Fichier informatique
La photographie
computationnelle
computationnelle
Deux grandes familles : CCD (1969) / CMOS (1963)

optiques
optiques
Années 1980 : applications vidéo Restauration Restauration
HDR HDR
Années 1990 : applications photo Caméra plénoptique 4 La photographie computationnelle Caméra plénoptique
But : mesurer une tension en chaque photosite fonction de
l’exposition lumineuse. 5 Conclusion
60/126 61/126

La formation de l’image : le bruit photographie
numérique
Exemple photographie
numérique
→ tension en chaque photosite proportionnelle à l’exposition. Une brève histoire Une brève histoire
Tension haute : site clair de la photographie de la photographie
Tension basse : site sombre La lumière La lumière

Objectif Objectif
En chaque photosite : Défauts optiques Défauts optiques
condensateur L’image numérique L’image numérique

Capteurs Capteurs
photosite amplificateur Bruit Bruit
photons −−−−−→ electrons −−−−−−−−−→ tension Couleur Couleur
Dynamique Dynamique
Sources d’incertitude dans la mesure de la tension : computationnelle computationnelle
courant d’obscurité (residual dark current) optiques optiques
bruit photonique (shot noise) Restauration

HDR
Restauration
HDR
bruit de lecture (read-out noise) Conclusion Conclusion
62/126 63/126
Modèle stochastique photographie
numérique
Rappel : la loi de (Siméon Denis) Poisson photographie
numérique
Tension en un photosite pendant une durée d’exposition t : F. Sur - ENSMN λk −λ F. Sur - ENSMN
P(X = k) = e
u = µ + g ηp+d + δ Une brève histoire
k! Une brève histoire
µ : décalage (offset) Chambre noire Chambre noire
→ fixé par le constructeur Objectif
Profondeur de champ
Objectif
Profondeur de champ
p nombre moyen d’électrons générés par les photons Exposition Exposition
arrivant pendant t L’image numérique L’image numérique

Capteurs Capteurs
→ proportionnel à l’exposition lumineuse par l’intermédiaire Bruit Bruit
Couleur Couleur
de l’efficacité quantique Dynamique Dynamique
d nombre moyen d’électrons spontanément générés Fichier informatique Fichier informatique
pendant t (dark current) La photographie

computationnelle
La photographie
computationnelle
ηp+d variable aléatoire de Poisson (λ = p + d) Correction des défauts
optiques
optiques
g : coefficient d’amplification (gain) Restauration Restauration
HDR HDR
δ variable aléatoire gaussienne (moyenne 0, variance σ 2 ) Caméra plénoptique Caméra plénoptique
Remarque : d dépend de la température et de t.

→ en conditions normales, pour t < 1 sec., d = 0. Propriété : E (X ) = Var(X ) = λ.
64/126 65/126

Propriété du bruit photographie
numérique
Exemple : variance empirique sur 100 images photographie
numérique

Modèle stochastique : de la photographie de la photographie
u = µ + g ηp+d + δ Objectif Objectif

Conséquence : Capteurs u Capteurs
Bruit Bruit
E (u) = µ + g (p + d) Couleur
Dynamique 180
Couleur
Dynamique
20
Var(u) = g 2 (p + d) + σ 2 = gE (u) + σ 2 − g µ Fichier informatique 40 160 Fichier informatique
La photographie 60 140
La photographie
computationnelle 80 120 computationnelle
Propriété : la variance du bruit est une fonction affine de la optiques 100 100 optiques
Débruitage 120 80
Débruitage
tension mesurée moyenne (représentant l’exposition). Restauration
HDR 140 60
Restauration
HDR
Caméra plénoptique 160 40
Conclusion 180
20 Conclusion
Var(u) 200
50 100 150 200 250 300 350
66/126 67/126
Le gain règle la sensibilité photographie
numérique
Illustration photographie
numérique
Hypothèse : d = 0 (conditions normales ) Une brève histoire Une brève histoire


E (u) = µ + gp La lumière La lumière
Var(u) = gE (u) + σ 2 − g µ Objectif Objectif
→ si durée de pose divisée par 2 (ou diaphragme fermé d’un L’image numérique L’image numérique
cran), alors p divisé par 2, mais on garde la même tension Capteurs Capteurs
Bruit Bruit
moyenne E (u) en multipliant le gain g par 2. Couleur Couleur
Dynamique Dynamique
→ le gain permet de régler la sensibilité (ISO) du capteur. Fichier informatique Fichier informatique
Contrepartie : variance du bruit % quand gain %. Correction des défauts
optiques
optiques
Remarque pour les poses longues : compromis gain / temps HDR HDR
de pose (dark noise) Conclusion Conclusion
68/126 69/126

Question photographie
numérique
Plan photographie
numérique
Intérêt d’avoir des gros photosites ? F. Sur - ENSMN F. Sur - ENSMN

La lumière
Chambre noire
Chambre noire
Objectif Objectif

Capteurs Capteurs
Bruit Bruit Bruit
Couleur Couleur
La photographie
computationnelle
computationnelle
optiques
optiques
HDR HDR
Caméra plénoptique 4 La photographie computationnelle Caméra plénoptique
5 Conclusion
70/126 72/126
La couleur : matrice de Bayer et démosaı̈çage photographie
numérique
Défauts potentiels du démosaı̈çage photographie
numérique

Objectif Objectif
L’image numérique Fausses couleurs L’image numérique

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
HDR HDR
Zippering Caméra plénoptique
Alternative : capteur Foveon. Lien www

73/126 74/126

Plan photographie
numérique
La dynamique photographie
numérique

Chambre noire
La lumière
Chambre noire
Objectif Objectif
3 L’image numérique Exposition Exposition
Capteurs L’image numérique L’image numérique

Capteurs Capteurs
Bruit Bruit Bruit
Couleur Couleur
Couleur Dynamique Dynamique
Dynamique Fichier informatique
Capacité des puits limitée. Fichier informatique
computationnelle
La photographie
computationnelle
Définition : gamme dynamique Correction des défauts
optiques optiques
Débruitage valeur utile entre plus petite intensité mesurable (au dessus Débruitage
HDR du bruit) et plus grande intensité lumineuse mesurable HDR
4 La photographie computationnelle Caméra plénoptique Caméra plénoptique
(avant saturation)
→ gamme dynamique limitée.
5 Conclusion
Remarque : dynamique & quand ISO %.
75/126 76/126
Exemple photographie
numérique
Plan photographie
numérique

La lumière
Chambre noire
Chambre noire
Objectif Objectif

Capteurs Capteurs
Bruit Bruit Bruit
Couleur Couleur
La photographie
computationnelle
computationnelle
Expo. pour hautes lumières Expo. pour faibles lumières Correction des défauts
optiques
optiques
HDR HDR
Caméra plénoptique 4 La photographie computationnelle Caméra plénoptique
5 Conclusion
77/126 78/126

La quantification en niveaux de gris photographie
numérique
Résolution des niveaux de gris photographie
numérique
→ la tension mesurée en chaque photosite doit être F. Sur - ENSMN F. Sur - ENSMN
transformée en une suite de bits pour être codée Une brève histoire Une brève histoire
informatiquement. de la photographie de la photographie
conversion analogique → numérique (CAN) La lumière La lumière

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques 8 bits 2 bits Correction des défauts
optiques
Exemple avec résolution de 3 bits. HDR
Résolution des CAN : 10-14 bits HDR
Conclusion (pas la peine d’augmenter la résolution à cause de la Conclusion

Rappel : 000 = 0 · 22 + 0 · 21 + 0 · 20 = 0 ; dynamique restreinte et du bruit).
011 = 0 · 22 + 1 · 21 + 1 · 20 = 3. . .
79/126 80/126
La résolution spatiale : échantillonnage photographie
numérique
Exemple d’aliasing photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
Théorème de Shannon (1948) - Nyquist (1929) : optiques
Débruitage
optiques
Débruitage
la fréquence d’échantillonnage doit être au moins le double HDR HDR
de la plus haute fréquence présente dans la signal à
numériser. Question : comment éviter l’aliasing ?
Sinon apparition d’aliasing.
81/126 82/126

Rappel : transformée de Fourier (discrète) photographie
numérique
Représentation fréquentielle d’une image photographie
numérique
Signal discret périodique : y0 , y1 , . . . yN−1 . F. Sur - ENSMN F. Sur - ENSMN
Notation : ωN = e 2iπ/N Une brève histoire

de la photographie
de la photographie
N/2−1 16
X Chambre noire Chambre noire
−nk Objectif 50 Objectif
Définition : Yn = yk ωN est la TF de (yn ). Profondeur de champ
100
14
Profondeur de champ
Défauts optiques 12 Défauts optiques
k=−N/2 Exposition 150 Exposition
200 10
Capteurs Capteurs
N/2−1 250 8
1 X Bruit Bruit
nk 300
Propriété : yn = Yk ωN est la TF inverse de (Yn ). Couleur
Dynamique
6 Couleur
Dynamique
N Numérisation
350
4 Numérisation
k=−N/2 Fichier informatique
400
450 2
Propriété fondamentale : DFT et IDFT se calculent computationnelle
500
100 200 300 400 500
0 computationnelle
rapidement grâce à l’algorithme de la Transformée de Fourier optiques
Débruitage
optiques
Débruitage
Rapide (FFT). (Cooley & Tuckey, IBM, 1965) HDR Image originale (Lena) et spectre (|Yk,l |) HDR
→ c’est cet algorithme qui a permis la révolution numérique ! (basses fréquences au milieu de l’image du spectre, hautes
fréquences aux extrémités)
Lien www
83/126 84/126
numérique
numérique
16 16
50 50
14 14
100
Une brève histoire 100
12 12
150 de la photographie 150 de la photographie
200 10 200 10
250 250
8 Chambre noire 8 Chambre noire
300 Objectif 300 Objectif
6 6
350
Profondeur de champ 350
Profondeur de champ
4
Défauts optiques 4
Défauts optiques
400 400
450 2 450 2
500 500
BF 100 200 300 400 500
0 Capteurs
Bruit
BF 100 200 300 400 500
0 Capteurs
Bruit
16 16
Couleur Couleur
50
14 Dynamique 50
14 Dynamique
100 Numérisation 100 Numérisation
12 Fichier informatique 12 Fichier informatique
150 150
200 10 La photographie 200 10 La photographie

250 8 250 8
300 optiques 300 optiques
6 6
350
Débruitage 350
Débruitage
4 Restauration 4 Restauration
400 400
HDR HDR
450 2 Caméra plénoptique 450 2 Caméra plénoptique
500 500
HF 100 200 300 400 500
0
HF 100 200 300 400 500
0
σ = 10 σ = 30
84/126 84/126

numérique
Solution pratique pour éviter l’aliasing photographie
numérique
16
50
14
100
12
150 de la photographie de la photographie
200 10
250 8 Chambre noire Chambre noire
300 Objectif Objectif
350
6
Profondeur de champ Choix technologique : Profondeur de champ
400
4
Exposition Pour éviter l’aliasing, on s’assure du respect de la condition Exposition
450 2
500
L’image numérique de Nyquist en coupant les hautes fréquences du signal avant L’image numérique
BF 100 200 300 400 500
0 Capteurs
Bruit numérisation.
Capteurs
Bruit
16
Couleur Couleur
50
14 Dynamique Dynamique
→ on rend l’image (un peu) floue !
100
12 Fichier informatique Fichier informatique
150
200 10 La photographie La photographie

250 8
300 optiques optiques
6
350
4 Restauration Restauration
400
HDR HDR
450 2 Caméra plénoptique Caméra plénoptique
500
HF 100 200 300 400 500
0
σ = 100
84/126 85/126
Filtre passe-bas / anti-aliasing photographie
numérique
Exemple d’aliasing (réel) photographie
numérique

Le “capteur” :
1 : filtre passe-bas (anti-aliasing) de la photographie de la photographie
2 : filtre de Bayer La lumière La lumière
3 : CMOS ou CCD Objectif Objectif

Capteurs Capteurs
→ nécessité de placer un filtre passe-bas devant le capteur Bruit
Couleur
Bruit
Couleur
(ou une optique peu piquée ) Dynamique

Numérisation
Dynamique
Numérisation
→ . . .ou course aux mégapixels : capteur de résolution La photographie La photographie
supérieure à la meilleure optique (limitée de toute façon par Correction des défauts Correction des défauts
optiques optiques
la diffraction). Débruitage Débruitage
HDR HDR
Conséquence : dans les appareils haut de gamme récents ou sur
les smartphones, le filtre AA est supprimé.
Canon EOS 1Ds

86/126 87/126

Plan photographie
numérique
Pré-traitement : correction gamma photographie
numérique
F. Sur - ENSMN
Fichier RAW : représentation linéaire de l’éclairement comme F. Sur - ENSMN
1 Une brève histoire de la photographie un “niveau de gris” (ou R,V1,V2,B)
de la photographie Mais : de la photographie
2 La lumière La lumière - les écrans ne produisent pas un éclairement proportionnel La lumière

Objectif au niveau de gris Objectif
Défauts optiques - l’oeil n’est pas linéaire : on perçoit mieux les nuances dans Défauts optiques
les tons sombres que dans les tons clairs.
Capteurs L’image numérique L’image numérique
Bruit
Capteurs
Bruit
→ on ne discrétise pas u, mais u γ , avec γ = 1/2, 2. Capteurs
Bruit
Couleur Couleur
Couleur Dynamique Dynamique
Dynamique Fichier informatique Fichier informatique
computationnelle
La photographie
computationnelle
optiques
optiques
HDR HDR
4 La photographie computationnelle Caméra plénoptique Caméra plénoptique
5 Conclusion
Source : http://www.cambridgeincolour.com/tutorials/gamma-correction.htm
88/126 89/126
Vers le fichier informatique photographie
numérique
Compression sans perte photographie
numérique

Compression sans perte d’information (lossless encoding).
Fichier RAW : intégralité des informations, sans Une brève histoire Une brève histoire
post-traitement (sortie directe du CAN, pas de de la photographie Deux familles utilisées en imagerie : de la photographie
démosaı̈çage). Chambre noire Run Length Encoding (RLE) Chambre noire
Objectif Objectif
Comment compresser un fichier fait de :
poids d’une image native : exemple du Canon EOS6D Profondeur de champ
Défauts optiques
Profondeur de champ
Défauts optiques
1 a, puis 1022 z, puis 1 b ? (1024 octets = 1ko)
capteur de 5472 × 3648 photosites (' 20, 2 MegaPixels) Exposition Exposition

CAN 14 bits. Capteurs Codage entropique, algorithme de Huffman Capteurs
Image = 5472 × 3648 × 14 bits = 2, 8 · 108 bits Bruit

Couleur Cf théorie statistique de l’information (Shannon 1948)
Bruit
Couleur
Dynamique Dynamique
1 octet = 8 bits Numérisation Numérisation
Fichier informatique Exemple des fichiers contenant du texte : Fichier informatique
→ 33,3 Mo.
La photographie codage ASCII : chaque lettre est codée sur 8 bits. La photographie
+ autres données + compression sans perte computationnelle
Or en Français, la fréquence des lettres n’est pas uniforme.
computationnelle
optiques optiques
Débruitage Idée du codage entropique : peu de bits pour les lettres les Débruitage
poids d’un fichier RAW en mémoire : 25 à 40 Mo. Restauration
plus fréquentes, davantage pour les lettres rares. Restauration
HDR HDR
→ il faut réduire (compresser). . .

→ c’est ce qui est utilisé lorsqu’on “zippe” un fichier. Caméra plénoptique
Bien sûr ne marche pas sur une distribution uniforme. . .
90/126 91/126

Compression avec perte photographie
numérique
Transformée de Fourier et régularité photographie
numérique
F. Sur - ENSMN
Propriété de la TF : plus un signal est régulier, plus ses F. Sur - ENSMN
coefficients de Fourier décroissent vite.
de la photographie 1 300 de la photographie
0.8
Les humains ne sont pas sensibles à l’intégralité de La lumière

0.6
250
La lumière
l’information présente dans une image.
200
Objectif 0.4
Objectif
Profondeur de champ 150 Profondeur de champ
(déjà utilisé dans échantillonnage / quantification des Défauts optiques
Exposition
0.2
100
Défauts optiques
Exposition
niveaux de gris)
0
L’image numérique −0.2

50 L’image numérique
Capteurs Capteurs
→ on peut se permettre d’abandonner une partie de Bruit
Couleur
−0.4
0 2 4 6 8 10 12 14 16
0
0 200 400 600 800 1000 1200 1400 1600 Bruit
Couleur
l’information sans dégradation (trop) sensible. Dynamique
Numérisation 2.5 300
Dynamique
Numérisation
2 250
Idée de JPEG : éliminer les hautes fréquences. La photographie

computationnelle 1.5 200
La photographie
computationnelle
(remarque : même idée dans MP3) Correction des défauts
optiques 1 150
optiques
0.5 100
HDR HDR
0 50
−0.5 0
Conclusion 0 2 4 6 8 10 12 14 16 0 200 400 600 800 1000 1200 1400 1600 Conclusion
Signal Spectre
92/126 93/126
Idée pour la compression ? photographie
numérique
numérique
→ On garde seulement les coefficients centraux (autres à 0). F. Sur - ENSMN → On garde seulement les coefficients centraux (autres à 0). F. Sur - ENSMN
1 1
Une brève histoire 1 1
0.8 0.8 de la photographie 0.8 0.8 de la photographie
0.6 0.6
La lumière 0.6 0.6
La lumière
0.4 0.4 Chambre noire 0.4 0.4 Chambre noire
0.2 0.2
Objectif 0.2 0.2
Objectif
0 0
Défauts optiques 0 0
Défauts optiques
−0.2 −0.2
Exposition −0.2 −0.2
Exposition
−0.4
0 2 4 6 8 10 12 14 16
−0.4
0 2 4 6 8 10 12 14 16
L’image numérique −0.4
0 2 4 6 8 10 12 14 16
−0.4
0 2 4 6 8 10 12 14 16
Capteurs Capteurs
fonction originale reconstruction avec 21 coeff. Bruit fonction originale reconstruction avec 21 coeff. Bruit
Couleur Couleur
Dynamique Dynamique
2.5 2 Numérisation 2.5 2.5 Numérisation
2 2 2
1.5
1.5
1
computationnelle 1.5 1.5
computationnelle
1 Correction des défauts 1 1 Correction des défauts
optiques optiques
0.5
0.5 Débruitage 0.5 0.5 Débruitage
0
0
HDR 0 0
HDR
−0.5 −0.5 −0.5 −0.5
0 2 4 6 8 10 12 14 16 0 2 4 6 8 10 12 14 16 0 2 4 6 8 10 12 14 16 0 2 4 6 8 10 12 14 16
fonction originale reconstruction avec 21 coeff. fonction originale reconstruction avec 81 coeff.
94/126 94/126

numérique
Effet de Gibbs
photographie
numérique
→ On garde seulement les coefficients centraux (autres à 0). −π/4 entre − π et 0
F. Sur - ENSMN Soit f 2π-périodique valant : F. Sur - ENSMN
π/4 entre 0 et π
1 1
de la photographie +∞ de la photographie
0.8 0.8
X sin ((2k + 1)x)
0.6 0.6
La lumière Sa série de Fourier est : . La lumière
0.4 0.4 Chambre noire 2k + 1 Chambre noire
0.2 0.2
Objectif k=0 Objectif
0 0
−0.2 −0.2
0.8
−0.4
0 2 4 6 8 10 12 14 16
−0.4
0 2 4 6 8 10 12 14 16
0.6
Capteurs Capteurs
fonction originale reconstruction avec 21 coeff. Bruit 0.4 Bruit
Couleur Couleur
Dynamique 0.2 Dynamique
2.5 2.5 Numérisation Numérisation
0
2 2
−0.2
1.5 1.5
computationnelle −0.4
computationnelle
1 1 Correction des défauts Correction des défauts
optiques −0.6 optiques
0.5 0.5 Débruitage Débruitage
−0.8
0 0
HDR
5 termes −3 −2 −1 0 1 2 3
HDR
−0.5 −0.5
0 2 4 6 8 10 12 14 16 0 2 4 6 8 10 12 14 16
fonction originale reconstruction avec 201 coeff. On peut montrer que la valeur de l’“oscillation résiduelle”
est constante et vaut : ∼ 0.14.
94/126 95/126
Effet de Gibbs
photographie
numérique
Effet de Gibbs
photographie
numérique
−π/4 entre − π et 0 −π/4 entre − π et 0
Soit f 2π-périodique valant : F. Sur - ENSMN Soit f 2π-périodique valant : F. Sur - ENSMN
π/4 entre 0 et π π/4 entre 0 et π
+∞
X de la photographie +∞
X de la photographie
sin ((2k + 1)x) sin ((2k + 1)x)
Sa série de Fourier est : . La lumière Sa série de Fourier est : . La lumière
2k + 1 Chambre noire 2k + 1 Chambre noire
k=0 Objectif k=0 Objectif
0.8 0.8

0.6 0.6
Capteurs Capteurs
0.4 Bruit 0.4 Bruit
Couleur Couleur
0.2 Dynamique 0.2 Dynamique
0 0
−0.2 −0.2
−0.4
computationnelle −0.4
computationnelle
−0.6 optiques −0.6 optiques
−0.8 −0.8
21 termes −3 −2 −1 0 1 2 3
HDR
41 termes −3 −2 −1 0 1 2 3
HDR
On peut montrer que la valeur de l’“oscillation résiduelle” On peut montrer que la valeur de l’“oscillation résiduelle”
est constante et vaut : ∼ 0.14. est constante et vaut : ∼ 0.14.
95/126 95/126

JPEG : images photographie
numérique
JPEG : schéma de l’algorithme (1) photographie
numérique
Joint Photographics Experts Group (normalisé en 1993). F. Sur - ENSMN F. Sur - ENSMN
Compression (par rapport à image 24 bits RGB) à un taux Une brève histoire Une brève histoire
' 20 sans perte de qualité visible. de la photographie de la photographie
Chambre noire Étapes de la compression d’une image couleur : Chambre noire
Préliminaires : Objectif
Profondeur de champ
Objectif
Profondeur de champ
Défauts optiques RVB → YCbCr ; Défauts optiques
DCT 2D : Exposition Exposition
N−1 L’image numérique définition de Cb-Cr divisée par 2 (argument L’image numérique
X N−1
X πn(k + 1/2) πm(l + 1/2) Capteurs
psycho-visuel) ;
Capteurs
bn,m =
Y yk,l cos cos
Bruit
Couleur
Bruit
Couleur
N N Dynamique Dynamique
k=0 l=0 Numérisation découpage des canaux en blocs 8x8 ; Numérisation
RVB → YCbCr (crédit image : Wikipedia.org)

La photographie
computationnelle
puis. . . La photographie
computationnelle
optiques optiques
HDR HDR
original Y Cb Cr
96/126 97/126
numérique
numérique

quantification / mise à zéro de coefficients de la DCT :
DCT sur les blocs (DCT = comb. linéaire de “blocs 8x8”) : Une brève histoire Une brève histoire
matrice de quantification : (asymétrie ?)
niveaux de gris d’un bloc 8x8 : La lumière   La lumière
Chambre noire
16 11 10 16 24 40 51 61 Chambre noire
 
52 55 61 66 70 61 64 73 Objectif
12 12 14 19 26 58 60 55  Objectif
 
63 59 55 90 109 85 69 72 Profondeur de champ 14 13 16 24 40 57 69 56  Profondeur de champ
   
62 59 68 113 144 104 66 73 Défauts optiques 14 17 22 29 51 87 80 62  Défauts optiques
  Q = 
63 58 71 122 154 106 70 69 Exposition 18 22 37 56 68 109 103 77  Exposition
  24 35 55 64 81 104 113 92 
67 61 68 104 126 88 68 70  
79 65 60 70 77 68 58 75 L’image numérique 49 64 78 87 103 121 120 101 L’image numérique
 
85 71 64 59 55 61 65 83 Capteurs 72 92 95 98 112 100 103 99 Capteurs
87 79 69 68 65 76 78 94 Bruit Bruit
Couleur
Dynamique
! Couleur
Dynamique
[ Numérisation bn,m
Y Numérisation
coefficients DCT Y n,m :
Fichier informatique coefficients de DCT quantiifés : Bd
n,m = E Fichier informatique

−415 −30 −61 27 56 −20 −2 0

La photographie
Qn,m La photographie
 4 −22 −61 10 13 −7 −9 5  computationnelle   computationnelle
  −26 −3 −6 2 2 −1 0 0
 −47 7 77 −25 −29 10 5 −6
  Correction des défauts  0 −2 −4 1 1 0 0 0 Correction des défauts
 −49 12 34 −15 −10 6 2 2  optiques   optiques
   −3 1 5 −1 −1 0 0 0
 12 −7 −13 −4 −2 2 −3 3  Débruitage   Débruitage
 −8 3 2 −6 −2 1 4 2  b = −4 1 2 −1 0 0 0 0
  Restauration B   Restauration
 −1 0 0 −2 −1 −3 4 −1 HDR  1 0 0 0 0 0 0 0
HDR
 0 0 0 0 0 0 0 0
0 0 −1 −4 −1 0 1 2 Caméra plénoptique   Caméra plénoptique
 0 0 0 0 0 0 0 0
Conclusion 0 0 0 0 0 0 0 0 Conclusion
98/126 99/126

JPEG : exemple de DCT sur un bloc 16x16 photographie
numérique
Artefacts de la compression JPEG photographie
numérique

Objectif Objectif
image originale dct

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
58% des coefs à zéro reconstruction computationnelle computationnelle
optiques optiques
HDR HDR
Caméra plénoptique image originale (JPEG) Caméra plénoptique
Conclusion 230ko Conclusion
(sans compression : 567 × 378 × 3 × 8 bits= 628ko)

95% des coefs à zéro reconstruction
100/126 101/126
numérique
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
HDR HDR
qualité 70 dans GIMP Caméra plénoptique qualité 30 dans GIMP Caméra plénoptique
71ko 39ko
101/126 101/126

numérique
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
HDR HDR
qualité 10 dans GIMP Caméra plénoptique Caméra plénoptique
19ko Artefacts : block effect, effet de Gibbs (ringing),
dérive couleurs
101/126 101/126
Plan photographie
numérique
Au delà de la photographie photographie
numérique
La lumière Une image numérique est le résultat de traitements La lumière

Objectif électroniques et logiciels. Objectif
3 L’image numérique
Défauts optiques
Exposition Révolution numérique : le logiciel est moins cher, plus Défauts optiques
Exposition
L’image numérique flexible que le matériel. L’image numérique

Capteurs Capteurs
Bruit Bruit
4 La photographie computationnelle Couleur
Photographie computationnelle : Couleur
Dynamique Dynamique
Correction des défauts optiques Numérisation Numérisation
Fichier informatique remplacer du matériel coûteux par un traitement logiciel Fichier informatique
Débruitage La photographie
(cf smartphone, Google glass) La photographie
Restauration computationnelle computationnelle
HDR optiques au delà de l’image classique . optiques
Caméra plénoptique Restauration
HDR
Restauration
HDR
5 Conclusion
102/126 103/126

Plan photographie
numérique
Correction des défauts optiques photographie
numérique
F. Sur - ENSMN Dépendent de caractéristiques de l’optique utilisée. F. Sur - ENSMN

de la photographie
Vignettage et aberrations géométriques dépendent de Une brève histoire
de la photographie
La lumière l’ouverture ; La lumière

Objectif Aberrations chromatiques dépendent aussi de l’endroit Objectif
Défauts optiques de mise au point. Défauts optiques
L’image numérique + influence de la focale pour un objectif zoom. L’image numérique

Capteurs Capteurs
Bruit Bruit
4 La photographie computationnelle Couleur → utilisation des “données EXIF” dans le fichier RAW ou Couleur
Dynamique Dynamique
Correction des défauts optiques Numérisation JPEG, et de modélisations des défauts d’un grand nombre Numérisation
d’objectifs. La photographie
Restauration computationnelle
Exemple : DXO Lien www
computationnelle
HDR optiques
Débruitage
optiques
Débruitage
Caméra plénoptique Restauration Attention : nécessite interpolation (si correction possible), Restauration
HDR HDR
Caméra plénoptique éventuellement recadrage, et peut faire monter le bruit. Caméra plénoptique
5 Conclusion → il reste un intérêt à avoir des optiques performantes (mais
chères !).
104/126 105/126
Plan photographie
numérique
Le débruitage photographie
numérique
1 Une brève histoire de la photographie La plupart des algorithmes de débruitage historiques sont
de la photographie locaux : de la photographie
La lumière ils travaillent pixel à pixel et s’appuient sur un voisinage du La lumière

Objectif pixel considéré. Objectif
3 L’image numérique Exposition
v (x, y ) = F (Vu(x,y ) )
Exposition

Capteurs Capteurs
4 La photographie computationnelle
Bruit Exemples de voisinages Vu(x,y ) : Bruit
Couleur Couleur
Dynamique Dynamique
Débruitage
Fichier informatique X X X Fichier informatique
Restauration computationnelle X X X X X X X X computationnelle
HDR
optiques X u(x,y) X X X u(x,y) X X Correction des défauts
optiques
Caméra plénoptique Restauration X X X X X X X X Restauration
HDR HDR
Caméra plénoptique X X X Caméra plénoptique
5 Conclusion
106/126 107/126

Bruit impulsionnel photographie
numérique
Bruit additif photographie
numérique
F. Sur - ENSMN
Le niveau de gris observé est de la forme : F. Sur - ENSMN
Une brève histoire u(x, y ) = u0 (x, y ) + n(x, y ) Une brève histoire

Objectif u0 image idéale, sans bruit Objectif
Défauts optiques n composante de bruit, indépendante de pixel à pixel. Défauts optiques
Remarque : si sur un voisinage de (x, y ) fait de P pixels, le L’image numérique
Capteurs
Bruit
niveau de gris idéal est à peu près constant et n a une Capteurs
Bruit
Couleur
Dynamique
variance σ 2 , alors la moyenne des niveaux de gris sur le Couleur
Dynamique
Numérisation
voisinage vaut u0 (x, y ) et la variance est σ 2 /P. Numérisation
La photographie
computationnelle
Filtrage linéaire : La photographie
computationnelle
Correction des défauts X Correction des défauts
optiques
Débruitage
v (x, y ) = F (Vu(x,y ) ) = w (i, j)u(i, j) optiques
Débruitage
HDR
(i,j)∈Vu(x,y ) HDR
Conclusion → il s’agit de la convolution de l’image u par le noyau w . Conclusion

“Salt and pepper” noise (pixels défectueux) Exemple de choix pour les poids w (i; j) : fonction gaussienne
Filtre : valeur médiane des niveaux de gris dans Vu(x,y ) de la distance à (x, y )
108/126 109/126
Filtrage linéaire gaussien photographie
numérique
Au delà du filtrage linéaire photographie
numérique
Exemple avec variance du poids augmentant. F. Sur - ENSMN F. Sur - ENSMN

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique diffusion seuillage Dynamique
Fichier informatique anisotrope ondelettes Fichier informatique
optiques
→ adaptation des poids en fonction du contenu du voisinage. Correction des défauts
optiques
Débruitage
Restauration
Exemple : diffusion anisotrope (Perona-Malik 1990) Débruitage
Restauration
HDR HDR
Caméra plénoptique Autre approche : bruit prépondérant dans les hautes Caméra plénoptique
fréquences : mettre à 0 les coefficients de Fourier des HF
Artefact : contours adoucis Idée semblable : wavelet shrinkage (Donoho-Johnstone 1994)
110/126 111/126

Les moyennes non-locales (NL means) photographie
numérique
Les moyennes non-locales (NL means) photographie
numérique

u image de taille X × Y à débruiter :
Chambre noire
Objectif
X Chambre noire
Objectif
Profondeur de champ NLM(u)(x, y ) = w(x,y ),(i,j) u(i, j) Profondeur de champ
Exposition 1≤i≤X ,1≤j≤Y Exposition

Capteurs
Bruit
avec les poids Capteurs
Bruit
Couleur Couleur
Dynamique 2 Dynamique
1 ||P(i,j)−P(x,y )||2
e−
Fichier informatique w(x,y ),(i,j) = h2 Fichier informatique
La photographie
Z (x, y ) La photographie
optiques optiques
Débruitage
Restauration
→ débruitage PRIME de DXO Lien www Débruitage
Restauration
HDR HDR
Buades - Coll - Morel 2005

112/126 113/126
Plan photographie
numérique
Restauration d’images par déconvolution photographie
numérique
F. Sur - ENSMN
Modèle courant de dégradation des images : F. Sur - ENSMN

u = g ∗ u0 + n Une brève histoire
Objectif Objectif

Capteurs Capteurs
Bruit Bruit
4 La photographie computationnelle Couleur Couleur
Dynamique Dynamique
Débruitage La photographie La photographie
Restauration computationnelle Sans bruit et g connu : autant d’équations que d’inconnues. computationnelle
HDR optiques
Débruitage
Avec bruit ou g inconnu : plus d’inconnues que d’équations optiques
Débruitage
HDR
→ problème mal posé. Restauration
HDR
Résolution en ajoutant des hypothèses sur les propriétés Caméra plénoptique
5 Conclusion statistiques du bruit ou de l’image u0 .
Exemple : flou de bougé (motion blur) Lien www
114/126 115/126

En astrophotographie photographie
numérique
Plan photographie
numérique
g dépend des performances optiques de l’imageur F. Sur - ENSMN F. Sur - ENSMN
(point spread function, PSF)
si n = bruit de Poisson : algorithme de Richarson-Lucy de la photographie de la photographie
(1972-1974). La lumière
Chambre noire 2 La lumière
La lumière
Chambre noire
Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur 4 La photographie computationnelle Couleur
Dynamique Dynamique
Numérisation Correction des défauts optiques Numérisation
La photographie
computationnelle Restauration computationnelle
optiques
Débruitage
HDR optiques
Débruitage
Restauration
HDR
HDR
Remarque : imagerie satellitaire grande consommatrice 5 Conclusion

d’algo de restauration.
116/126 117/126
Imagerie à grande dynamique (HDR) photographie
numérique
Imagerie à grande dynamique photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
Brick au clair de lune, Gustave Le Gray, 1856-1857 Correction des défauts Correction des défauts
optiques optiques
HDR par fusion de photos à temps de pose différents. Restauration

HDR
Restauration
HDR
Problème : Visualisation ? Caméra plénoptique Caméra plénoptique
(dynamique réduite des écrans ou des procédés d’impression)
Solution : tone mapping (mappage tonal)
118/126 119/126

Plan photographie
numérique
Caméra plénoptique : principe photographie
numérique
Objectif Objectif

Capteurs Capteurs
Bruit Bruit
4 La photographie computationnelle Couleur Couleur
Dynamique Dynamique
Débruitage La photographie La photographie
Restauration computationnelle computationnelle
HDR optiques
Débruitage
optiques
Débruitage
HDR
Restauration
HDR
Conclusion Source : Optimal design and critical analysis of a high-resolution Conclusion

5 Conclusion
video plenoptic demonstrator, Journal of Electronic Imaging, 2012.
120/126 121/126
Caméra plénoptique : image brute photographie
numérique
Caméra plénoptique : refocalisation (principe) photographie
numérique

Objectif Objectif

Capteurs Capteurs
Bruit Bruit
Couleur Couleur
Dynamique Dynamique
optiques optiques
Débruitage
Restauration
Source : cours Fatahalian CMU 2011 Débruitage
Restauration
HDR HDR
Conclusion Limitation : résolution limitée. Conclusion

Applications : refocalisation en post-production,
extended depth-of-field , 3D TV.
Source : Lytro
122/126 123/126

Plan photographie
numérique
Conclusion photographie
numérique

de la photographie
→ Le logiciel intervient dans toutes les étapes de la création Une brève histoire
de la photographie
1 Une brève histoire de la photographie La lumière d’une image, et au-delà. La lumière
Objectif Objectif
2 La lumière Profondeur de champ

Défauts optiques
→ Implications artistiques / éthiques Profondeur de champ
Défauts optiques
Exposition (qu’est-ce qu’une photographie ? cf “World Press Photo”) Exposition

3 L’image numérique Capteurs Capteurs
Bruit
Couleur
→ Nombreuses applications scientifiques non abordées ici : Bruit
Couleur
Dynamique Dynamique
Numérisation imagerie astronomique (visible ou non), Numérisation
4 La photographie computationnelle Fichier informatique Fichier informatique
La photographie imagerie satellitaire (idem), La photographie

5 Conclusion Correction des défauts imagerie non conventionnelle Correction des défauts
optiques optiques
Débruitage (contrôle non destructif, imagerie médicale, microscopie) Débruitage
HDR
... HDR
124/126 125/126

Petitcoursphoto Print

Transféré par

Informations du document

Titre original

Copyright

Formats disponibles

Partager ce document

Partager ou intégrer le document

Options de partage

Avez-vous trouvé ce document utile ?

Ce contenu est-il inapproprié ?

Droits d'auteur :

Formats disponibles

Petitcoursphoto Print

Transféré par

Droits d'auteur :

Formats disponibles

Petit cours de Petit cours de

Une brève histoire Photographie =  écriture de la lumière 

Petit cours de La lumière

photographie numérique Profondeur de champ

École des Mines de Nancy Fichier informatique

Conclusion l’art, etc. Conclusion

Petit cours de Petit cours de

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

Ou : qu’est-ce qu’une image ? La lumière

→ 1997 : première photographie couleur en  une  du L’image numérique L’image numérique

→ ∼ une heure de vidéo déposée chaque seconde sur La photographie

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

Conclusion Première photographie (1827) Conclusion

Petit cours de Petit cours de

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

Plaque de cuivre recouverte de iodure d’argent, développée à La photographie

libéralement le monde entier . Conclusion Conclusion

Daguerréotypes chers, mais  daguerréotypomanie .

F. Sur - ENSMN F. Sur - ENSMN

négatif. L’image numérique

Petit cours de Petit cours de

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

(donc grain de la pellicule fin) Conclusion Tirage instantané Conclusion

Petit cours de Petit cours de

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

Petit cours de Petit cours de

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

Petit cours de Petit cours de

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire Une brève histoire

L’image numérique L’image numérique

F. Sur - ENSMN F. Sur - ENSMN

Une brève histoire

L’image numérique Profondeur de champ L’image numérique

Petit cours de Petit cours de

F. Sur - ENSMN U F. Sur - ENSMN

1 Une brève histoire de la photographie Une brève histoire

Profondeur de champ L’image numérique

U F. Sur - ENSMN F. Sur - ENSMN

L’image numérique L’image numérique

Application : (u, v ) coordonnées dans l’image en pixels, Restauration

(x, y , z) coordonnées dans le monde 3D. Caméra plénoptique Caméra plénoptique

La focale f régit le rapport de reproduction. Source : DXO

Une brève histoire Photographie = écriture de la lumière

→ 1997 : première photographie couleur en une du L’image numérique L’image numérique

libéralement le monde entier . Conclusion Conclusion

Daguerréotypes chers, mais daguerréotypomanie .

claire ni trop sombre .