Vous êtes sur la page 1sur 155

Chapitre 2 : Estimation ponctuelle et par intervalle

Estimation ponctuelle Estimation par intervalle de confiance 2/97

Estimation ponctuelle

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 3/97
Motivation

Le directeur du personnel du groupe ALSA a été chargé de


développer le profil de 2500 responsables de sociétés appartenant
au groupe ALSA. Les caractéristiques (paramètres) à étudier sont

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 3/97
Motivation

Le directeur du personnel du groupe ALSA a été chargé de


développer le profil de 2500 responsables de sociétés appartenant
au groupe ALSA. Les caractéristiques (paramètres) à étudier sont
❂ le salaire moyen annuel et sa dispersion
❂ la participation au programme de formation en gestion mis en
place par la société.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 3/97
Motivation

Le directeur du personnel du groupe ALSA a été chargé de


développer le profil de 2500 responsables de sociétés appartenant
au groupe ALSA. Les caractéristiques (paramètres) à étudier sont
❂ le salaire moyen annuel et sa dispersion
❂ la participation au programme de formation en gestion mis en
place par la société.
On a donc trois paramètres à calculer
❂ la moyenne µ
❂ l’écart type σ du salaire annuel pour la population
❂ la proportion p de la population ayant suivi la formation

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 4/97
Motivation

✌ Le recensement. On doit interroger 2500 personnes. Le coût de


la collecte est très élevé, il nécessite un entretien avec chaque
responsable.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 4/97
Motivation

✌ Le recensement. On doit interroger 2500 personnes. Le coût de


la collecte est très élevé, il nécessite un entretien avec chaque
responsable.

❂ On estime les trois paramètres à partir d’un échantillon de taille


n << 2500.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 5/97
Motivation

❂ Le problème de l’estimation est l’impossibilité de connaı̂tre


exactement la valeur d’un paramètre inconnu noté θ d’une
population (cela peut être sa moyenne µ, son écart-type σ, une
proportion p).

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 5/97
Motivation

❂ Le problème de l’estimation est l’impossibilité de connaı̂tre


exactement la valeur d’un paramètre inconnu noté θ d’une
population (cela peut être sa moyenne µ, son écart-type σ, une
proportion p).
❂ L’estimation consiste à donner des valeurs approximatives aux
paramètres d’une population à l’aide d’un échantillon de n
observations issues de cette population.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 6/97
Objectif

☞ Soit un caractère X (une variable aléatoire) d’une population


quelconque, dont la loi de probabilité PXθ dépend d’un paramètre
inconnu θ ∈ Θ avec Θ ⊂ Rd .

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 6/97
Objectif

☞ Soit un caractère X (une variable aléatoire) d’une population


quelconque, dont la loi de probabilité PXθ dépend d’un paramètre
inconnu θ ∈ Θ avec Θ ⊂ Rd .
☞ On considère un n-échantillon aléatoire X = (X1 , ..., Xn ) issu de
la variable aléatoire X

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 6/97
Objectif

☞ Soit un caractère X (une variable aléatoire) d’une population


quelconque, dont la loi de probabilité PXθ dépend d’un paramètre
inconnu θ ∈ Θ avec Θ ⊂ Rd .
☞ On considère un n-échantillon aléatoire X = (X1 , ..., Xn ) issu de
la variable aléatoire X ( i.e. une suite de variable aléatoires
X1 , X2 , ..., Xn indépendantes et de même loi que X )
Comment pouvons-nous estimer θ à partir d’un
n-échantillon aléatoire X ?

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 7/97

☞ On définit une fonction f telle que :


(
fθ (x) si X est une v.a. continue de densité fθ
f (x, θ) =
Pθ (X = x) si X est une v.a. discrète

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 8/97

Exemple
On fait l’hypothèse que la taille (en cm) des 4000 étudiants
masculins d’une école de génie est une variable aléatoire X
distribuée normalement d’écart-type 3, c’est-à-dire que
X ∼ N (µ, 9). Dans ce cas θ = µ et Θ = R

(x − θ)2
 
1
f (x, θ) = √ exp −
3 2π 18

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 8/97

Exemple
On fait l’hypothèse que la taille (en cm) des 4000 étudiants
masculins d’une école de génie est une variable aléatoire X
distribuée normalement d’écart-type 3, c’est-à-dire que
X ∼ N (µ, 9). Dans ce cas θ = µ et Θ = R

(x − θ)2
 
1
f (x, θ) = √ exp −
3 2π 18
☞ Si l’écart-type est inconnu c’est-à-dire que X ∼ N (µ, σ 2 ). Dans
ce cas θ = (µ, σ 2 ) et Θ = R × R+∗

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 9/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Estimateur (Ponctuel) de θ : variable aléatoire, souvent notée


θ̂n , qui dépend uniquement du n-échantillon X

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 9/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Estimateur (Ponctuel) de θ : variable aléatoire, souvent notée


θ̂n , qui dépend uniquement du n-échantillon X

Estimation de θ : réalisation de θ̂n ; il s’agit d’un nombre réel.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 9/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Estimateur (Ponctuel) de θ : variable aléatoire, souvent notée


θ̂n , qui dépend uniquement du n-échantillon X

Estimation de θ : réalisation de θ̂n ; il s’agit d’un nombre réel.

Exemple
pour estimer l’espérance µ = E[X ] de la loi deP
X , un estimateur
naturel est la moyenne échantillonnale X̄ = n ni=1 Xi . On peut
1

utiliser aussi :

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 9/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Estimateur (Ponctuel) de θ : variable aléatoire, souvent notée


θ̂n , qui dépend uniquement du n-échantillon X

Estimation de θ : réalisation de θ̂n ; il s’agit d’un nombre réel.

Exemple
pour estimer l’espérance µ = E[X ] de la loi deP
X , un estimateur
naturel est la moyenne échantillonnale X̄ = n ni=1 Xi . On peut
1

utiliser aussi :
2. X1
3. inf 1≤i≤n Xi
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 10/97
Statistique Exhaustive

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 10/97
Statistique Exhaustive

❂ Pour faire l’inférence statistique, on travail en général sur une


statistique T (X )

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 10/97
Statistique Exhaustive

❂ Pour faire l’inférence statistique, on travail en général sur une


statistique T (X )

❂ Comment savoir si la réduction des données opérée par la


statistique T (X ) ne conduit pas à une perte d’information ?

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 10/97
Statistique Exhaustive

❂ Pour faire l’inférence statistique, on travail en général sur une


statistique T (X )

❂ Comment savoir si la réduction des données opérée par la


statistique T (X ) ne conduit pas à une perte d’information ?

❂ Une statistique contient l’ensemble de l’information sur les


paramètres de la population dite exhaustive

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 11/97
Statistique Exhaustive

Définition
Une statistique T (X ) sera dite exhaustive pour θ si la probabilité
d’observer X sachant T (X ) n’est pas une fonction du paramètre θ
(i.e. independante de θ)

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 12/97
Statistique Exhaustive

Exemple

Supposons que X1 , ..., Xn soient des variables indépendantes de loi


Bernoulli de parmètre p, B(p). Soit la statistique

T (X ) = X1 + X2 + ... + Xn

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 12/97
Statistique Exhaustive

Exemple

Supposons que X1 , ..., Xn soient des variables indépendantes de loi


Bernoulli de parmètre p, B(p). Soit la statistique

T (X ) = X1 + X2 + ... + Xn

❂ T (X ) est le nombre de succès observés sur n essais de


Bernoulli, la probabilité de succès d’un essai étant p.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 12/97
Statistique Exhaustive

Exemple

Supposons que X1 , ..., Xn soient des variables indépendantes de loi


Bernoulli de parmètre p, B(p). Soit la statistique

T (X ) = X1 + X2 + ... + Xn

❂ T (X ) est le nombre de succès observés sur n essais de


Bernoulli, la probabilité de succès d’un essai étant p.

❂ On va calculer P (X1 = x1 , ..., Xn = xn |T (X ) = t)

❂ Si t ̸= x1 + x2 + ... + xn alors sa probabilité conditionnelle est 0.


J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 13/97
Statistique Exhaustive

Supposons que t = x1 + x2 + ... + xn . On a


P (X1 = x1 , ..., Xn = xn , T (X ) = t)
P (X1 = x1 , ..., Xn = xn |T (X ) = t) =
P (T (X ) = t)
P (X1 = x1 , ..., Xn = xn )
=
P (T (X ) = t)
p (1 − p)n−t
t
=
Cnt p t (1 − p)n−t
1
=
Cnt

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 14/97
Statistique Exhaustive

❂ Dans la plus part des lois, il est difficile d’utiliser directement la


définition pour montrer qu’une statistique est exhaustive.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 14/97
Statistique Exhaustive

❂ Dans la plus part des lois, il est difficile d’utiliser directement la


définition pour montrer qu’une statistique est exhaustive.

❂ Il existe un critère simple qui donne une condition nécessaire et


suffisante pour que T (X ) soit une statistique exhaustive quand
la loi de X admet une densité.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 15/97
Statistique Exhaustive

Critère de factorisation

Supposons que X admet une densité jointe f (x, θ) pour θ ∈ Θ.


Alors T (X ) est une statistique exhaustive pour θ si et seulement s’il
existe deux fonctions mesurables g et h telles que

f (x, θ) = h(x)g (T (x), θ)

où x = (x1 , ..., xn )

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 16/97
Statistique Exhaustive
Exemple

Soit X ∼ Poisson(λ). La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
n
Y λxi −λ
pX (x1 , ..., xn ; λ) = e
xi !
i=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 16/97
Statistique Exhaustive
Exemple

Soit X ∼ Poisson(λ). La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
n
Y λxi −λ
pX (x1 , ..., xn ; λ) = e
xi !
i=1
Pn 1
= λ i=1 xi e −nλ Qn
i=1 xi !
A partir de ce résultat, et d’après le théorème de factorisation, on a
Xn
T (X ) = Xi
i=1
est une statistique exhaustive pour λ.
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 17/97
Statistique Exhaustive
Exemple

Soit X ∼ E(β) (loi exponentielle). La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 17/97
Statistique Exhaustive
Exemple

Soit X ∼ E(β) (loi exponentielle). La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
n
Y
fX (x1 , ..., xn ; β) = βe −βxi
i=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 17/97
Statistique Exhaustive
Exemple

Soit X ∼ E(β) (loi exponentielle). La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
n
Y
fX (x1 , ..., xn ; β) = βe −βxi
i=1
Pn
n −β i=1 xi
= β e

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 17/97
Statistique Exhaustive
Exemple

Soit X ∼ E(β) (loi exponentielle). La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
n
Y
fX (x1 , ..., xn ; β) = βe −βxi
i=1
Pn
n −β i=1 xi
= β e
A partir de ce résultat, et d’après le théorème de factorisation, on a
n
X
T (X ) = Xi
i=1

est une statistique exhaustive pour β. Ici h(x) = 1


J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 18/97
Statistique Exhaustive

Exemple

Soit X ∼ U[0, θ], θ > 0 . La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 18/97
Statistique Exhaustive

Exemple

Soit X ∼ U[0, θ], θ > 0 . La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
1
fX (x1 , ..., xn ; θ) = 10≤inf 1≤i≤n (xi ) × 1sup1≤i≤n (xi )≤θ
θn

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 18/97
Statistique Exhaustive

Exemple

Soit X ∼ U[0, θ], θ > 0 . La loi jointe pour l’échantillon


X = (X1 , ..., Xn ) est donnée par :
1
fX (x1 , ..., xn ; θ) = 10≤inf 1≤i≤n (xi ) × 1sup1≤i≤n (xi )≤θ
θn
A partir de ce résultat, et d’après le théorème de factorisation,
(avec h(x) = 10≤inf 1≤i≤n (xi ) ) on a

T (X ) = sup (Xi )
1≤i≤n

est une statistique exhaustive pour θ.


J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 19/97
Statistique Exhaustive

Exemple

Soit X ∼ N (µ, λ) (µ l’espérence mathématique et λ la variance ) .

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 19/97
Statistique Exhaustive

Exemple

Soit X ∼ N (µ, λ) (µ l’espérence mathématique et λ la variance ) .


n n
!
1 X 1 X
T (X ) = Xi ; Xi2
n n
i=1 i=1

est une statistique exhaustive pour θ = (µ, λ).

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 20/97
familles exponentielles

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 20/97
familles exponentielles
La plupart des lois usuelles font partie de ce qu’on appelle la famille
exponentielle.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 20/97
familles exponentielles
La plupart des lois usuelles font partie de ce qu’on appelle la famille
exponentielle.
Définition
Une loi de probabilité Pθ , θ ∈ Θ ⊂ Rd de densité f (x, θ) est dite
appartenir à une famille exponentielle s’il existe des fonctions

θ −→ αj (θ), θ −→ β(θ),

x −→ Tj (x) et x −→ h(x)
avec h > 0, telles que
 
d
X
f (x, θ) = β(θ)h(x) exp  αj (θ)Tj (x)
j=1
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 21/97
familles exponentielles
Loi Normale

Ici d = 2
(t − µ)2
 
2 1
f (t, θ = (µ, σ )) = √ exp −
2πσ 2 2σ 2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 21/97
familles exponentielles
Loi Normale

Ici d = 2
2
 
(t − µ) 1
f (t, θ = (µ, σ 2 )) = √ exp −
2πσ 2 2σ 2
µ2 t2
   
1 µ
= √ exp − 2 exp − 2 + 2 t
2πσ 2 2σ 2σ σ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 21/97
familles exponentielles
Loi Normale

Ici d = 2
2
 
(t − µ) 1
f (t, θ = (µ, σ 2 )) = √ exp −
2πσ 2 2σ 2
µ2 t2
   
1 µ
= √ exp − 2 exp − 2 + 2 t
2πσ 2 2σ 2σ σ
On pose
µ2
 
1
β(θ) = √ exp − 2
2πσ 2 2σ
1 µ
h(t) = 1, α1 (θ) = − 2 , α2 (θ) = 2
2σ σ
2
T1 (t) = t , T2 (t) = t
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 22/97
familles exponentielles

Loi Exponentielle

Ici d = 1

f (t, λ) = λe −λt

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 22/97
familles exponentielles

Loi Exponentielle

Ici d = 1

f (t, λ) = λe −λt

On pose
β(λ) = λ
h(t) = 1, α1 (λ) = −λ
T1 (t) = t

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 23/97
familles exponentielles
Loi de Bernoulli de paramètre p

Ici d = 1
p(x, p) = p x (1 − p)1−x

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 23/97
familles exponentielles
Loi de Bernoulli de paramètre p

Ici d = 1
p(x, p) = p x (1 − p)1−x
= e x ln p+(1−x) ln(1−p)
= e x(ln p−ln(1−p))+ln(1−p))
p
= e x ln 1−p +ln(1−p)
p
= (1 − p)e x ln 1−p
On pose
β(λ) = 1 − p, T1 (t) = t
p
h(t) = 1, α1 (p) = ln
1−p
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 24/97
familles exponentielles

❂ La famille exponentielle est dite en forme canonique (ou


naturelle) lorsque (α1 (θ), ..., αd (θ)) = θ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 24/97
familles exponentielles

❂ La famille exponentielle est dite en forme canonique (ou


naturelle) lorsque (α1 (θ), ..., αd (θ)) = θ

❂ Il est toujours possible de convertir une famille exponentielle en


forme canonique, on pose λ = (α1 (θ), ..., αd (θ)) et on écrit
 
Xd
f (x, λ) = β(θ)h(x) exp  λj Tj (x)
j=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 24/97
familles exponentielles

❂ La famille exponentielle est dite en forme canonique (ou


naturelle) lorsque (α1 (θ), ..., αd (θ)) = θ

❂ Il est toujours possible de convertir une famille exponentielle en


forme canonique, on pose λ = (α1 (θ), ..., αd (θ)) et on écrit
 
Xd
f (x, λ) = β(θ)h(x) exp  λj Tj (x)
j=1

❂ Les paramètres λj s’appellent les paramètres naturels de la


famille exponentielle.
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 25/97
familles exponentielles

Loi Normale

la paramétrisation naturelle de la loi normale de moyenne µ et de


variance σ est donnée par
µ2 t2
   
1 µ
f (t, θ1 , θ2 ) = √ exp − 2 exp − 2 + 2 t
2πσ 2 2σ 2σ σ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 25/97
familles exponentielles

Loi Normale

la paramétrisation naturelle de la loi normale de moyenne µ et de


variance σ est donnée par
µ2 t2
   
1 µ
f (t, θ1 , θ2 ) = √ exp − 2 exp − 2 + 2 t
2πσ 2 2σ 2σ σ
θ22
 
1 p
exp θ1 t 2 + θ2 t

= √ −θ1 exp −
π 4θ1
avec
1 µ
θ1 = − , θ 2 =
2σ 2 σ2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 26/97
Statistique Exhaustive et familles exponentielles

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 26/97
Statistique Exhaustive et familles exponentielles

Soit X une variable aléatoire de densité f (x; θ) , θ ∈ Θ ⊂ Rd , appartenant à la


famille exponentielle. On a
n
Y
fX (x, θ) = f (xi , θ), x = (x1 , ..., xn )
i=1
n d
!
Y X
= β(θ)h(xi ) exp αj (θ)Tj (xi )
i=1 j=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 26/97
Statistique Exhaustive et familles exponentielles

Soit X une variable aléatoire de densité f (x; θ) , θ ∈ Θ ⊂ Rd , appartenant à la


famille exponentielle. On a
n
Y
fX (x, θ) = f (xi , θ), x = (x1 , ..., xn )
i=1
n d
!
Y X
= β(θ)h(xi ) exp αj (θ)Tj (xi )
i=1 j=1
n
! n d
!!
Y X X
= h(xi ) β n (θ) exp αj (θ)Tj (xi )
i=1 i=1 j=1
n
! d n
!!
Y X X
= h(xi ) β n (θ) exp αj (θ) Tj (xi )
i=1 j=1 i=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 27/97
Statistique Exhaustive et familles exponentielles

Ainsi, d’après le critère de factorisation


n n
!
X X
T1 (Xi ), ..., Td (Xi )
i=1 i=1

est une statistique exhaustive pour θ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 28/97
Statistique Exhaustive et familles exponentielles

Exemple: Loi Exponentielle

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 29/97
Qualités d’un estimateur(Cas univarié)

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 29/97
Qualités d’un estimateur(Cas univarié)
Estimateur sans biais
Soit θ̂n un estimateur de θ.

❂ L’erreur d’estimation est mesurée par la quantité θ̂n − θ.


❂ la quantité θ̂n − E[θ̂n ] représente les fluctuations de l’estimateur
θ̂n autour de sa valeur moyenne

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 29/97
Qualités d’un estimateur(Cas univarié)
Estimateur sans biais
Soit θ̂n un estimateur de θ.

❂ L’erreur d’estimation est mesurée par la quantité θ̂n − θ.


❂ la quantité θ̂n − E[θ̂n ] représente les fluctuations de l’estimateur
θ̂n autour de sa valeur moyenne
❂ La quantité E[θ̂n ] − θ est le biais de l’estimateur

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 29/97
Qualités d’un estimateur(Cas univarié)
Estimateur sans biais
Soit θ̂n un estimateur de θ.

❂ L’erreur d’estimation est mesurée par la quantité θ̂n − θ.


❂ la quantité θ̂n − E[θ̂n ] représente les fluctuations de l’estimateur
θ̂n autour de sa valeur moyenne
❂ La quantité E[θ̂n ] − θ est le biais de l’estimateur
❂ Un estimateur est sans biais si E[θ̂n ] − θ = 0
❂ Un estimateur est biaisé si E[θ̂n ] − θ ̸= 0

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 29/97
Qualités d’un estimateur(Cas univarié)
Estimateur sans biais
Soit θ̂n un estimateur de θ.

❂ L’erreur d’estimation est mesurée par la quantité θ̂n − θ.


❂ la quantité θ̂n − E[θ̂n ] représente les fluctuations de l’estimateur
θ̂n autour de sa valeur moyenne
❂ La quantité E[θ̂n ] − θ est le biais de l’estimateur
❂ Un estimateur est sans biais si E[θ̂n ] − θ = 0
❂ Un estimateur est biaisé si E[θ̂n ] − θ ̸= 0
❂ Un estimateur est asymptotiquement sans biais si
E[θ̂n ] −→ θ , quand la taille n de l’échantillon tend vers l’infini.
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 30/97
Qualités d’un estimateur(Cas univarié)
Example
1
Pn
On pose θ̂n = X̄ = n i=1 Xi .

❂ θ̂n est un estimateur sans biais pour l’espérance mathématique


µ = E[X ]. En effet :

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 30/97
Qualités d’un estimateur(Cas univarié)
Example
1
Pn
On pose θ̂n = X̄ = n i=1 Xi .

❂ θ̂n est un estimateur sans biais pour l’espérance mathématique


µ = E[X ]. En effet :
On a X = (X1 , ..., Xn ) est un n-échantillon aléatoire issu de la
variable aléatoire X . donc
E[X ] = E[Xj ], j = 1, ..., n
Ainsi n
1X
E[θ̂n ] = E[Xi ] = µ
n
i=1
d’où
J MOUSTAAID [INSEA]
E[θ̂n ] − µ = 0
1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 31/97
Qualités d’un estimateur(Cas univarié)

Example
S 2 = n1 ni=1 (Xi − X̄ )2 est un estimateur biaisé pour la variance
P
σ 2 = Var [X ]. En effet : On a

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 31/97
Qualités d’un estimateur(Cas univarié)

Example
S 2 = n1 ni=1 (Xi − X̄ )2 est un estimateur biaisé pour la variance
P
σ 2 = Var [X ]. En effet : On a
On sait que :
n−1 2
σ E[S 2 ] =
n
n
❂ par contre la statistique Sc2 = S 2 est un estimateur sans
n−1
biais pour la variance

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 32/97
Qualités d’un estimateur(Cas univarié)

Estimateur convergent ( consistant)


Un estimateur θ̂n de θ est convergent si pour tout ϵ > 0
h i
P θ̂n − θ ≥ ϵ −→ 0 n −→ ∞

i.e. h i
P θ̂n − θ ≤ ϵ −→ 1 n −→ ∞

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 32/97
Qualités d’un estimateur(Cas univarié)

Estimateur convergent ( consistant)


Un estimateur θ̂n de θ est convergent si pour tout ϵ > 0
h i
P θ̂n − θ ≥ ϵ −→ 0 n −→ ∞

i.e. h i
P θ̂n − θ ≤ ϵ −→ 1 n −→ ∞

théorème
Si E[θ̂n ] −→ θ et Var [θ̂n ] −→ 0, lorsque n −→ ∞, alors θ̂n est
convergent

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 33/97
Qualités d’un estimateur(Cas univarié)

pour simplifier on pose T = θ̂n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 34/97
Qualités d’un estimateur(Cas univarié)

La moyenne empirique X̄ est un estimateur consistant et sans biais


de l’espérance.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 35/97
Qualités d’un estimateur(Cas univarié)

Précision d’un estimateur


La qualité d’un estimateur θ̂n de θ se mesure également par
l’erreur
 quadratique moyenne (ou risque quadratique) définie
2 
par E θ̂n − θ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 35/97
Qualités d’un estimateur(Cas univarié)

Précision d’un estimateur


La qualité d’un estimateur θ̂n de θ se mesure également par
l’erreur
 quadratique moyenne (ou risque quadratique) définie
2 
par E θ̂n − θ

théorème
Soit θ̂n un estimateur du paramètre θ à étudier. On a :
 2   2
E θ̂n − θ = Var [θ̂n ] + E[θ̂n ] − θ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 36/97
Qualités d’un estimateur(Cas univarié)

Précision d’un estimateur


Remarque
Entre deux estimateurs sans biais, le “meilleur” sera celui dont la
variance est minimale (on parle d’efficacité).

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 36/97
Qualités d’un estimateur(Cas univarié)

Précision d’un estimateur


Remarque
Entre deux estimateurs sans biais, le “meilleur” sera celui dont la
variance est minimale (on parle d’efficacité).
Exemple
Soit X ∼ N (µ, σ 2 ). X1 et X̄ sans des estimateur sans biais de µ de
2
risques quadratiques respectifs σ 2 et σn si bien que X̄ est préférable
à X1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 37/97
Application 1

Soient T1 et T2 deux estimateurs différents du meme paramètre θ.


On suppose que : E(T1 ) = θ + b1 et E(T2 ) = θ + b2 (b1 et b2 sont
deux valeurs numériques connues). Soit T = αT1 + βT2 .
Déterminer α et β pour que T soit un estimateur sans biais de θ:
1. Lorsque b1 ̸= b2
2. Lorsque b1 = b2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 38/97
Application 2

Soient les variables aléatoires Xi , (i = 1; 2) i.i.d de moyenne m et


de variance σ 2 . Lequel des deux estimateurs de m non biaisés
choisirez-vous:

X1 + X2 aX1 + bX2
X̄1 = X̄2 =
2 a+b
avec a, b ∈ R et a + b ̸= 0

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 39/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Vraisemblance

❂ On appelle fonction de vraisemblance de θ pour une


réalisation (x1 , ..., xn ) d’un échantillon X , la fonction de θ
n
Y
Ln (x1 , x2 , ..., xn , θ) = f (xi , θ)
i=

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 39/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Vraisemblance

❂ On appelle fonction de vraisemblance de θ pour une


réalisation (x1 , ..., xn ) d’un échantillon X , la fonction de θ
n
Y
Ln (x1 , x2 , ..., xn , θ) = f (xi , θ)
i=

❂ On appelle fonction de log-vraisemblance la fonction définie


par
ℓn (x1 , x2 , ..., xn , θ) = ln Ln (x1 , x2 , ..., xn , θ)
Elle n’a de sens que si θ vérifie Ln (x1 , x2 , ..., xn , θ) > 0
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 40/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Exemple : Loi exponentielle


Supposons que X suit une loi exponentielle de paramètre λ
inconnu, X ∼ E(λ). Das ce cas

f (x, λ) = λe −λx 1R+ (x)

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 40/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Exemple : Loi exponentielle


Supposons que X suit une loi exponentielle de paramètre λ
inconnu, X ∼ E(λ). Das ce cas

f (x, λ) = λe −λx 1R+ (x)

Ainsi
n
Y n
Y Pn
Ln (x1 , x2 , ..., xn , λ) = f (xi , θ) = λe −λx = λn e −λ i=1 xi

i= i=

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 41/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Méthodes d’estimation

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 41/97
ESTIMATION PONCTULLE D’UN PARAMETRE

Méthodes d’estimation

❂ la méthode du maximum de vraisemblance

❂ la méthode des moments

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 42/97
la méthode du maximum de vraisemblance

❂ Supposons que X1 , X2 , ..., Xn sont des variables aléatoires


discrètes, Dans ce cas

L(x1 , x2 , ..., xn , θ) = P(X1 = x1 , X2 = x2 , ..., Xn = xn ; θ)

❂ C’est la probabilité que l’on observe les réalisations x1 , ..., xn


quand la vraie valeur du paramètre est θ.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 42/97
la méthode du maximum de vraisemblance

❂ Supposons que X1 , X2 , ..., Xn sont des variables aléatoires


discrètes, Dans ce cas

L(x1 , x2 , ..., xn , θ) = P(X1 = x1 , X2 = x2 , ..., Xn = xn ; θ)

❂ C’est la probabilité que l’on observe les réalisations x1 , ..., xn


quand la vraie valeur du paramètre est θ.

❂ Il est logique de dire qu’une valeur vraisemblable pour θ est la


valeur pour laquelle la probabilité d’observer x1 , ..., xn est la plus
forte possible

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 43/97
la méthode du maximum de vraisemblance
méthode du maximum de vraisemblance
❂ La méthode consistant à estimer θ par la valeur qui maximise
Ln (vraisemblance) s’appelle méthode du maximum de
vraisemblance.
❂ On appelle estimateur du maximum de vraisemblance (emv) de
θ la statistique θ̂nemv qui maximise la fonction de vraisemblance
L(X1 , X2 , ..., Xn , θ) en θ.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 43/97
la méthode du maximum de vraisemblance
méthode du maximum de vraisemblance
❂ La méthode consistant à estimer θ par la valeur qui maximise
Ln (vraisemblance) s’appelle méthode du maximum de
vraisemblance.
❂ On appelle estimateur du maximum de vraisemblance (emv) de
θ la statistique θ̂nemv qui maximise la fonction de vraisemblance
L(X1 , X2 , ..., Xn , θ) en θ.
☞ Une expression alternative est :

θ̂nemv ∈ arg max Ln (X1 , X2 , ..., Xn , θ)


θ

où arg max désigne l’argument du maximum qui est l’ensemble


des points en lesquels une expression atteint sa valeur maximale
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 44/97
la méthode du maximum de vraisemblance

Notes
❂ L’EMV n’existe pas toujours.
❂ Un estimateur de maximum de vraisemblance n’est pas
forcément unique

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 45/97
la méthode du maximum de vraisemblance

Notes
❂ Si Ln est dérivable et si Ln admet un maximum global en une
valeur, alors la dérivée première s’annule en et que la dérivée
seconde est négative.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 45/97
la méthode du maximum de vraisemblance

Notes
❂ Si Ln est dérivable et si Ln admet un maximum global en une
valeur, alors la dérivée première s’annule en et que la dérivée
seconde est négative.
❂ La vraisemblance étant positive et le logarithme népérien une
fonction croissante, il est équivalent et souvent plus simple de
maximiser le logarithme népérien de la vraisemblance

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 46/97
la méthode du maximum de vraisemblance

Cas univarié : en pratique et si Ln est de classe C 2 :


❂ une condition nécessaire que doit vérifier θ̂nemv :

∂Ln (x1 , x2 , ..., xn ; θ) ∂ ln Ln (x1 , x2 , ..., xn ; θ)
∂θ emv = 0 ou ∂θ emv = 0
θ=θ̂n θ=θ̂n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 46/97
la méthode du maximum de vraisemblance

Cas univarié : en pratique et si Ln est de classe C 2 :


❂ une condition nécessaire que doit vérifier θ̂nemv :

∂Ln (x1 , x2 , ..., xn ; θ) ∂ ln Ln (x1 , x2 , ..., xn ; θ)
∂θ emv = 0 ou ∂θ emv = 0
θ=θ̂n θ=θ̂n

❂ vérifier que θ̂nemv est bien un maximum :

∂ 2 L(x1 , x2 , ..., xn ; θ) ∂ 2 ln Ln (x1 , x2 , ..., xn ; θ)


∂θ2 emv < 0 ou ∂θ2 emv < 0


θ=θ̂n θ=θ̂n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 47/97
la méthode du maximum de vraisemblance

Exemple

On souhaite estimer le paramètre λ d’une loi de Poisson à partir


d’un n-échantillon. On a
λx −λ
f (x, θ) = P(X = x) = e
x!

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 48/97
la méthode du maximum de vraisemblance

Cas à plusieurs paramètres θ = (θ1 , θ2 , ..., θd ) :


❂ une condition nécessaire que doit vérifier θ̂nemv :

∂Ln (x1 , x2 , ..., xn ; θ)
∂θj emv = 0
θ=θ̂n

ou
∂ ln Ln (x1 , x2 , ..., xn ; θ)
∂θj emv = 0; j = 1, ..., d
θ=θ̂n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 48/97
la méthode du maximum de vraisemblance

Cas à plusieurs paramètres θ = (θ1 , θ2 , ..., θd ) :


❂ une condition nécessaire que doit vérifier θ̂nemv :

∂Ln (x1 , x2 , ..., xn ; θ)
∂θj emv = 0
θ=θ̂n

ou
∂ ln Ln (x1 , x2 , ..., xn ; θ)
∂θj emv = 0; j = 1, ..., d
θ=θ̂n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 49/97
la méthode du maximum de vraisemblance

❂ vérifier que θ̂nemv est bien un maximum : la matrice hessienne


des dérivées seconde
 2 
∂ L(x1 , x2 , ..., xn ; θ)

∂θj ∂θk

j,k=1,...,d
emv
θ=θ̂n

ou
2
 
∂ ln Ln (x1 , x2 , ..., xn ; θ)

∂θj ∂θk

j,k=1,...,d

θ=θ̂nemv
doit être définie négative i.e. que toutes ses valeurs propres sont
négatives (si d = 2, cela équivaut à dire que son déterminant
est positif et sa trace est négatif)

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 50/97
la méthode du maximum de vraisemblance

Exemple

On souhaite
 estimer les paramètres µ et σ 2 d’une loi normale,
N µ, σ 2 , à partir d’un n-échantillon aléatoire X .
2
 
1 (t − µ)
f (t, µ, σ 2 ) = √ exp −
2πσ 2 2σ 2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 51/97
la méthode du maximum de vraisemblance
Exemple(La vraisemblance n’est pas a priori dérivable en tout
point θ)

Soient X1 , X2 , ..., Xn ∼ U[0, θ].


n
Y 1
Ln (X1 , ..., Xn ; θ) = 1[0,θ](Xi )
θ
i=1
1
= 10≤inf 1≤i≤n Xi ≤sup1≤i≤n Xi ≤θ
θn
1
= n 10≤inf 1≤i≤n Xi × 1sup1≤i≤n Xi ≤θ
θ
Ainsi
θ̂nemv = sup Xi
1≤i≤n
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 52/97
la méthode du maximum de vraisemblance

Exemple(L’emv n’est pas unique)

Soient X1 , X2 , ..., Xn ∼ U[θ, θ + 1]. Dans cet exemple

θ̂nemv compris entre sup Xi − 1 compris entre inf Xi


1≤i≤n 1≤i≤n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 53/97
la méthode des moments

Définitions

Soit Y une variable aléatoire, c ∈ R et k un entier naturel.


❂ On appelle moment d’ordre k, noté mk , de Y l’espérance
mathématique de Y k

mk = E Y k
 

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 53/97
la méthode des moments

Définitions

Soit Y une variable aléatoire, c ∈ R et k un entier naturel.


❂ On appelle moment d’ordre k, noté mk , de Y l’espérance
mathématique de Y k

mk = E Y k
 

❂ On appelle moment d’ordre k par rapport à c, noté µk , de Y


l’espérance mathématique de (Y − c)k

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 53/97
la méthode des moments

Définitions

Soit Y une variable aléatoire, c ∈ R et k un entier naturel.


❂ On appelle moment d’ordre k, noté mk , de Y l’espérance
mathématique de Y k

mk = E Y k
 

❂ On appelle moment d’ordre k par rapport à c, noté µk , de Y


l’espérance mathématique de (Y − c)k
❂ si c = E [Y ] on parle de moment centré d’orde k.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 54/97
la méthode des moments

la méthode des moments consiste à égaler le k-ème moment


1 Pn k
 k
empirique : X au k-ème moment théorique E Xi , qui
n i=1 i
dépend du paramètre inconnu θ.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 54/97
la méthode des moments

la méthode des moments consiste à égaler le k-ème moment


1 Pn k
 k
empirique : X au k-ème moment théorique E Xi , qui
n i=1 i
dépend du paramètre inconnu θ.

☞ On considère autant d’équations de moments qu’il est nécessaire


pour déterminer une estimation de θ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 55/97
la méthode des moments

L’estimateur obtenu par la méthode des moments, noté θ̂nmm de


θ = (θ1 , θ2 , ..., θd ) est la solution du système (s’elle existe) suivant:
n
1X
E [Xi ] = Xi
n
i=1
n
1 X
E Xi2 = Xi2
 
n
i=1
.
.
n
 d 1X d
E Xi = Xi
n
i=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 56/97
la méthode des moments

Exemple

Supposons que X suit une loi exponentielle de paramètre λ


inconnu, X ∼ E(λ). Das ce cas

f (x, λ) = λe −λx 1R+ (x)

Pour tout λ, on E[X1 ] = λ1 . L’estimateur obtenu par la méthode


des moments est
1 1
θ̂nmm = P =
1 n X̄
i=1 Xi
n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 57/97
la méthode des moments
Exemple

On souhaite estimer (par la méthode des moments) les paramètres


µ et λ d’une loi normale, N (µ, λ) , à partir d’un n-échantillon
aléatoire X . On pose θ = (µ, λ)
(t − µ)2
 
1
f (t, µ, λ) = √ exp −
2πλ 2λ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 57/97
la méthode des moments
Exemple

On souhaite estimer (par la méthode des moments) les paramètres


µ et λ d’une loi normale, N (µ, λ) , à partir d’un n-échantillon
aléatoire X . On pose θ = (µ, λ)
(t − µ)2
 
1
f (t, µ, λ) = √ exp −
2πλ 2λ
On a
E[X1 ] = µ et E[(X1 )2 ] = λ + µ2
L’estimateur obtenus par la méthode des moments vérifie
n
mm mm 2 mm 1X 2
µ̂n = X̄n et (µ̂n ) + λ̂n = Xi
n
i=1
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 58/97
la méthode des moments

Exemple

c’est a dire !
n
1X
θ̂nmm = X̄n ; (Xi − X̄n )2
n
i=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 59/97
la méthode des moments

Exemple(L’estimateur par la méthode des moments n’existe pas)

Soient X1 , X2 , ..., Xn ∼ U[−θ, θ], avec θ > 0.


1
f (x1 ; θ) = 1[−θ,θ] (x1 )

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 59/97
la méthode des moments

Exemple(L’estimateur par la méthode des moments n’existe pas)

Soient X1 , X2 , ..., Xn ∼ U[−θ, θ], avec θ > 0.


1
f (x1 ; θ) = 1[−θ,θ] (x1 )

Remarquons que E[X1 ] = 0. Danc l’équation

X̄ = E[X1 ] = 0

n’a pas de solutions pour θ

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 60/97

Intervalle de confiance

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 61/97

L’estimation d’un paramètre inconnu par une seule valeur est


quelque fois insuffisante, on préfère souvent donner un intervalle de
valeurs.
Soit X une variable aléatoire et θ un paramètre de sa distribution.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 62/97
Rappel

Loi du chi-deux
Soit U1 , ..., Up des variables aléatoires indépendantes de même loi N (0; 1). La
variable aléatoire, égale à la somme des carrés de p variables U1 , ..., Up , suit la loi
du chi-deux, χ2p , à p degrés de liberté :
p
X
χ2p = Ui2
i=1

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 62/97
Rappel

Loi du chi-deux
Soit U1 , ..., Up des variables aléatoires indépendantes de même loi N (0; 1). La
variable aléatoire, égale à la somme des carrés de p variables U1 , ..., Up , suit la loi
du chi-deux, χ2p , à p degrés de liberté :
p
X
χ2p = Ui2
i=1

Loi Fisher
On considère deux variables aléatoires indépendantes suivant des lois du chi-deux
à n1 et n2 degrés de liberté respectivement. La variable aléatoire F de Fisher est
définie par :
χ2 /n1
F (n1 , n2 ) = n21
χn2 /n2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 63/97
Rappel

Loi de Student
La loi de Student à p degrés de liberté, notée Tp , est la loi de la variable
aléatoire T définie par :
U
T =q
χ2p /p

où U est une variable aléatoire centrée réduite normale indépendante de χ2p .

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 64/97
Rappel

La variance empirique S 2 d’un échantillon, X , de taille n issu de X est définie par


: n
1X
S2 = (Xi − X̄ )2
n i=1

Propriétés
Supposons que X suit une loi normale d’espérance µ et de variance σ 2
nS 2
❂ 2 est une variable χ2n−1
σ
X̄ − µ
❂ √ st une variable suivant la loi de Student Tn−1
S/ n − 1
❂ les statistiques X̄ et S 2 sont indépendantes quelle que soit la valeur de n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 65/97
Intervalle de confiance

Soient deux statistiques An = T1 (X1 , ..., Xn ) et Bn = T2 (X1 , ..., Xn )


où (X1 , ..., Xn ) est un n-échantillon de X . On se fixe α ∈ [0, 1]
Définition
On dira que [An , Bn ] est un intervalle de confiance de niveau de
confiance ou seuil de confiance 1 − α pour θ si

P (θ ∈ [An , Bn ]) = 1 − α

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 66/97

❂ Un intervalle de confiance est un intervalle aléatoire car ses


bornes sont des variables aléatoires
❂ Il n’existe pas une manière unique de définir un intervalle de
confiance pour θ
Par exemple, si on écrit α = α1 + α2 , α1 , α2 ≥ 0 (il existe un
nombre infini de telles décompositions). Il suffit de prendre An
et Bn tels que P (θ ∈ ]−∞, An ]) = α1 et P (θ ∈ [Bn , ∞[) = α2
à condition biensur que {An ≤ θ} et {Bn ≥ θ} soient disjoints
❂ souvent on choisit α1 = α2 = α2
❂ Un intervalle de confiance de la forme [An , Bn ] s’appelle un
intervalle de confiance bilatéral.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 67/97

❂ Cependant, il peut arriver que la recherche d’un intervalle


unilatéral s’avère plus pertinente. Il s’agira d’un intervalle de la
forme [Cn , ∞[ ou ]−∞, Cn ] où Cn = T (X1 , ..., Xn ) est une
statistique.
❂ La probabilité 1 − α représente le niveau de confiance de
l’intervalle.
❂ Dans la pratique on donne à α une valeur acceptable, de l’ordre
0.05.
❂ Pour définier un intervalle de confiance il faut connaitre un
estimateur ponctuel du paramètre θ ainsi que sa loi de
distribution.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 68/97
Cas 1 : X ∼ N (µ, σ 2 )

Soit X = (X1 , X2 , ..., Xn ) un n-échantillon de X . On suppose que


X ∼ N (µ, σ 2 ). Fixons α ∈ [0, 1]
❂ X1 , X2 , ..., Xn sont des variables aléatoires independantes
identiquement distribuées de loi N (µ, σ 2 ).

❂ Les paramètres à éstimer sont µ et σ 2

❂ la statistique X̄ = n1 ni=1 Xi est un estimateur sans biais de µ.


P

1
Pn
❂ Sc2 = n−1 2 2
i=1 (Xi − X̄ ) est un estimateur sans biais de σ .

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 69/97
Cas 1 : X ∼ N (µ, σ 2 )

Intervalle de confiance de la moyenne µ


☛ L’écart-type σ est connu
L’intervalle de confiance, noté In , pour la moyenne µ de niveau de
confiance 1 − α est égale à
 
σ σ
In = X̄ − √ z1− α2 ; X̄ + √ z1− α2
n n
où z1− α2 est le quantile d’ordre 1 − α2 pour la loi normale centrée et
réduite ( c’est à dire P(Z ≤ z1− α2 ) = 1 − α2 , avec Z ∼ N (0, 1))

Note
la valeur z1− α2 étant lue sur la table de la loi normale réduite.
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 70/97
Cas 1 : X ∼ N (µ, σ 2 )

En effet :
On a : pour tout n
X̄ − µ
Z= √ ∼ N (0, 1),
σ/ n
alors
h i h i h i
P |Z | ≤ z1− α2 = P Z ≤ z1− α2 − P Z ≤ −z1− α2
h i
= 2P Z ≤ z1− α2 − 1 = 1 − α

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 71/97
Cas 1 : X ∼ N (µ, σ 2 )

D’autre part on a :
h i h i
|Z | ≤ z1− α2 = −z1− α2 ≤ Z ≤ z1− α2
 
X̄ − µ
= −z1− α2 ≤ √ ≤ z1− α
σ/ n 2
 
σ σ
= X̄ − √ z1− α2 ≤ µ ≤ X̄ + √ z1− α2
n n

Ainsi  
σ σ
P X̄ − √ z1− α2 ≤ µ ≤ X̄ + √ z1− α2 = 1 − α
n n

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 72/97
Cas 1 : X ∼ N (µ, σ 2 )

Exemple : Une machine M fabrique des engrenages en grande


série. Des études antérieures permettent de dire que les mesures
des diamétres forment une population normale d’écart-type
σ = 0, 042cm. On extrait un échantillon non exhaustif de la
fabrication journalière de taille n = 200 engrenages. La moyenne
des diamètres sur cet échantillon est x = 0, 824cm.
Donner au seuil de confiance 95% un intervalle de confiance de la
moyenne m des diamètres des engrenages.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 73/97
Cas 1 : X ∼ N (µ, σ 2 )
Considérons D la variable aléatoire égale au diamètre des
engrenages. L’énoncé dit que D ∼ N (m, 0, 0422 ). Soit
D1 , D2 , ..., D200 un 200-échantillon au hasard de D. Les n = 200
variables aléatoires Dj suivent la même loi N (m, 0, 0422 ) On
considèe P alors l’estimateur sans biais et convergent
D̄ = 200 200
1 ¯
i=1 Di de m. une réalisation de D̄ est d = 0, 824. On
sait que l’intervalle de confiance au risque α est
 
σ σ
D̄ − √ z1− α2 ; D̄ + √ z1− α2
n n
Pour α = 5% on a z1− α2 = 1.96. Ainsi l’intervalle de confiance est
 
0.042 0.042
D̄ − √ 1.96; D̄ + √ 1.96
200 200
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 74/97
Exemple 1 : X ∼ N (µ, σ 2 )

L’échantillon fournit une réalisation de cet intervalle de confiance à savoir


 
0.042 0.042
0.824 − √ 1.96; 0.824 + √ 1.96 = [0.818; 0.830]
200 200

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 75/97
Cas 1 : X ∼ N (µ, σ 2 )
Intervalle de confiance de la moyenne µ
☛ L’écart-type σ est inconnu
La variable aléatoire :
X̄ − µ
Tn−1 = √ ,
Sc / n
suit une loi de Student à (n − 1) degrés de liberté.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 75/97
Cas 1 : X ∼ N (µ, σ 2 )
Intervalle de confiance de la moyenne µ
☛ L’écart-type σ est inconnu
La variable aléatoire :
X̄ − µ
Tn−1 = √ ,
Sc / n
suit une loi de Student à (n − 1) degrés de liberté.
Un intervalle de confiance, noté In , pour la mayenne µ de niveau de
confiance 1 − α est égale à
 
Sc n−1 Sc n−1
In = X̄ − √ t1− α ; X̄ + √ t1− α
n 2 n 2
n−1 α
où t1− α est le quantile d’ordre 1 − pour la loi de Student
2 2
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 76/97
Cas 1 : X ∼ N (µ, σ 2 )

Note
n−1
la valeur t1− α étant lue sur la table de la loi de student à (n − 1)
2
degrés de liberté.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 77/97
Cas 1 : X ∼ N (µ, σ 2 )

Exemple :
Afin d’étudier le salaire journalier, en $, des ouvriers d’un secteur
d’activité, on procède à un tirage non exhaustif, d’un échantillon de
taille n = 16 . On a obtenu les résultats suivants :

41 40 45 50 41 41 49 43 45 52 40 48 50 49 47 46

On suppose que la loi suivie par la variable aléatoire ”salaire


journalier” est une loi normale de moyenne m et d’écart-type σ
inconnus. On a
❂ la moyenne arithmétique : x̄ = 45, 4375.
❂ la variance arithmétique : s 2 = 15, 2460 = (3, 9046)2 et
sc2 = 16, 2625 = (4, 0326)2
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 78/97
Exemple 1 : X ∼ N (µ, σ 2 )

Intervalle de confiance pour la moyenne, seuil de confiance 0, 95


 
Sc 15 Sc 15
In = X̄ − √ t1− α ; X̄ + √ t1− α
16 2 16 2

15
Pour α = 5% on a t1− α = 2.1315. Donc
2

 
Sc Sc
I = X̄ − 2.1315 √ ; X̄ + 2.1315 √
16 16
L’échantillon fournit une réalisation de cet intervalle de confiance à savoir
 
4, 0326 4, 0326
45, 4375 − 2, 131 × √ ; 45, 4375 + 2, 131 × √ = [43.2892; 47.5859]
16 16

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 79/97
Cas 1 : X ∼ N (µ, σ 2 )

Intervalle de confiance pour la variance σ 2


☛ La moyenne µ est connu
La variable aléatoire :
n
1X
2
T = (Xi − µ)2 ,
n
i=1

nT 2 2
est un estimateur de σ avec 2 suit une loi du chi-deux à n
σ
degrés de liberté, χ2 (n).
Soit χ2α ,n la quantile d’ordre α2 pour une loi du Khi-deux χ2 (n) et
2
χ1− α ,n la quantile d’ordre 1 − α2 pour une loi du Khi-deux χ2 (n)
2
2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 80/97
Cas 1 : X ∼ N (µ, σ 2 )

Ainsi
nT 2
 
P χ2α2 ,n < 2 < χ21− α2 ,n = 1 − α
σ

Un intervalle de confiance, noté In , pour la variance σ 2 de niveau de


confiance 1 − α est égale à
" #
nT 2 nT 2
In = ;
χ21− α ,n χ2α ,n
2 2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 81/97
Cas 1 : X ∼ N (µ, σ 2 )

Note
la valeur χ2α ,n et χ21− α ,n étant lue sur la table de la loi du Khi-deux
2 2
χ2 (n).

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 82/97
Cas 1 : X ∼ N (µ, σ 2 )

Exemple: Soit X une variable aléatoire suivant la loi normale N (40; σ 2 ). Pour estimer
la variance, on prélève un échantillon de taille n = 25 et on calcule la valeur de la
statistique T 2 (définie précédemment) pour cet échantillon. On obtient t 2 = 12.
Un intervalle de confiance pour la variance σ 2 de niveau de confiance 1 − α = 0.95 est
égale à
nT 2 nT 2
 
;
χ20.975 (25) χ20.025 (25)
25T 2 25T 2
 
= ;
40, 644 13, 120
L’échantillon fournit une réalisation de cet intervalle de confiance à savoir
 
25 × 12 25 × 12
;
40, 644 13, 120

= [7, 381; 22, 866]

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 83/97
Cas 1 : X ∼ N (µ, σ 2 )

Intervalle de confiance pour la variance σ 2


☛ La moyenne µ est inconnu
La variable aléatoire :
n
1X
2
S = (Xi − X̄ )2 ,
n
i=1

nS 2 2
est un estimateur de σ avec 2 suit une loi du chi-deux à n − 1
σ
2
degrés de liberté, χ (n − 1).
Soit χ2α ,n−1 la quantile d’ordre α2 pour une loi du Khi-deux
2
χ2 (n − 1) et χ21− α ,n−1 la quantile d’ordre 1 − α2 pour une loi du
2
Khi-deux χ2 (n − 1)
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 84/97
Cas 1 : X ∼ N (µ, σ 2 )

Intervalle de confiance pour la variance σ 2


☛ La moyenne µ est inconnu
Un intervalle de confiance, noté In , pour la variance σ 2 de niveau de
confiance 1 − α est égale à
" #
2 2
nS nS
In = 2 ; 2
χ1− α ,n−1 χ α ,n−1
2 2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 85/97
✍: Intervalle de confiance pour la moyenne d’une loi
quelconque

❂ Supposons que la distribution de X n’est pas connue ou


lorsqu’elle est connue mais ne suit pas une loi normale.
❂ On prendra pour estimateurs sans biais de la moyenne, la
statistique X̄ , et de la variance, la statistique Sc2 .
❂ Si la taille de l’échantillon est grande, en pratique n ≥ 30, grâce
X̄ − µ
au théorème central limite on a la variable aléatoire √ suit
σ/ n
approximativement la loi normale N (0, 1)

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 86/97
✍: Intervalle de confiance pour la moyenne d’une loi
quelconque

❂ Ce résultat nous permet d’obtenir I’intervalle de confiance


approximatif de I’estimateur de la moyenne µ = E[X ] en
utilisant la même procédure de le cas précédent si la Variance
σ 2 connue
❂ Si la Variance σ 2 inconnue : En remplaçant σ 2 par Sc2 , la
X̄ − µ
convergence en loi est conservée : la variable aléatoire √
Sc / n
suit approximativement la loi normale N (0, 1)
❂ Si la série prélevée est faible, il faut utiliser les lois suivies par
les paramètres étudiés.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 87/97
✍: Intervalle de confiance pour la moyenne d’une loi
quelconque

Exemple
Dans un test pharmaceutique, on a administré à 64 rats de
laboratoire un dosage fixe d’un nouveau produit chimique contre
une maladie du sang.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 88/97
✍: Intervalle de confiance pour la moyenne d’une loi
quelconque
Le temps avant que le premier symptôdme n’apparaisse au niveau
des globules à été mesuré et les resultats obtenus ont été :
x̄ = 2, 13 minutes
sc = 0, 37 minute
Bien que l’analyse des résultats individuels ait montré que la
distribution du laps de temps écoulé avant l’apparition d’un
symptome ne suit pas une loi normale. Cependant, pour un grand
échantillon ( Ici n = 64 > 30), l’intervalle de confiance
asymptotique avec la seuil 0, 95, est de la forme :
 
Sc Sc
In = X̄ − √ z0.975 ; X̄ + √ z0.975
n n
60
avec α = 0.05 et z0.975
J MOUSTAAID [INSEA]
= 1.96
1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 89/97
✍: Intervalle de confiance pour la moyenne d’une loi
quelconque

Une réalisation de cet intervalle de confiance sur l’échantillon est


 
0.37 0.37
2.13 − 1.96 √ ; 2.13 + 1.96 √
64 64
= [2.04; 2, 22]

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 90/97
✍: Intervalle de confiance de la différence des moyennes de
deux lois normales indépendantes
❂ Soient X ∼ N (ν, λ2 ) et Y ∼ N (µ, σ 2 ) deux variables
indépendantes. On pose m = ν − µ
❂ On considère deux échantillons indépendants de taille n1 pour la
variable X et de taille n2 pour la variable Y .
❂ La variable aléatoire d¯ = X̄ − Ȳ est un estimateur de d suit une
loi normale d’espérance

d =ν−µ

et d’écart-type s
λ2 σ 2
β= +
n1 n2
J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 91/97
✍: Intervalle de confiance de la différence des moyennes de
deux lois normales indépendantes

Cas 1 : σ et λ sont connues


On a X̄ − Ȳ ∼ N (d, β) . D’où la variable aléatoire normale
centrée réduite :
X̄ − Ȳ − d
Z= ∼ N (0, 1)
β

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 92/97
✍: Intervalle de confiance de la différence des moyennes de
deux lois normales indépendantes

L’intervalle de confiance, noté In , pour d de niveau de confiance


1 − α est égale à
 
In = X̄ − Ȳ − βz1− α2 ; X̄ − Ȳ + βz1− α2

où z1− α2 est le quantile d’ordre 1 − α2 pour la loi normale centrée et


réduite ( c’est à dire P(Z ≤ z1− α2 ) = 1 − α2 , avec Z ∼ N (0, 1))

Note
la valeur z1− α2 étant lue sur la table de la loi normale réduite.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 93/97
✍: Intervalle de confiance de la différence des moyennes de
deux lois normales indépendantes

Cas 2 : σ et λ sont inconnues (on suppose ici que λ = σ)


Proposition
La variable aléatoire
X̄ − Ȳ − d
T =r s
1 1 n1 S12 + n2 S22
+
n1 n2 n1 + n2 − 2
loi de Student à n1 + n2 −P
suit une P 2 degrés de liberté, avec
S1 = n1 i=1 (Xi − X̄ ) et S2 = n2 ni=1
2 1 n1 2 2 1 2
(Yi − Ȳ )2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 94/97
✍: Intervalle de confiance de la différence des moyennes de
deux lois normales indépendantes

(on suppose ici que λ = σ)

Un intervalle de confiance, noté In , pour d de niveau de confiance 1 − α est égale à


h i
n1 +n2 −2 n1 +n2 −1
In = X̄ − Ȳ − Rt1− α ; X̄ − Ȳ + Rt1− α
2 2

n1 +n2 −2
où t1− α est le quantile d’ordre 1 − α2 pour la loi de Student à n1 + n2 − 2 degrés de
2
liberté et s
1 n1 S12 + n2 S22
r
1
R= +
n1 n2 n1 + n2 − 2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 95/97
✍: Intervalle de confiance de la différence des moyennes de
deux lois normales indépendantes

Exemple :
Des tubes sont construits par deux procédés de fabrications A et B.
On dispose de deux échantillons de tubes dont on mesure les
diamètres (en mm) :
– Procédé A : échantillon 1 de taille n1 = 5 . Résultats :
63, 12; 63, 57; 62, 81; 64, 32; 63, 76.
– Procédé B : échantillon 2 de taille n2 = 4. Résultats :
62, 51; 63, 24; 62, 31; 62, 21.
On suppose que les diamètres des tubes de chaque fabrication sont
distribués suivant des lois normales de variances inconnues mais
égales.

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 96/97

L’Intervalle de confiance bilatéral, à risques symétriques, pour la


différence d des moyennes des deux lois (seuil de confiance 0, 95) :
h i
n1 +n2 −2 n1 +n2 −2
In = X̄ − Ȳ − Rt1− α ; X̄ − Ȳ + Rt1− α
2 2

avec n1 + n2 − 2 = 7 et α = 0.05. Ainsi, En utilisant le tableau de


n1 +n2 −2
loi de Student on déduit : t1− α = 2, 365. De plus on a
2
❂ x̄ = 63, 516, ȳ = 62, 5675 =⇒ x̄ − ȳ = 0, 9485
❂ n1 s12 = ni=1 (xi − x̄))2 = 1, 3638
P1

❂ n2 s22 = ni=1 (yi − ȳ ))2 = 0, 6498


P2

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023
Estimation ponctuelle Estimation par intervalle de confiance 97/97

r s
1 1 n1 s12 + n2 s22
r= + = 0, 3598
n1 n2 n1 + n2 − 2
Par conséquent, une réalisation de cet intervalle de confiance sur
l’échantillon est :
h i
n1 +n2 −2 n1 +n2 −2
x̄ − ȳ − rt1− α ; x̄ − ȳ + rt1− α
2 2

= [0, 9485 − 2, 365 × 0, 3598; 0, 9485 + 2, 365 × 0, 3598]


= [0.097573; 1, 799427]

J MOUSTAAID [INSEA] 1ère année ESBD, AC, SROA & BSDB 2022/2023

Vous aimerez peut-être aussi