Le Maximum de Vraisemblance
Le Maximum de Vraisemblance
Le Maximum de Vraisemblance
Réalisé par :
MAHA KASBAOUI
REDA HAIRY
NAIMA SABRI
KAWTAR
Plan
I. Le Maximum de Vraisemblance :
qDéfinitions et propriétés
qEstimation
qLes moindres carrés ordinaires
Le maximum de vraisemblance
Définitions
Définitions
• La vraisemblance est une fonction des observations et du paramètre
dont l’objectif est de trier les différentes valeurs du paramètre selon
leur « Likelihood ».
• La vraisemblance offre une approche générale de l’estimation de
paramètres inconnu à l’aide de données.
•
Soit X une variable aléatoire réelle, de loi ou bien discrète ou bien continue, dont on veut estimer un
paramètre θ. On note
le nombre :
.
En pratique :
La condition nécessaire Ou
Permet de trouver la valeur
Est un maximum local si la condition suffisante est remplie au point critique
Ou
§ Pour simplifier, dans les cas de lois continues, où parfois la densité de probabilité est nulle sur un
certain intervalle, on peut omettre d'écrire la vraisemblance pour cet intervalle uniquement.
Maximum de vraisemblance
Propriétés
Propriétés
L'estimateur obtenu par la méthode du maximum de vraisemblance
est :
• Convergent, mais il peut être biaisé en échantillon fini.
• Asymptotiquement efficient, il atteint la borne de Cramer Rao.
• Asymptotiquement distribué selon une loi normale.
•
Moindres Carrés Ordinaires
Définitions
Moindres Carrés Ordinaires
• C’est une technique pour estimer les coefficients d'une régression linéaire
qui décrivent les relations entre une ou plusieurs variables quantitatives
et une variable dépendante (selon si la régression linéaire est simple ou
multiple).
• Les moindres carrés désignent l'erreur quadratique minimale.
• Les estimateurs du maximum de vraisemblance ou des moments sont des
approches alternatives à la régression linéaire.
Equation du MCO
• Y = β0 + Σj=1..p βjXj + ε
Où Y = La variable dépendante , β0=constante du modèle ,
X j désigne la jème variable explicative du modèle (j= 1 à p)
e =une erreur aléatoire d'espérance 0 et de variance σ²
Exercice :
On prends l’exemple des 5 spécimens fossiles d’un animal disparu pour lesquels on possède les mesures de la longueur en
cm de leur humérus x et de leur fémur y. 1. Compléter le tableau suivant et en déduire les valeurs des variances et
covariance :
1. Compléter le tableau suivant et en déduire les valeurs des variances et covariance :