Section : Tests sur des échantillons gaussiens
Précédent : Test de corrélation
Suivant : Hypothèses alternatives

## Modèle linéaire

Dans de nombreuses situations, on cherche à expliquer des différences observées sur un caractère statistique, en les attribuant à l'effet d'autres caractères mesurés sur les mêmes individus. Dans l'analyse de variance, les caractères explicatifs (facteurs) ne pouvaient prendre qu'un nombre fini de modalités. Les modèles de régression sont surtout adaptés aux cas où les caractères explicatifs sont continus.

La modélisation probabiliste considère que la mesure (à expliquer) effectuée sur un individu donné est une variable aléatoire, dont la loi dépend des valeurs prises sur cet individu par les caractères explicatifs, considérés comme déterministes. Si désigne la variable aléatoire associée à l'individu , et les valeurs prises pour cet individu par les caractères explicatifs , on séparera l'effet déterministe et l'effet aléatoire par un modèle du type :

où est un -uplet de variables aléatoires indépendantes et de même loi. On parle alors de modèle de régression. La fonction dépend de un ou plusieurs paramètres inconnus que l'on doit estimer. On choisit pour cela de minimiser l'erreur quadratique définie par :

Dans certains cas classiques, on sait résoudre explicitement ce problème de minimisation, et la solution est implémentée dans les environnements de calculs statistiques. Quand une résolution explicite est impossible, on a recours à des algorithmes de minimisation, comme l'algorithme du gradient.

Nous considérons seulement la régression linéaire simple :

où est un échantillon de la loi normale . En d'autres termes, on suppose que les sont des variables aléatoires gaussiennes indépendantes, d'espérances distinctes, mais de même variance . Le modèle comporte 3 paramètres inconnus, , , et .

Les valeurs de et qui minimisent l'erreur quadratique s'expriment en fonction des moyennes, variances et covariances empiriques de et de . Nous notons :

  la moyenne empirique de .
  la variance empirique de .
  la moyenne empirique de .
  la variance empirique de .
  la covariance de et .
  le coefficient de corrélation de et .

On estime et en minimisant l'erreur quadratique :

On obtient ainsi les estimateurs dits des moindres carrés :

et

L'erreur quadratique minimale est :

Ces trois variables aléatoires sont des estimateurs convergents de , et respectivement. On obtient un estimateur sans biais et convergent de en posant :

Le résultat suivant permet de calculer les lois de ces estimateurs, et donc d'en déduire des tests sur les valeurs des paramètres. On peut le considérer comme une extension du théorème 3.1.

Théorème 3.9 Avec les notations précédentes :

1. suit la loi normale .
2. suit la loi de Student .
3. suit la loi du chi-deux .

La première hypothèse que l'on souhaitera tester est que le caractère explicatif n'apporte pas d'information, c'est-à-dire que la pente de la droite de régression linéaire est nulle :

Selon que est supposé connu ou inconnu, on utilisera le point 1) ou le point 2) du théorème. Supposons par exemple que soit inconnu, la statistique de test est :

Pour le test bilatéral de seuil , la règle de décision est :

Rejet de

Ce test est évidemment très proche du test de corrélation, même si les hypothèses de modélisation sont différentes.

Section : Tests sur des échantillons gaussiens
Précédent : Test de corrélation
Suivant : Hypothèses alternatives