Réduction itérative du biais pour des lisseurs multivariés

Résumé : La méthode IBR (iterated biased reduction) permet d'estimer une fonction de régression $m$ inconnue lorsque les variables explicatives sont à valeurs dans $\mathbbR^d$. Pour estimer la fonction $m$, les méthodes non-paramétriques classiques souffrent du fléau de la dimension. En pratique, il faut donc supposer des hypothèses structurelles: modèles additifs, modèles à directions révélatrices... A contrario IBR estime directement la fonction de régression $m$. Elle concurrence MARS, les directions révélatrices ou les modèles additifs et sur des exemples réels ou simulés et elle apporte des gains significatifs sur l'erreur de prévision. Cette méthode utilise en pratique un lisseur pilote soit de type splines plaque-minces soit de type noyau gaussien. Cet estimateur pilote est utilisé de manière répétée afin d'estimer le biais et permet de l'enlever progressivement. La méthode, à l'instar du $L_2$ boosting, nécessite donc l'estimation de l'itération optimale. Des résultats de vitesse de convergence (vitesse minimax) de l'erreur quadratique moyenne de l'estimateur (avec itération optimale) ont été obtenus. L'optimalité du critère de choix de l'itération (GCV) a aussi été démontré. Un exemple simulé simple ($d=2$) et un exemple réel ($d=8$) seront traités et comparés aux méthodes existantes: GAM, MARS, PPR, ou $L_2$-boosting. Un package \textsfR disponible sur le CRAN permet d'utiliser cette méthode très simplement.
Type de document :
Communication dans un congrès
42èmes Journées de Statistique, 2010, Marseille, France, France. 2010
Liste complète des métadonnées

Littérature citée [9 références]  Voir  Masquer  Télécharger

https://hal.inria.fr/inria-00494753
Contributeur : Conférence Sfds-Hal <>
Soumis le : jeudi 24 juin 2010 - 08:56:19
Dernière modification le : mardi 26 juin 2018 - 15:21:27
Document(s) archivé(s) le : lundi 22 octobre 2012 - 14:46:03

Fichier

p154.pdf
Fichiers produits par l'(les) auteur(s)

Identifiants

  • HAL Id : inria-00494753, version 1

Citation

Pierre-André Cornillon, Nick Hengartner, Eric Matzner-Løber. Réduction itérative du biais pour des lisseurs multivariés. 42èmes Journées de Statistique, 2010, Marseille, France, France. 2010. 〈inria-00494753〉

Partager

Métriques

Consultations de la notice

290

Téléchargements de fichiers

142