Considérant le suivi comme un problème de classification binaire, l'algorithme Ensemble Tracking de Shaï Avidan permet de localiser un objet dans une séquence vidéo grâce à un classifieur entrainé pour distinguer les pixels du fond des pixels de l'objet. Nous introduisons ici une nouvelle approche pour la sélection des exemples d'apprentissage ainsi qu'une technique de modularisation de l'algorithme permettant au système de travailler sur des espaces de caractéristiques homogènes.