| Robots.txt | Fichier texte de petite taille placé dans le repertoire racine d’un site web interdisant l’accès de certains répertoires du site à un robot. Il est utilisé lorsque le webmestre ne souhaite pas que certaines pages de son site soient indexées par les moteurs de recherche. |