| Qu'est-ce que le fichier Robot.txt ? |
 |
 |
 |
|
Ce fichier permet d'indiquer aux moteurs de recherche de ne pas indexer certaines parties de votre site. Il s'agit d'un fichier texte que vous créez avec Word, Wordpad ou Notepad. Pour qu'il soit prix en compte par les outils de recherche, vous devez le télécharger dans le répertoire racine de votre site web. Voici ce que doit contenir ce fichier pour chaque moteur : User-agent: { Google } Disallow: { document-a-exclure } Vous pouvez demander à ce qu'une page ne soit visitée par aucun outil de recherche avec la syntaxe suivante User-agent: * Disallow: societe.html Lorsque l'on veut interdir à un moteur de recherche d'indexer un site, on insère les lignes suivantes dans le fichier robot.txt User-agent: Google Disallow: / * |