Monday, October 8, 2007

Ne pas être indéxé par les robots (site test)

Lors de la phase de création du site test, on ne souhaite pas être indéxé par les robots.
Hébergement Free.fr. Joomla 1.0.13
Source : http://forum.joomlafacile.com/
Info sur les robots.txt : http://www.robotstxt.org/

Plusieurs méthodes :
1) Ajouter une balise meta dans head :
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
2) A la racine du site, dans le fichier robots.txt existant,
ajouter la ligne, derrière la ligne du user-agent, qui permet l'exclusion de tout le site :
Disallow: /
Note, dans ce fichier, il existe aussi des exclusions pour les répertoires "techniques". Je les laisse. Lors de la publication du site, il suffira de retirer uniquement la ligne ci-dessus.

3) Page blanche index.html à la racine.
Mais on perd l'accès direct au site, il faut nommer les fichiers (index.php)

No comments: