Aller au contenu

Robots.txt


Sujets conseillés

Salut,

Avec robots.txt, je souhaiterai interdire l'accès d'un répertoire à tous les spiders sauf à MSN Search.

Répertoire à protéger : *ww.mon_site.com/repertoire/

Moteur uniquement autorisé : MSN Search

Comment dois-je faire ?

Merci

Lien vers le commentaire
Partager sur d’autres sites

Tout à fait petit-ourson ;)

Je mettrais une ligne vide au dessus du User-Agent: * toutefois, comme ceci:

User-agent: msnbot
Disallow:

User-agent: *
Disallow: /repertoire/

Lien vers le commentaire
Partager sur d’autres sites

Bonsoir, moi j'aurais fait l'inverse ! Non ? Je croyais que ça se lisait en tenant compte d'un héritage.

J'aurais donc fait ça

User-agent: *
Disallow: /repertoire/

User-agent: msnbot
Disallow:

C'est inutile ?

Lien vers le commentaire
Partager sur d’autres sites

Veuillez vous connecter pour commenter

Vous pourrez laisser un commentaire après vous êtes connecté.



Connectez-vous maintenant
×
×
  • Créer...