Aller au contenu

code pour repérer les moteurs de recherche


tomlelab

Sujets conseillés

Il y a aussi deux "fonctions" vérifier si il appele robots.txt et si il se signale comme crawl... (cf awstats)

Lien vers le commentaire
Partager sur d’autres sites

Je vais peut-être dire une bêtise mais il me semble que c'est exactement ce que font tous les scripts php visant à enregistrer les reférants, non ? Si je ne m'abuse les robots sont identifiés par un user-agent...

BBClone est pas mal dans le genre...

Lien vers le commentaire
Partager sur d’autres sites

Veuillez vous connecter pour commenter

Vous pourrez laisser un commentaire après vous êtes connecté.



Connectez-vous maintenant
×
×
  • Créer...