Search the Community
Showing results for tags 'googlebot'.
-
bonjour comment être sûr de détecter googlebot ? Il parait que le couple user-agent/IP 66.249.... n'est pas sûr à 100% Merci votre aide. fb
-
bonjour dans GWT, j'ai ce message de Google : Le nombre d'URL détectées par Googlebot sur votre site est extrêmement élevé. Cela est du aux facettes de navigation - Google crawlant l'ensemble des facettes. Que faire, ces pages sont en noindex pour prévenir du duplicate mais cela ne protège pas du crawl quasi infini. Je ne veux pas mettre des nofollow ! Hors je lis un peu partout que "l'obfuscation" des liens est devenu quasi impossible.... Est-ce que passe ces URL via un formulaire en post serait-une bonne solution ? merci
-
bonjour comment faire dans Varnish pour que Googlebot ne fasse pas la mise en cache, est-ce compliqué ? merci le Hub