Bonjour,
Je prends le temps de publier sur le Hub pour vous demander de l'aide, je gère plusieurs sites internet et j'ai depuis quelques jours d'importants problème de duplicate content de la totalité de certains site internet sur Google du à des proxy qui indexe les pages visitées dans Google.
J'ai trouvé une solution pour tous ceux hébergés sur Appspot avec ce code :
RewriteEngine On RewriteCond %{HTTP_USER_AGENT} AppEngine-Google [NC] RewriteRule .* - [F]
Via (http://www.dontbeevil.fr/duplicate-content-web-proxy/)
Mais il est impossible de bloquer des proxy tels que :
baidu.proxy.cv.ua
3proxy.de
doomoney.com
xtps.in
run-it.rsi-network.fr
Quelqu'un aurait une solution ? Je perds un temps fou à lutter contre ces spameurs du web pour le moment en vain...