Empêcher Googlebot d'appeler des méthodes ajax

Question

Googlebot continue d'essayer d'appeler des méthodes ajax sur mon site. Par exemple: default.aspx / GetStuffWithAjax

Le problème est que cette méthode devrait être impossible pour Google d'appeler depuis im vérifier avec javascript si le querystring a id = xxxx avant de l'appeler. Il n'y a pas de lien nulle part avec ce querystring que Google pourrait suivre.

Est-il possible que les scans de bot pour PageMethods.GetStuffWithAjax dans mon code html et puis essaie simplement d'appeler la méthode ajax? Et comment pourrais-je éviter cela .. Tout le monde?

Answer 1

Mettre Disallow: /GetStuffWithAjax en ligne dans votre fichier robots.txt à la racine de votre domaine.

Answer 2

Vous pouvez utiliser robots.txt pour indiquer à Google (et d'autres bons bots) de ne pas y aller. Vérifiez ici:

• http://www.robotstxt.org/