Impedir o Googlebot de chamar os métodos de Ajax

Question

O GoogleBot continua tentando chamar métodos AJAX no meu site. Por exemplo: default.aspx/getstuffwithajax

O problema é que esse método deve ser impossível para o Google ligar, pois estou verificando com JavaScript se o consulte houver id = xxxx antes de chamá -lo. Não há link em nenhum lugar com esta tentativa de consulta que o Google poderia seguir.

É possível que as varreduras de bot para pagemethods.getStuffWithajax no meu código HTML e depois tentem chamar o método Ajax? E como eu poderia impedir isso .. alguém?

Answer 1

Colocar Disallow: /GetStuffWithAjax Como uma linha em seu robots.txt arquivo na raiz do seu domínio.

Answer 2

Você pode usar robots.txt Para dizer ao Google (e outros bons bots) para não ir para lá. Verifique aqui:

• http://www.robotstxt.org/