防googlebotからの呼び出しajax方法
質問
Googlebotであり続けコajaxの方法もます。例えば:デフォルトです。aspx/GetStuffWithAjax
問題はこのメソッドは不可能とgoogle電話からimチェックすることでjavascriptの場合はquerystringはid=xxxx"となる前に呼び出します。ありませんのリンクでもどこでも誰とでもこのquerystringできます。
では、ボットスキャンのためのPageMethods.GetStuffWithAjax私のhtmlコードだという話をajaxできますか?とはどのようにしたら良いですかこれを防止す..はいかがでしょうか?
解決
は、ドメインのルートでごDisallow: /GetStuffWithAjax
ファイル内の行としてrobots.txt
を置きます。
他のヒント
利用できる robots.txt
えGoogle(その他ボット)はさんあります。こちらで確認できます:
所属していません StackOverflow