googlebotが私のウェブサイトの検索エンジンを使用する理由と方法

Question

検索ログを時々見ると、検索エンジンの最大のユーザーはgoogle-botであることに気づきました。何が得られますか？ナビゲーションから直接アクセスできないコンテンツを探していますか？もしそうなら、どの単語やフレーズを探すべきかをどのようにして知るのでしょう（驚くほど関連性があります）。サイトで最も人気のあるキーワードをチェックしますか？ここで自分の質問に答えているように見えますが、これは本当に第一原理からそれを解決しているだけです。話していることを知っている人（私ではない）から連絡をもらいたい。

Answer 1

Googleは、サイトで検索ボックスに表示される単語を使用して、他の方法では検索できないページを見つけようとします。

  

Googleは、過去数か月間、フォームに入力していると述べています   「小さな数字」に「高品質」の取り戻すウェブサイト   情報。それらのフォームにはどのような言葉が入っていますか？言葉   サイトで発生するチェックボックスと自動的に選択された   ドロップダウンメニューも選択されています。    http://searchengineland.com/google-now-fills-out -forms-crawls-results-13760

Answer 2

検索フォームのメソッドが投稿ではなく取得の場合、各検索には独自のURLがあり、人々はそれらのURLを他の場所に投稿している可能性があります。または、それらのURLをリストした（おそらく不注意で）一般にアクセス可能なwebstatsページがある場合、それは検索エンジンが内部検索URLにつまずくもう1つの一般的な方法です。私が見た3番目の方法は、ページで最近の検索をリストするサイトですが、これはより意図的なものです。 ＆quot; MySQL Performance Blog＆quot;迷惑な程度にこれを行うので、Googleからサイトを検索すると、探しているものが見つからなかったとしても、類似した検索のページが何百も生成されます。

編集：たまに行うように見えますが、GETフォームのみ： http://googlewebmastercentral.blogspot.com/2008/04/ crawling-through-html-forms.html