GoogleBot은 왜 내 웹 사이트의 검색 엔진을 사용합니까?

Question

검색 로그를 때때로 살펴보면 검색 엔진의 가장 큰 사용자는 Google-BOT라는 것을 알 수 있습니다. 무엇을 제공합니까? 내비게이션을 통해 직접 액세스 할 수없는 콘텐츠를 찾고 있습니까? 그렇다면, 어떤 단어와 문구를 찾아야하는지 (놀랍게도 관련이 있음) 어떻게 알 수 있습니까? 사이트에서 가장 인기있는 키워드를 확인합니까? 나는 여기서 내 자신의 질문에 대답하는 것 같지만, 이것은 실제로 첫 번째 원칙에서만 해결하는 것입니다. 나는 그들이 무슨 말을하는지 아는 사람의 말을 듣고 싶습니다 (예 : 나는 아닙니다).

Answer 1

Google은 검색 상자에서 사이트에서 발생하는 단어를 사용하여 그렇지 않으면 페이지를 찾으려고합니다.

구글은 지난 몇 달 동안 정보를 얻기 위해 "고품질"웹 사이트의 "소수"에 양식을 작성하고 있다고 말했다. 그 형태에 어떤 단어가 들어 왔습니까? 확인란과 드롭 다운 메뉴도 선택된 사이트에서 발생하는 단어 자동으로 선택된 단어도 선택됩니다. http://searchengineland.com/google-now-fills-ound-forms-crawls-results-13760

Answer 2

검색 양식의 메소드가 POST 대신 가져 오면 각 검색에는 고유 한 URL이 있으며 사람들은 다른 곳에 해당 URL을 게시 할 수 있습니다. 또는 해당 URL을 나열한 (우연히) 공개적으로 액세스 할 수있는 WebStats 페이지가있는 경우 검색 엔진이 내부 검색 URL을 우연히 발견하는 또 다른 일반적인 방법입니다. 내가 본 세 번째 방법은 페이지에 최근 검색을 나열하는 사이트이지만 더 의도적입니다. "MySQL Performance Blog"는 성가신 정도로이 작업을 수행하므로 Google에서 사이트를 검색하면 수백 페이지의 비슷한 검색을 수강 할 수 있습니다.

편집 : 가끔 그렇지 않은 것처럼 보이지만 양식 만 얻습니다.http://googlewebmastercentral.blogspot.com/2008/04/crawling-through-html-forms.html