Por que e como é que o Googlebot usar motor de busca do meu site?

Question

Olhando através de meus logs de pesquisa ao longo do tempo, noto que, de longe, o maior utilizador do meu motor de busca é o google-bot. O que da? É à procura de conteúdo que pode não ser directamente acessíveis através de navegação? Se assim for, como ele sabe que palavras e frases para procurar (eles são surpreendentemente relevante). Será que verificar as palavras-chave mais populares no site? Eu sei que parece estar respondendo a minha própria pergunta aqui, mas isso é realmente apenas trabalhar para fora dos primeiros princípios. Eu gostaria de ouvir de alguém que sabe o que estão falando (ou seja, não me).

Answer 1

O Google vai usar as palavras que ocorrem em seu site em caixas de pesquisa para tentar encontrar páginas que não podem de outra forma.

O Google diz que, nos últimos meses, tem sido preenchimento de formulários em um "pequeno número" de web sites "de alta qualidade" para voltar em formação. Que palavras tem sido entrar em aquelas formas? Palavras selecionado automaticamente que ocorrem no local, com caixas de seleção e menus drop-down também está sendo selecionado. http://searchengineland.com/google-now-fills-out -forms-rastreamentos de resultados de 13760

Answer 2

Se o método do seu formulário de pesquisa é obter, em vez de post, cada pesquisa tem sua própria url, e as pessoas podem postar esses URLs em outros lugares. Ou se você tem um (possivelmente inadvertidamente) página webstats publicamente acessíveis que listou esses URLs, isso é outra forma comum para os motores de busca para tropeçar em cima de seus URLs de busca internos. Uma terceira maneira que eu vi é sites que listam pesquisas recentes em suas páginas, mas isso é mais intencional. "MySQL Desempenho Blog" faz isso de uma forma irritante, portanto, qualquer busca de seu site do Google produz centenas de páginas de pesquisas semelhantes, mesmo que nenhum deles encontraram o que estavam procurando.

Editar: parece que ele faz de vez em quando, mas só obter formas: http://googlewebmastercentral.blogspot.com/2008/04/ rastejando-through-html-Forms.html