Multiple 404 pedido em nosso site. Trata-se de atacar ou simplesmente errado robô de indexação?

Question

Nosso site está recebendo pedidos que tentam acessar páginas não existentes. Geralmente é único caso de endereço incorreta. Como o link certo é /Info/SiteMap.aspx, mas a má pedido é /Inf/SiteMap.aspx com falta 'o'. Normalmente existem muitos pedido, como 20 na fileira em um minuto. Todos lance 404.

É problema de algum robô de indexação? Ou será que alguém lacunas de teste em nosso site?

tem alguma experiência ou dicas?

Answer 1

Sim, Considere as seguintes coisas.

1. O endereço IP do host de envio das solicitações -. Se eles são IPs distintos, mas vários, podemos suspeitar-lo como um ataque distribuído feito usando Zombies

2. . Se as solicitações são provenientes de mesma fonte, verifique o atraso entre as solicitações. Geralmente crawlers não usar períodos extremamente curtos entre os pedidos.

3. A indexação Robots (Crawlers) não executar "força bruta" tipo de indexação. Eles só recuperar os links de uma página e página de forma recursiva travessia por página. Assim, a razão para isso não deve ser um robô de indexação.

4. Verifique se há algum padrão. Quero dizer, um padrão de nomenclatura seqüencial etc.

EX: /Inf/SiteMap.aspx, /Infa/SiteMap.aspx, /Infb/SiteMap.aspx