我们网站上出现多个 404 请求。是攻击还是只是错误的索引机器人？

Question

我们的网站正在收到尝试访问不存在页面的请求。通常这只是地址拼写错误的情况。就像正确的链接是/Info/SiteMap.aspx，但错误的请求是/Inf/SiteMap.aspx，缺少“o”。通常会有很多请求，比如一分钟内排20个。全部抛出404。

是某些索引机器人的问题吗？或者有人测试我们网站中的差距吗？

有什么经验或技巧吗？

Answer 1

是的，请考虑以下事项。

1. 发送请求的主机的 IP 地址 - 如果它们不同但有多个 IP，我们可以怀疑这是使用僵尸进行的分布式攻击。

2. . 。如果请求来自同一源，请检查请求之间的延迟。一般来说，爬虫不会在请求之间使用极短的时间间隔。

3. 索引机器人（爬行器）不执行“强力”类型索引。他们只是从一个页面检索链接并逐页递归地遍历。所以造成这种情况的原因应该不是索引机器人。

4. 检查是否有任何模式。我的意思是顺序命名模式等。

前任 ：/Inf/SiteMap.aspx、/Infa/SiteMap.aspx、/Infb/SiteMap.aspx