Несколько 404 запроса на нашем сайте. Это атака или просто неправильный индексный робот?

StackOverflow https://stackoverflow.com/questions/833662

  •  08-07-2019
  •  | 
  •  

Вопрос

Наш сайт получает запросы, которые пытаются получить доступ к несуществующим страницам. Обычно это только случай с ошибкой адреса. Например, правильная ссылка - /Info/SiteMap.aspx, но неправильный запрос - /Inf/SiteMap.aspx с отсутствующим «o». Обычно есть много запросов, например, 20 подряд в одну минуту. Все бросают 404.

Это проблема какого-то индексного робота? Или кто-то тестирует пробелы на нашем сайте?

У вас есть опыт или советы?

Это было полезно?

Решение

Да, рассмотрим следующие вещи.

<Ол>

  • IP-адрес хоста, отправляющего запросы. Если они различаются, но несколько IP-адресов, мы можем подозревать, что это распределенная атака с использованием зомби.

  • <р>. Если запросы поступают из одного источника, проверьте задержку между запросами. Обычно сканеры не используют очень короткие промежутки между запросами.

  • Индексирующие роботы (сканеры) не выполняют "грубую силу" индексация типов. Они просто получают ссылки с одной страницы и рекурсивно пересекают страницу за страницей. Так что причиной этого должен быть не индексный робот.

  • Проверьте наличие шаблонов. Я имею в виду шаблон последовательного именования и т. Д.

    •   

    EX: /Inf/SiteMap.aspx, /Infa/SiteMap.aspx, /Infb/SiteMap.aspx

    Лицензировано под: CC-BY-SA с атрибуция
    Не связан с StackOverflow
    scroll top