Почему Yahoo!Slurp запрашивает /1338.aspx?

StackOverflow https://stackoverflow.com/questions/2420106

  •  19-09-2019
  •  | 
  •  

Вопрос 

Ip: 67.195.112.247 
Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp) 

System.Web.HttpException: The file '/1338.aspx' does not exist.

ИП:67.195.112.247
Хозяин :b3091104.crawl.yahoo.net
Страна:Соединенные Штаты

Это было полезно?

Решение 2

Оказывается, Slurp проиндексировал пример файла журнала, который я использовал для старого проекта анализатора журналов по адресу

https://bitbucket.org/mrshrinkray/projects/src/fa550b822a52/Statmagic/Statmagic.Testapp/ExampleLogs/ex071110.log

2007-11-10 19:44:35 W3SVC421807 WEB150 216.177.83.9 GET/1338.aspx - 80 - 66.249.70.48 HTTP/1.1 Mozilla/5.0+(совместимый;+Googlebot/2.1;++http://www.google .com/bot.html)

В файле журнала была запись о том, что робот Googlebot запрашивал URL-адрес. Я понятия не имею, как робот Google получил несуществующий URL-адрес, но Slurp любит имитировать робота Googlebot.

Другие советы

Попробуйте поискать в Интернете по запросу "http://вашurl/1138.aspx", возможно, кто-то создал эту ссылку, и Yahoo пытается перейти по ней.

Лицензировано под: CC-BY-SA с атрибуция
Не связан с StackOverflow
scroll top