¿Por qué tiempo de espera de cliente Web al intentar rastrear esta URL acortada?

StackOverflow https://stackoverflow.com/questions/897561

  •  23-08-2019
  •  | 
  •  

Pregunta

Tengo una pequeña webcrawler que a veces tiene que arrastrarse twitter y tire de la URL del. Utilizo una versión modificada de la clase Webclient proporcionado en el marco .NET.

Normalmente esto funciona bien, incluso con acortada URL de sitios.

Sin embargo, cuando se sigue una URL acortada, los tiempos de WebClient fuera.

¿Crees que están filtrando ciertos clientes?

¿Cómo puedo solucionar este problema o por qué su suceso?

¿Fue útil?

Solución

¿Está seguro que puede golpear la URL de su red, sin tener que pasar a través de un proxy?

¿Su control de webclient sigue las redirecciones? Se podría probar esto creando una TinyURL y ver si su webclient puede navegar a la misma.

Si usted va a través de un proxy en el navegador, tendrá que configurarlo en el control de cliente Web.

Debe ser fácil de probar si están filtrando los clientes -. Fijar el agente de usuario en la solicitud objeto para que coincida con la de Firefox, por ejemplo,

Licenciado bajo: CC-BY-SA con atribución
No afiliado a StackOverflow
scroll top