Pourquoi délai WebClient lors de l'exploration de cette URL raccourcie?

Question

J'ai une petite webcrawler qui a parfois ramper twitter et sortir URL. J'utilise une version modifiée de la classe Webclient fournie dans le cadre de .net.

Normalement, cela fonctionne très bien, même avec des URL raccourcie des sites.

Cependant, en suivant une URL raccourcie, les temps WebClient sur.

Vous pensez qu'ils sont le filtrage de certains clients?

Comment puis-je résoudre ce problème ou pourquoi son happening?

Answer 1

Êtes-vous sûr que vous pouvez frapper cette URL de votre réseau, sans passer par un proxy?

Ne suit votre contrôle webclient réoriente? Vous pouvez tester cela en créant un TinyURL voir si votre webclient pouvez le parcourir à.

Si vous passez par un proxy dans votre navigateur, vous aurez besoin de le configurer dans le contrôle WebClient.

Il devrait être facile de tester si elles filtrent les clients -. Définir le UserAgent sur l'objet de demande pour correspondre à celui de FireFox par exemple