Как мне загрузить веб-страницу в поток в .NET
Вопрос
Я знаю, что это должен быть простой вопрос, но я упираюсь в кирпичную стену.Я хочу перейти по URL / URI, загрузить результирующую строку, как если бы я открыл файл, а затем преобразовать ее в строковую переменную.
Я занимался вводом-выводом данных.Stream и Net.httpxxx, но мне не удалось правильно выстроить элементы.
Я получаю сообщение "формат указанного пути не поддерживается" при открытии страницы в стандартном потоке, потому что ее нет в локальной файловой системе...то немногое, что я понимаю, но чего я не понимаю, так это...как мне добиться эквивалентности:
Public Function GetWebPageAsString(pURL As String) As String
Dim lStream As IO.StreamReader = New System.IO.StreamReader(pURL)
Return lStream.ReadToEnd
End Function
Решение
Короткий ответ на C # выглядит следующим образом
using(System.Net.WebClient client = new System.Net.WebClient())
{
string html = client.DownloadString("http://www.google.com");
}
Другие советы
Веб-клиент.OpenRead() возможно, это то, что вы ищете.
Пример со страницы MSDN, на которую дана ссылка выше:
Dim uriString as String
uriString = "http://www.google.com"
Dim myWebClient As New WebClient()
Console.WriteLine("Accessing {0} ...", uriString)
Dim myStream As Stream = myWebClient.OpenRead(uriString)
Console.WriteLine(ControlChars.Cr + "Displaying Data :" + ControlChars.Cr)
Dim sr As New StreamReader(myStream)
Console.WriteLine(sr.ReadToEnd())
myStream.Close()
Эта функция загружает любой URI в файл.Вы могли бы легко адаптировать его, чтобы поместить в string var:
public static int DownloadFile(String remoteFilename, String localFilename, bool enforceXmlSafe)
{
// Function will return the number of bytes processed
// to the caller. Initialize to 0 here.
int bytesProcessed = 0;
// Assign values to these objects here so that they can
// be referenced in the finally block
Stream remoteStream = null;
Stream localStream = null;
WebResponse response = null;
// Use a try/catch/finally block as both the WebRequest and Stream
// classes throw exceptions upon error
try
{
// Create a request for the specified remote file name
WebRequest request = WebRequest.Create(remoteFilename);
if (request != null)
{
// Send the request to the server and retrieve the
// WebResponse object
response = request.GetResponse();
if (response != null)
{
// Once the WebResponse object has been retrieved,
// get the stream object associated with the response's data
remoteStream = response.GetResponseStream();
// Create the local file
if (localFilename != null)
localStream = File.Create(localFilename);
else
localStream = new MemoryStream();
// Allocate a 1k buffer
byte[] buffer = new byte[1024];
int bytesRead;
// Simple do/while loop to read from stream until
// no bytes are returned
do
{
// Read data (up to 1k) from the stream
bytesRead = remoteStream.Read(buffer, 0, buffer.Length);
// Write the data to the local file
localStream.Write(buffer, 0, bytesRead);
// Increment total bytes processed
bytesProcessed += bytesRead;
} while (bytesRead > 0);
}
}
}
catch (Exception e)
{
Console.WriteLine(e.Message);
}
finally
{
// Close the response and streams objects here
// to make sure they're closed even if an exception
// is thrown at some point
if (response != null) response.Close();
if (remoteStream != null) remoteStream.Close();
if (localStream != null) localStream.Close();
}
// Return total bytes processed to caller.
return bytesProcessed;
}