Как загрузить веб-страницу в поток в .NET - PullRequest
Новая
       19

Как загрузить веб-страницу в поток в .NET

4 голосов
/ 30 мая 2009

Я знаю, что это должен быть основной вопрос, но я бью кирпичную стену. Я ищу, чтобы перейти к URL / URI, загрузить полученную строку, как будто я открыл файл, а затем вывести его в переменную String.

Я разбираюсь с IO.Stream и Net.httpxxx, но мне не удалось правильно выстроить элементы в ряд.

Я получаю «формат данного пути не поддерживается» при открытии страницы в стандартном потоке, потому что это не в локальной файловой системе ... этот бит, который я понимаю, бит, который я не получаю, это ... Как мне достичь равных: 

Public Function GetWebPageAsString(pURL As String) As String
        Dim lStream As IO.StreamReader = New System.IO.StreamReader(pURL)
        Return lStream.ReadToEnd

End Function

Ответы [ 3 ]

7 голосов
/ 30 мая 2009

Краткий ответ в C # выглядит как 

using(System.Net.WebClient client = new System.Net.WebClient())
{
  string html = client.DownloadString("http://www.google.com");
}
2 голосов
/ 30 мая 2009

WebClient.OpenRead () может быть тем, что вы ищете.

Пример со страницы MSDN, указанной выше: 

 Dim uriString as String
 uriString = "http://www.google.com"

 Dim myWebClient As New WebClient()

 Console.WriteLine("Accessing {0} ...", uriString)

 Dim myStream As Stream = myWebClient.OpenRead(uriString)

 Console.WriteLine(ControlChars.Cr + "Displaying Data :" + ControlChars.Cr)
 Dim sr As New StreamReader(myStream)
 Console.WriteLine(sr.ReadToEnd())

 myStream.Close()
0 голосов
/ 30 мая 2009

Эта функция загружает любой URI в файл. Вы можете легко адаптировать его для помещения в строку var: 

public static int DownloadFile(String remoteFilename, String localFilename, bool enforceXmlSafe)
{
// Function will return the number of bytes processed
// to the caller. Initialize to 0 here.
int bytesProcessed = 0;

// Assign values to these objects here so that they can
// be referenced in the finally block
Stream remoteStream = null;
Stream localStream = null;
WebResponse response = null;            

// Use a try/catch/finally block as both the WebRequest and Stream
// classes throw exceptions upon error
try
{
    // Create a request for the specified remote file name
    WebRequest request = WebRequest.Create(remoteFilename);
    if (request != null)
    {
        // Send the request to the server and retrieve the
        // WebResponse object 
        response = request.GetResponse();
        if (response != null)
        {
            // Once the WebResponse object has been retrieved,
            // get the stream object associated with the response's data
            remoteStream = response.GetResponseStream();

            // Create the local file
            if (localFilename != null)
                localStream = File.Create(localFilename);
            else
                localStream = new MemoryStream();

            // Allocate a 1k buffer
            byte[] buffer = new byte[1024];
            int bytesRead;

            // Simple do/while loop to read from stream until
            // no bytes are returned
            do
            {
                // Read data (up to 1k) from the stream
                bytesRead = remoteStream.Read(buffer, 0, buffer.Length);

                // Write the data to the local file
                localStream.Write(buffer, 0, bytesRead);

                // Increment total bytes processed
                bytesProcessed += bytesRead;
            } while (bytesRead > 0);
        }
    }
}
catch (Exception e)
{
    Console.WriteLine(e.Message);
}
finally
{
    // Close the response and streams objects here 
    // to make sure they're closed even if an exception
    // is thrown at some point
    if (response != null) response.Close();
    if (remoteStream != null) remoteStream.Close();
    if (localStream != null) localStream.Close();
}

// Return total bytes processed to caller.
return bytesProcessed;
}
...