System.Net.HttpWebResponse.GetResponseStream () возвращает усеченное тело в WebException - PullRequest
9 голосов
/ 07 февраля 2011

По какой-то причине, помимо моих запросов на понимание, направленных на веб-сайт с перкулярным изображением (https://learningnetwork.cisco.com/people/mrollins?view=profile), в результате получается объект reqsponse, чей поток ответов содержит транслированную версию веб-сайта.

Поток заканчивается после 65536 байтов, что равно 2 ^ 16 байтов. Я считаю это подозрительно круглым числом. Запросы жалуются на внутреннюю ошибку сервера, которую я удивляю, потому что я уже проверил, что веб-браузеры могут понять этот ответ, и что полный HTML-код включен в ответ от сервера. (используя Fiddler )

Я обнаружил ранее задокументированную проблему здесь , что неудовлетворительно по той простой причине, что она заканчивается на этой заметке:

"Думаю, мне придется надеяться на ошибку не превышает 65536 символов ... "

Ну, это так.

Обходные пути приветствуются, или если кто-то знает о готовящемся исправлении, которое тоже хорошо.

using System;
using System.IO;
using System.Net;
using System.Web.UI;

namespace Example
{
    public partial class _Default : Page
    {
        protected void Page_Load(object senderHidden, EventArgs eHidden)
        {
            //ServicePointManager.ServerCertificateValidationCallback += delegate(object sender, X509Certificate certificate, X509Chain chain, SslPolicyErrors sslPolicyErrors) { return true; };
            var cookieContainer = new CookieContainer();
            //Encoding enc = Encoding.UTF8;
            HttpWebRequest req = (HttpWebRequest)WebRequest.Create("https://learningnetwork.cisco.com/people/mrollins?view=profile");
            req.AllowAutoRedirect = false;

            req.AutomaticDecompression = DecompressionMethods.Deflate | DecompressionMethods.GZip;
            req.CookieContainer = cookieContainer;
            req.Accept = "text/xml,application/xml,application/xhtml+xml,text/html;q=0.9,text/plain;q=0.8,image/png,*/*;q=0.5";
            req.Method = "GET";
            req.UserAgent = "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.8.1.12) Gecko/20080201 Firefox/2.0.0.12";
            req.KeepAlive = true;

            HttpWebResponse resp = null;
            try
            {
                resp = (HttpWebResponse)req.GetResponse();
            }
            catch (WebException e)
            {
                var r = e.Response as HttpWebResponse;
                var memstream = Read(r.GetResponseStream());
                var wrongLength = memstream.Length;
            }
        }

        public static MemoryStream Read(Stream stream)
        {
            MemoryStream memStream = new MemoryStream();

            byte[] readBuffer = new byte[4096];
            int bytesRead;
            while ((bytesRead = stream.Read(readBuffer, 0, readBuffer.Length)) > 0)
                memStream.Write(readBuffer, 0, bytesRead);
            return memStream;
        }
    }
}

1 Ответ

16 голосов
/ 07 февраля 2011

HttpWebRequest имеет статическое свойство, ограничивающее длину веб-запросов.эта строка кода, вставленная перед выполнением запроса, решает проблему.

HttpWebRequest.DefaultMaximumErrorResponseLength = 1048576;
...