Скачать веб-страницу в UTF-8

Question

Я использую приведенный ниже код для загрузки этого XML-файла :

private async static Task<string> DownloadPageAsync(string url)
{
    try
    {
        HttpClientHandler handler = new HttpClientHandler();
        handler.UseDefaultCredentials = true;
        handler.AllowAutoRedirect = true;
        handler.UseCookies = true;
        HttpClient client = new HttpClient(handler);
        client.MaxResponseContentBufferSize = 10000000;
        HttpResponseMessage response = await client.GetAsync(url);
        response.EnsureSuccessStatusCode();

        string responseBody = response.Content.ReadAsString();
        return responseBody;
    }
    catch (Exception ex)
    {
        return "error" + ex.Message;
    }
}

, но документ, который я получаю, кажется, имеет проблемы с кодировкой.Хотя документ не очень хорошо отформатирован, я предполагаю, что моя загруженная веб-страница не поддерживается в формате UTF-8.Как я могу вернуть строку UTF-8?Спасибо.

Answer 1

код вашей ссылки iso-8859-1 .

использование

XmlDocument.Load (uriString)

или

XDocument.Load (uriString)

Answer 2

Я предлагаю использовать HTML Agility Pack для загрузки и анализа документа для вас - он автоматически определит кодировку (где это возможно), поэтому это не должно быть проблемой для вас.

Если это не вариант, вам необходимо знать, какую кодировку использует документ, а затем преобразовать его в UTF8, используя классы Encoding для преобразования из исходной кодировки в UTF8.