Как сделать несколько попыток загрузки файлов каждые 20 секунд, пока загрузка не будет успешной? - PullRequest
0 голосов
/ 07 декабря 2018
using System;
using System.Collections.Generic;
using System.IO;
using System.Linq;
using System.Net;
using System.Text;
using System.Threading.Tasks;
using System.Windows.Forms;

namespace Downloads
{
    class GenerateCountries
    {
        public static List<string> CountriesCodes = new List<string>();
        public static List<string> CountriesNames = new List<string>();

        private string CountriesHtmlAddress;
        private string CountriesHtmlFile;
        private StreamWriter CountriesFile;
        private WebClient Client;

        public void Init()
        {
            CountriesHtmlAddress = "http://sat24.com/en/?ir=true";
            CountriesFile = new StreamWriter(Path.Combine(Path.GetDirectoryName(Application.LocalUserAppDataPath), "Countries.txt"));
            CountriesHtmlFile = Path.Combine(Path.GetDirectoryName(Application.LocalUserAppDataPath), "Sat24.html");
        }

        public void ExtractCountires()
        {
            Client = new WebClient();
            Client.DownloadFile(CountriesHtmlAddress, CountriesHtmlFile);
            Client.Dispose();

            string tag1 = "<li><a href=\"/en/";
            string tag2 = "</a></li>";

            string s = System.IO.File.ReadAllText(CountriesHtmlFile);
            s = s.Substring(s.IndexOf(tag1));
            s = s.Substring(0, s.LastIndexOf(tag2) + tag2.ToCharArray().Length);
            s = s.Replace("\r", "").Replace("\n", "").Replace(" ", "");

            string[] parts = s.Split(new string[] { tag1, tag2 }, StringSplitOptions.RemoveEmptyEntries);
            string tag3 = "<li><ahref=\"/en/";

            for (int i = 0; i < parts.Length; i++)
            {
                if (i == 40)
                {
                    break;
                }
                string l = "";
                if (parts[i].Contains(tag3))
                    l = parts[i].Replace(tag3, "");

                string z1 = l.Substring(0, l.IndexOf('"'));
                if (z1.Contains("</ul></li><liclass="))
                {
                    z1 = z1.Replace("</ul></li><liclass=", "af");
                }
                CountriesCodes.Add(z1);
                CountriesCodes.GroupBy(n => n).Any(c => c.Count() > 1);

                string z2 = parts[i].Substring(parts[i].LastIndexOf('>') + 1);
                if (z2.Contains("&amp;"))
                {
                    z2 = z2.Replace("&amp;", " & ");
                }
                CountriesNames.Add(z2);
                CountriesNames.GroupBy(n => n).Any(c => c.Count() > 1);
            }

            for (int i = 0; i < CountriesCodes.Count; i++)
            {
                CountriesFile.WriteLine("Country Code = " + CountriesCodes[i]);
                CountriesFile.WriteLine("Country Name = " + CountriesNames[i]);
            }

            CountriesFile.Close();
        }
    }
}

И в конструкторе Form1:

public Form1()
        {
            InitializeComponent();

            GenerateCountries Countries = new GenerateCountries();
            Countries.Init();
            Countries.ExtractCountires();
        }

Проблема в классе GenerateCountries в строке:

Client.DownloadFile(CountriesHtmlAddress, CountriesHtmlFile);

Иногда выдается исключение на стороне сервера.Во многих случаях выдается исключение / s.

Первое исключение, которое иногда выдается:

System.Net.WebException: «Базовое соединение было закрыто: произошла непредвиденная ошибкана отправку.IOException: невозможно прочитать данные из транспортного соединения: существующее соединение было принудительно закрыто удаленным хостом.SocketException: существующее соединение было принудительно закрыто удаленным хостом

И иногда это второе:

The remote server returned an error: (500) Internal Server Error.

Что я хочу сделать, это попытаться продолжить загрузкукаждые 15 или 20 секунд, пока загрузка не будет успешной.Попробуйте загрузить, если не удалось, подождите 20 секунд, затем повторите попытку загрузки и т. Д.

Ответы [ 2 ]

0 голосов
/ 07 декабря 2018
public Task DownloadContentAsync(CancellationToken cancellationToken)
{
  // download content here
}

public async Task RunAsync()
{
  var succeeded = false;
  while(!succeeded)
  {
    var cts = new CancellationTokenSource(TimeSpan.FromSeconds(20));
    await DownloadContentAsync(cts.Token)
     .ContinueWith((x) => succeeded = x.IsCompleted);
  }
}
0 голосов
/ 07 декабря 2018
Асинхронные методы

WebClinet имеют события, принимающие параметр с именем userToken, который можно установить в качестве информации о загружаемом файле (его ссылка для скачивания, его индекс в массиве файлов для загрузки и т. Д.),затем, когда срабатывает событие DownloadFileCompleted, вы можете проверить, если оно прошло успешно или нет и не удалось, вы можете использовать этот userToken для повторной загрузки файла:

using (WebClient wc = new WebClient())
{
    wc.DownloadFileCompleted += (s, e) =>
    {
        if(e.Error!=null)
        ((WebClient)s).DownloadFileAsync(new Uri((string)e.UserState), "C:\\" + ((string)e.UserState).Split('/').Last(), e.UserState)
        //instead of this line you may set a timer that would do the download after sometime
    };

    wc.DownloadFileAsync(new Uri("http://example.com/somefile.txt"), "C:\\somefile.txt", "http://example.com/somefile.txt");
}
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...