Отслеживание URL в grequests (асинхронный) - PullRequest
0 голосов
/ 27 ноября 2018

У меня есть таблица со столбцом id и url, которая содержит 10000 строк.Моя цель - проверить, существует ли URL-адрес!

Из-за большого количества URL-адресов после некоторых исследований в Google это приводит меня к запросам (смесь gevent и запросов), которые разрешают асинхронные запросы.

Но так как это асинхронно: когда я предоставляю список URL, результат функции map возвращает мне список в другом порядке.Поскольку у меня иногда разные идентификаторы для одного и того же URL-адреса, я бы хотел отслеживать исходный ряд таблицы.Например, вместо того, чтобы давать список URL, я хотел бы снабдить алгоритм списком кортежей (id, url), а когда я получаю ответ, у меня есть список кортежей (id, response).

Возможно ли это и как?

...