cURL не может разрешить хост Как с этим бороться? - PullRequest
0 голосов
/ 02 января 2012

Я работаю над программой на C ++, которая использует cURL lib.Когда я пытаюсь подключиться к URL-адресу, это неправильно, или страница не работает, я получаю следующую ошибку:

  • getaddrinfo (3) не удалось для www.wp.pl #: 80
  • Не удалось разрешить хост 'www.wp.pl #'

И программа завершается.И это проблема, потому что я хочу пойти дальше и подключиться к другим страницам.Я просто не буду разбирать и анализировать испорченную страницу, я не хочу заканчивать свою программу после того, как наткнулся на такую.

Я опубликовал похожую тему, но она содержала только фрагменты кода, так что это было трудно для васчтобы сказать, что не так, теперь я опубликую весь код.

  int PageHandler::getCleanAndRepairedPage(string pageURL, string& outDoc)
    throw (exception) {

if (find(visitedPages.begin(), visitedPages.end(), pageURL)
        != visitedPages.end()) {

    // url has already been visited
    outDoc = "";
    return VISITED_PAGE_ERROR;

} else { // new url

    visitedPages.push_back(pageURL);

    char *charURL;

    charURL = const_cast<char*> (pageURL.c_str());

    CURL *curl;

    char curl_errbuf[CURL_ERROR_SIZE];

    TidyBuffer output = { 0 };
    TidyBuffer errbuf = { 0 };
    TidyBuffer docbuf = { 0 };

    TidyDoc tdoc = tidyCreate(); // Initialize "document"
    tidyOptSetBool(tdoc, TidyForceOutput, yes);
    tidyOptSetInt(tdoc, TidyWrapLen, 4096);
    tidyBufInit(&docbuf);

    int rc = -1;
    Bool ok;

    curl = curl_easy_init();

    curl_easy_setopt( curl, CURLOPT_URL, charURL );

    curl_easy_setopt( curl, CURLOPT_ERRORBUFFER, curl_errbuf );
    curl_easy_setopt( curl, CURLOPT_WRITEFUNCTION, write_cb );
    curl_easy_setopt(curl, CURLOPT_NOPROGRESS, 0L);
    curl_easy_setopt(curl, CURLOPT_VERBOSE, 1L);
    curl_easy_setopt( curl , CURLOPT_WRITEDATA, &docbuf );

    int err;

    err = curl_easy_perform(curl);

    cout << "curl_easy_perfom return value = " << err << endl;

    if (!err) {

        ok = tidyOptSetBool(tdoc, TidyXhtmlOut, yes); // Convert to XHTML

        if (ok) {

            rc = tidySetErrorBuffer(tdoc, &errbuf); // Capture diagnostics

            if (rc >= 0) {

                rc = tidyParseBuffer(tdoc, &docbuf); // parse the buffer
            }
            if (rc >= 0) {

                rc = tidyCleanAndRepair(tdoc); // Tidy it up!
            }
            if (rc >= 0) {

                rc = tidyRunDiagnostics(tdoc); // Kvetch
            }
            if (rc > 1) { // If error, force output.

                rc = (tidyOptSetBool(tdoc, TidyForceOutput, yes) ? rc : -1);
            }
            if (rc >= 0) {

                rc = tidySaveBuffer(tdoc, &output); // Pretty Print
            }
        }

        if (rc >= 0) {

            if (rc > 0) {

                //printf("\nDiagnostics:\n\n%s", errbuf.bp);
            }

        } else {

            printf("A severe error (%d) occurred.\n", rc);
        }

    } else {

        printf("%s\n", curl_errbuf);
    }

    if (err == NO_ERROR) {
        string tmp(reinterpret_cast<char const*> (output.bp));
        outDoc = tmp;
    } else {
        outDoc = "";
    }

    curl_easy_cleanup(curl);

    tidyBufFree(&docbuf);
    tidyBufFree(&output);
    tidyBufFree(&errbuf);
    tidyRelease(tdoc);

    return err; // err == 0 <=> everything ok!

}

}

И вывод консоли:

РЕДАКТИРОВАТЬ: я забыл сказать, что происходит на выходе консоли.Я подключаюсь ко многим страницам, и недействительный URL - только одна из них.В начале вы можете увидеть успешное соединение и сообщения cURL об этом, результат curl_easy_perform равен 0, что указывает на то, что все прошло хорошо.Следующее сообщение о подключении к неверному URL, так как вы можете видеть возвращаемое значение curl_easy_perform 6, что не очень хорошо.Here u can see console output

1 Ответ

1 голос
/ 02 января 2012

"www.wp.pl #" не является допустимым URL-адресом, и это приводит к тому, что libcurl (по ошибке) использует всю строку в качестве имени хоста, и у вас его нет, и операция завершается неудачей.

...