cURL无法解析主机如何处理?

时间:2012-01-01 23:08:37

标签: c++ curl libcurl

我正在开发一个使用cURL lib的C ++程序。当我尝试连接到URL时,这是不正确的或页面已关闭我得到以下错误:

  • getaddrinfo(3)因www.wp.pl#:80
  • 而失败
  • 无法解析主持人'www.wp.pl#'

程序终止。这就是问题,因为我要进一步加入其他页面。我只是不会解析和分析破碎的页面,我不想在遇到这样的程序后结束我的程序。

我发布了类似的主题,但它只包含代码片段,因此您很难说出错了,现在我将发布整个代码。

  int PageHandler::getCleanAndRepairedPage(string pageURL, string& outDoc)
    throw (exception) {

if (find(visitedPages.begin(), visitedPages.end(), pageURL)
        != visitedPages.end()) {

    // url has already been visited
    outDoc = "";
    return VISITED_PAGE_ERROR;

} else { // new url

    visitedPages.push_back(pageURL);

    char *charURL;

    charURL = const_cast<char*> (pageURL.c_str());

    CURL *curl;

    char curl_errbuf[CURL_ERROR_SIZE];

    TidyBuffer output = { 0 };
    TidyBuffer errbuf = { 0 };
    TidyBuffer docbuf = { 0 };

    TidyDoc tdoc = tidyCreate(); // Initialize "document"
    tidyOptSetBool(tdoc, TidyForceOutput, yes);
    tidyOptSetInt(tdoc, TidyWrapLen, 4096);
    tidyBufInit(&docbuf);

    int rc = -1;
    Bool ok;

    curl = curl_easy_init();

    curl_easy_setopt( curl, CURLOPT_URL, charURL );

    curl_easy_setopt( curl, CURLOPT_ERRORBUFFER, curl_errbuf );
    curl_easy_setopt( curl, CURLOPT_WRITEFUNCTION, write_cb );
    curl_easy_setopt(curl, CURLOPT_NOPROGRESS, 0L);
    curl_easy_setopt(curl, CURLOPT_VERBOSE, 1L);
    curl_easy_setopt( curl , CURLOPT_WRITEDATA, &docbuf );

    int err;

    err = curl_easy_perform(curl);

    cout << "curl_easy_perfom return value = " << err << endl;

    if (!err) {

        ok = tidyOptSetBool(tdoc, TidyXhtmlOut, yes); // Convert to XHTML

        if (ok) {

            rc = tidySetErrorBuffer(tdoc, &errbuf); // Capture diagnostics

            if (rc >= 0) {

                rc = tidyParseBuffer(tdoc, &docbuf); // parse the buffer
            }
            if (rc >= 0) {

                rc = tidyCleanAndRepair(tdoc); // Tidy it up!
            }
            if (rc >= 0) {

                rc = tidyRunDiagnostics(tdoc); // Kvetch
            }
            if (rc > 1) { // If error, force output.

                rc = (tidyOptSetBool(tdoc, TidyForceOutput, yes) ? rc : -1);
            }
            if (rc >= 0) {

                rc = tidySaveBuffer(tdoc, &output); // Pretty Print
            }
        }

        if (rc >= 0) {

            if (rc > 0) {

                //printf("\nDiagnostics:\n\n%s", errbuf.bp);
            }

        } else {

            printf("A severe error (%d) occurred.\n", rc);
        }

    } else {

        printf("%s\n", curl_errbuf);
    }

    if (err == NO_ERROR) {
        string tmp(reinterpret_cast<char const*> (output.bp));
        outDoc = tmp;
    } else {
        outDoc = "";
    }

    curl_easy_cleanup(curl);

    tidyBufFree(&docbuf);
    tidyBufFree(&output);
    tidyBufFree(&errbuf);
    tidyRelease(tdoc);

    return err; // err == 0 <=> everything ok!

}

}

控制台输出:

编辑:我忘了说控制台输出发生了什么。我连接到许多页面,无效的URL只是其中之一。在开始时,您可以看到有关它的成功连接和cURL消息,curl_easy_perform的结果等于0,这表明一切都很顺利。下一条消息是关于无效URL的连接,因为你可以看到curl_easy_perform的返回值是6,这是不好的。 Here u can see console output

1 个答案:

答案 0 :(得分:1)

“www.wp.pl#”不是合法的URL,它会导致libcurl(错误地)将整个字符串用作主机名,并且您没有任何此类操作并且操作失败。