C libcurl получает вывод в строку

Ответ 1

Вы можете установить функцию обратного вызова для приема входящих блоков данных с помощью curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, myfunc);

Обратный вызов примет пользовательский аргумент, который вы можете установить с помощью curl_easy_setopt(curl, CURLOPT_WRITEDATA, p)

Вот фрагмент кода, который передает буфер struct string {*ptr; len} функции обратного вызова и увеличивает этот буфер при каждом вызове с помощью realloc().

#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <curl/curl.h>

struct string {
  char *ptr;
  size_t len;
};

void init_string(struct string *s) {
  s->len = 0;
  s->ptr = malloc(s->len+1);
  if (s->ptr == NULL) {
    fprintf(stderr, "malloc() failed\n");
    exit(EXIT_FAILURE);
  }
  s->ptr[0] = '\0';
}

size_t writefunc(void *ptr, size_t size, size_t nmemb, struct string *s)
{
  size_t new_len = s->len + size*nmemb;
  s->ptr = realloc(s->ptr, new_len+1);
  if (s->ptr == NULL) {
    fprintf(stderr, "realloc() failed\n");
    exit(EXIT_FAILURE);
  }
  memcpy(s->ptr+s->len, ptr, size*nmemb);
  s->ptr[new_len] = '\0';
  s->len = new_len;

  return size*nmemb;
}

int main(void)
{
  CURL *curl;
  CURLcode res;

  curl = curl_easy_init();
  if(curl) {
    struct string s;
    init_string(&s);

    curl_easy_setopt(curl, CURLOPT_URL, "curl.haxx.se");
    curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, writefunc);
    curl_easy_setopt(curl, CURLOPT_WRITEDATA, &s);
    res = curl_easy_perform(curl);

    printf("%s\n", s.ptr);
    free(s.ptr);

    /* always cleanup */
    curl_easy_cleanup(curl);
  }
  return 0;
}

Ответ 2

Следующий ответ - это C++ способ сделать это, используя std::string вместо std::string с нулевым символом в конце. Он по-прежнему использует функцию обратного вызова (нет никакого способа обойти это), но также обрабатывает ошибку выделения с помощью try/catch.

#include <iostream>
#include <string>
#include <curl/curl.h>

size_t CurlWrite_CallbackFunc_StdString(void *contents, size_t size, size_t nmemb, std::string *s)
{
    size_t newLength = size*nmemb;
    try
    {
        s->append((char*)contents, newLength);
    }
    catch(std::bad_alloc &e)
    {
        //handle memory problem
        return 0;
    }
    return size*nmemb;
}
int main()
{
    CURL *curl;
    CURLcode res;

    curl_global_init(CURL_GLOBAL_DEFAULT);

    curl = curl_easy_init();
    std::string s;
    if(curl)
    {

        curl_easy_setopt(curl, CURLOPT_URL, "curl.haxx.se");

        curl_easy_setopt(curl, CURLOPT_SSL_VERIFYPEER, 0L); //only for https
        curl_easy_setopt(curl, CURLOPT_SSL_VERIFYHOST, 0L); //only for https
        curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, CurlWrite_CallbackFunc_StdString);
        curl_easy_setopt(curl, CURLOPT_WRITEDATA, &s);
        curl_easy_setopt (curl, CURLOPT_VERBOSE, 1L); //remove this to disable verbose output


        /* Perform the request, res will get the return code */
        res = curl_easy_perform(curl);
        /* Check for errors */
        if(res != CURLE_OK)
        {
            fprintf(stderr, "curl_easy_perform() failed: %s\n",
                    curl_easy_strerror(res));
        }

        /* always cleanup */
        curl_easy_cleanup(curl);
    }

    std::cout<<s<<std::endl;

    std::cout<< "Program finished!" << std::endl;
}

Ответ 3

Из прочитанного здесь руководства: http://curl.haxx.se/libcurl/c/curl_easy_setopt.html Думаю, вам нужно несколько вызовов CURL_SETOPT, первым из которых является URL-адрес, который вы хотите обработать, второй - что-то вроде:

curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, function_ptr);

Где function_ptr соответствует этой сигнатуре:

size_t function( void *ptr, size_t size, size_t nmemb, void *stream)

Что здесь происходит, вы обозначаете функцию обратного вызова, которую вызовет libcurl, когда у нее есть какой-либо вывод для записи из любой сделанной вами передачи. Вы можете получить его для автоматической записи в файл или передать ему указатель на функцию, которая будет обрабатывать сам вывод. С помощью этой функции вы сможете собрать различные выходные строки в одну часть, а затем использовать их в своей программе.

Я не уверен, какие еще параметры вы можете установить/что еще влияет на то, как вы хотите, чтобы ваше приложение вел себя, поэтому хорошо просмотрите эту страницу.