Преобразование curl в python Запросы

Я пытаюсь преобразовать следующий рабочий запрос в curl в запрос python (используя Requests http://docs.python-requests.org/en/v0.10.7/).

curl --data 'query={"tags":["test1","test2"]}' http://www.test.com/match

(обратите внимание, что я использовал фальшивый URL-адрес, но команда действительно работает с реальным URL-адресом)

Принимающая сторона (работает в Flask) делает следующее:

@app.route("/match", methods=['POST'])
def tagmatch():
    query = json.loads(request.form['query'])
    tags = query.get('tags')
    ... does stuff ...
    return json.dump(stuff)

В curl (7.30), запущенном на Mac OS X (10.9), команда выше правильно возвращает список json, который был отфильтрован с помощью запроса тега.

Мой python script выглядит следующим образом: он возвращает 400 запросов.

import requests

payload = {"tags":["test1", "test2"]}
# also tried  payload = 'query={"tags":["test1","test2"]}'
url = 'http://www.test.com/match'

r = requests.post(url, data=payload)

if __name__=='__main__':

     print r.text

Я чувствую, что мне не хватает чего-то маленького, и любая помощь будет оценена по достоинству.

Спасибо

Ответ 1

Ваш сервер ожидает JSON, но вы его не отправляете. Попробуйте следующее:

import requests
import json

payload = {'query': json.dumps({"tags":["test1", "test2"]})}
url = 'http://www.test.com/match'

r = requests.post(url, data=payload)

if __name__=='__main__':
    print r.text

Ответ 2

Существует замечательный cURL с открытым исходным кодом для помощника преобразования запросов Python в http://curl.trillworks.com. Это не идеально, но помогает много времени. Специально для преобразования команд Chrome "Копировать как cURL". Существует также node library, если вам нужно сделать программные преобразования

cURL from Chrome

Ответ 3

Я написал клиентский плагин HTTP для Sublime Text, называемый Requester, и одна из его функций - преобразовать вызывает cURL для запросов и наоборот.

Если вы используете Sublime Text, это, вероятно, самый быстрый и простой вариант. Если нет, здесь код, который фактически обрабатывает преобразование из cURL в Requests. Он основан на uncurl, но с различными улучшениями и исправлениями ошибок.

import argparse
import json
try:
    from urllib.parse import urlencode, parse_qsl
except ImportError:  # works for Python 2 and 3
    from urllib import urlencode
    from urlparse import parse_qsl


if __name__ == "__main__":
    parser = argparse.ArgumentParser()
    parser.add_argument('command')
    parser.add_argument('url')
    parser.add_argument('-X', '--request', default=None)
    parser.add_argument('-d', '--data', default=None)
    parser.add_argument('-G', '--get', action='store_true', default=False)
    parser.add_argument('-b', '--cookie', default=None)
    parser.add_argument('-H', '--header', action='append', default=[])
    parser.add_argument('-A', '--user-agent', default=None)
    parser.add_argument('--data-binary', default=None)
    parser.add_argument('--compressed', action='store_true')

    parsed_args = parser.parse_args()

    method = 'get'
    if parsed_args.request:
        method = parsed_args.request

    base_indent = ' ' * 4
    post_data = parsed_args.data or parsed_args.data_binary or ''
    if post_data:
        if not parsed_args.request:
            method = 'post'
        try:
            post_data = json.loads(post_data)
        except ValueError:
            try:
                post_data = dict(parse_qsl(post_data))
            except:
                pass

    cookies_dict = {}

    if parsed_args.cookie:
        cookies = parsed_args.cookie.split(';')
        for cookie in cookies:
            key, value = cookie.strip().split('=')
            cookies_dict[key] = value

    data_arg = 'data'
    headers_dict = {}
    for header in parsed_args.header:
        key, value = header.split(':', 1)
        if key.lower().strip() == 'content-type' and value.lower().strip() == 'application/json':
            data_arg = 'json'

        if key.lower() == 'cookie':
            cookies = value.split(';')
            for cookie in cookies:
                key, value = cookie.strip().split('=')
                cookies_dict[key] = value
        else:
            headers_dict[key] = value.strip()
    if parsed_args.user_agent:
        headers_dict['User-Agent'] = parsed_args.user_agent

    qs = ''
    if parsed_args.get:
        method = 'get'
        try:
            qs = '?{}'.format(urlencode(post_data))
        except:
            qs = '?{}'.format(str(post_data))
        print(post_data)
        post_data = {}

    result = """requests.{method}('{url}{qs}',{data}\n{headers},\n{cookies},\n)""".format(
        method=method.lower(),
        url=parsed_args.url,
        qs=qs,
        data='\n{}{}={},'.format(base_indent, data_arg, post_data) if post_data else '',
        headers='{}headers={}'.format(base_indent, headers_dict),
        cookies='{}cookies={}'.format(base_indent, cookies_dict),
    )
    print(result)

Вы можете сделать script с этим кодом, например. curl_to_request.py, и вызовите этот script из командной строки, как это. Он будет работать как для Python 2, так и для Python 3.

python curl_to_request.py curl -X POST -d 'key2=value2&key1=value1' 'http://httpbin.org/post'

python curl_to_request.py curl -X POST -H 'Content-Type: application/json' -d '{"key2": "value2", "key1": "value1"}' 'http://httpbin.org/post'

python curl_to_request.py curl -X POST -H 'Content-Type: application/json' -d '[1, 2, 3]' 'http://httpbin.org/post'

python curl_to_request.py curl -X POST -H 'Content-Type: application/json' -d '{"name": "Jimbo", "age": 35, "married": false, "hobbies": ["wiki", "pedia"]}' 'http://httpbin.org/post'

python curl_to_request.py curl -X GET 'http://httpbin.org/get?key2=value2&key1=value1'

python curl_to_request.py curl -X GET -H 'key1: value1' -H 'key2: value2' 'http://httpbin.org/headers'

python curl_to_request.py curl -X GET -b 'key1=value1;key2=value2' 'http://httpbin.org/cookies'

Ответ 4

Из вашего кода с помощью requests и в Flask, похоже, вы не публикуете правильный формат данных. Полезная нагрузка должна быть такой:

payload = {'query': {'tags': ['test1', 'test2']},}

Это кажется ненормальным, как пост-данные при использовании requests.post(). Поэтому, если вы разместили здесь html-форму, возможно, было более понятно решить эту проблему.
Вот еще один аналогичный вопрос: Использование запросов Python для прохождения через логин/пароль

Ответ 5

попробуйте следующее:

https://github.com/spulec/uncurl

import uncurl

print uncurl.parse("curl 'https://pypi.python.org/pypi/uncurl' -H 
'Accept-Encoding: gzip,deflate,sdch'")