web-dev-qa-db-fra.com

Comment empêcher les requêtes python d'encoder mes URL en pourcentage?

J'essaie d'obtenir une URL du format suivant à l'aide de requests.get () en python:

http://api.example.com/export/?format=json&key=site:dummy+type:example+group:wheel

#!/usr/local/bin/python

import requests

print(requests.__versiom__)
url = 'http://api.example.com/export/'
payload = {'format': 'json', 'key': 'site:dummy+type:example+group:wheel'}
r = requests.get(url, params=payload)
print(r.url)

Cependant, l'URL est encodée en pourcentage et je ne reçois pas la réponse attendue.

2.2.1
http://api.example.com/export/?key=site%3Adummy%2Btype%3Aexample%2Bgroup%3Awheel&format=json

Cela fonctionne si je passe directement l'URL:

url = http://api.example.com/export/?format=json&key=site:dummy+type:example+group:wheel
r = requests.get(url)

Existe-t-il un moyen de transmettre les paramètres dans leur forme d'origine - sans codage en pourcentage?

Merci!

pythonurlpython-requestspercent-encoding
23
Monad

Ce n'est pas une bonne solution mais vous pouvez utiliser string:

r = requests.get(url, params='format=json&key=site:dummy+type:example+group:wheel')

BTW:

payload = {'format': 'json', 'key': 'site:dummy+type:example+group:wheel'}

payload_str = "&".join("%s=%s" % (k,v) for k,v in payload.items())
# 'format=json&key=site:dummy+type:example+group:wheel'

r = requests.get(url, params=payload_str)
28
furas

Si quelqu'un d'autre le découvre à l'avenir, vous pouvez créer une sous-classe de requests.Session, remplacer la méthode d'envoi et modifier l'URL brute afin de corriger les encodages en pourcentage, etc.

import requests, urllib

class NoQuotedCommasSession(requests.Session):
    def send(self, *a, **kw):
        # a[0] is prepared request
        a[0].url = a[0].url.replace(urllib.quote(","), ",")
        return requests.Session.send(self, *a, **kw)

s = NoQuotedCommasSession()
s.get("http://somesite.com/an,url,with,commas,that,won't,be,encoded.")
8
Brandon McGinty-Carroll

La solution, telle que conçue, consiste à transmettre directement l'URL. 

6
Kenneth Reitz

Les réponses ci-dessus n'ont pas fonctionné pour moi.

J'essayais de faire une requête où le paramètre contenait un canal, mais les requêtes python encoderaient également le canal. Donc, à la place, j’ai utilisé urlopen:

# python3
from urllib.request import urlopen

base_url = 'http://www.example.com/search?'
query = 'date_range=2017-01-01|2017-03-01'
url = base_url + query

response = urlopen(url)
data = response.read()
# response data valid

print(response.url)
# output: 'http://www.example.com/search?date_range=2017-01-01|2017-03-01'
1
kujosHeist

Veuillez regarder la 1ère option dans ce lien github . Vous pouvez ignorer la urlibpart qui signifie prep.url = url au lieu de prep.url = url + qry

0
Sandeep Kanabar