Python 응용 프로그램에서 전송 한 전체 HTTP 요청을 어떻게 볼 수 있습니까?


263

필자의 경우 requests라이브러리를 사용하여 HTTPS를 통해 PayPal의 API를 호출 하고 있습니다. 불행히도 PayPal에서 오류가 발생하여 PayPal 지원 팀에서 오류의 원인 또는 원인을 파악할 수 없습니다. 그들은 "전체 요청을 제공하십시오. 헤더 포함".

어떻게해야합니까?

답변:


499

간단한 방법 : 최신 버전의 요청 (1.x 이상)에서 로깅 사용

요청은 여기에 설명 된대로 http.clientlogging모듈 구성을 사용하여 로깅 상세도를 제어 합니다 .

데모

링크 된 문서에서 발췌 한 코드 :

import requests
import logging

# These two lines enable debugging at httplib level (requests->urllib3->http.client)
# You will see the REQUEST, including HEADERS and DATA, and RESPONSE with HEADERS but without DATA.
# The only thing missing will be the response.body which is not logged.
try:
    import http.client as http_client
except ImportError:
    # Python 2
    import httplib as http_client
http_client.HTTPConnection.debuglevel = 1

# You must initialize logging, otherwise you'll not see debug output.
logging.basicConfig()
logging.getLogger().setLevel(logging.DEBUG)
requests_log = logging.getLogger("requests.packages.urllib3")
requests_log.setLevel(logging.DEBUG)
requests_log.propagate = True

requests.get('https://httpbin.org/headers')

출력 예

$ python requests-logging.py 
INFO:requests.packages.urllib3.connectionpool:Starting new HTTPS connection (1): httpbin.org
send: 'GET /headers HTTP/1.1\r\nHost: httpbin.org\r\nAccept-Encoding: gzip, deflate, compress\r\nAccept: */*\r\nUser-Agent: python-requests/1.2.0 CPython/2.7.3 Linux/3.2.0-48-generic\r\n\r\n'
reply: 'HTTP/1.1 200 OK\r\n'
header: Content-Type: application/json
header: Date: Sat, 29 Jun 2013 11:19:34 GMT
header: Server: gunicorn/0.17.4
header: Content-Length: 226
header: Connection: keep-alive
DEBUG:requests.packages.urllib3.connectionpool:"GET /headers HTTP/1.1" 200 226

1
감사합니다, @ EmmettJ.Butler =)이 정보가 원래 문의 당시에 사용 가능한지 확실하지 않지만.
Inactivist

9
참고 HTTPLIB 것으로, 코드가 휴대용하게 교체하려면 파이썬 3에서 사용할 수 없습니다 import httplibimport requests.packages.urllib3.connectionpool as httplib6을 사용하고 from six.moves import http_client as httplib.
Jason R. Coombs

에서 requests2.18.1 파이썬 3, 로거가 logging.getLogger("requests.packages.urllib3")존재하거나 영향을 미치지하지 않습니다.
Flimm

1
Python3의 경우 여기를 참조하십시오 -docs.python-requests.org/en/latest/api/?highlight=debug from http.client import HTTPConnection
shershen

불행히도 "보내기 :" "답장 :"및 "헤더 :"줄은 실제로 기록되지는 않지만 stdout에 인쇄됩니다. 그러나이 정보를 로그 파일에 넣고 싶습니다!
lesnik

145
r = requests.get('https://api.github.com', auth=('user', 'pass'))

r응답입니다. 필요한 정보가있는 요청 속성이 있습니다.

r.request.allow_redirects  r.request.headers          r.request.register_hook
r.request.auth             r.request.hooks            r.request.response
r.request.cert             r.request.method           r.request.send
r.request.config           r.request.params           r.request.sent
r.request.cookies          r.request.path_url         r.request.session
r.request.data             r.request.prefetch         r.request.timeout
r.request.deregister_hook  r.request.proxies          r.request.url
r.request.files            r.request.redirect         r.request.verify

r.request.headers 헤더를 제공합니다.

{'Accept': '*/*',
 'Accept-Encoding': 'identity, deflate, compress, gzip',
 'Authorization': u'Basic dXNlcjpwYXNz',
 'User-Agent': 'python-requests/0.12.1'}

그런 다음 r.request.data본문을 매핑으로 사용합니다. 원하는 urllib.urlencode경우 다음과 같이 변환 할 수 있습니다 .

import urllib
b = r.request.data
encoded_body = urllib.urlencode(b)

응답의 유형에 따라 .data-attribute가 누락되고 .body대신 -attribute가있을 수 있습니다.


14
다음 중 "전체 요청, 헤더 포함"을 제공하는 것은 무엇입니까?
Chris B.

1
더 추가했습니다. 머리글과 몸 외에 무엇이 더 필요합니까?
Skylar Saveland

8
나는 그들이 무엇을 찾고 있는지 완전히 확신하지 못합니다. 나는 바이트 단위의 정확한 형식으로 그들에게 전달 된 모든 것을 포착하기를 바랐습니다.
Chris B.

18
이것은 내 경우에 선호되는 방법입니다. 단 하나의 메모 : 내 경우 에는 response.request것 같습니다 PreparedRequest. 그것은 .data없지만 .body대신에.
Antti Haapala

2
(쿼리 문자열 매개 변수) 전체 URL을 위해 당신은 또한 사용할 수 있습니다 response.url 그렇지 않은 점에서 약간의 차이가있는 (response.request...
린든 데르 척 반

6

HTTP Toolkit 을 사용 하여 정확하게 수행 할 수 있습니다 .

코드 변경없이이 작업을 빠르게 수행해야하는 경우 특히 유용합니다. HTTP 툴킷에서 터미널을 열고 정상적으로 Python 코드를 실행할 수 있으며 모든 HTTP / HTTPS의 전체 내용을 볼 수 있습니다 즉시 요청하십시오.

필요한 모든 것을 할 수있는 무료 버전이 있으며 100 % 오픈 소스입니다.

저는 HTTP Toolkit의 제작자입니다. 나는 실제로 나를 위해 똑같은 문제를 해결하기 위해 실제로 그것을 만들었습니다! 지불 통합을 디버깅하려고했지만 SDK가 작동하지 않아 이유를 알 수 없었으며 실제로 올바르게 수정하기 위해 진행중인 작업을 알아야했습니다. 매우 실망 스럽지만 원시 트래픽을 볼 수 있으면 실제로 도움이됩니다.


5

Python 2.x를 사용하는 경우 urllib2 오프너를 설치하십시오 . 헤더를 인쇄해야하지만 HTTPS를 칠하는 데 사용하는 다른 오프너와 결합해야 할 수도 있습니다.

import urllib2
urllib2.install_opener(urllib2.build_opener(urllib2.HTTPHandler(debuglevel=1)))
urllib2.urlopen(url)

2

verbose구성 옵션을 사용하면 당신이 원하는 것을 볼 수 있습니다. 이 문서의 예 .

참고 : 아래의 주석을 읽으십시오. 자세한 구성 옵션을 더 이상 사용할 수없는 것 같습니다.


3
있습니까? 실제로 그것을 찾을 수 없습니다.
BastiBen

3
@나쁜 고양이. 이 시점에서 "자세한 정보 로깅"섹션이었다 . 12 월제거 된 것 같습니다 .
Bruno

2
아, 그건 설명 할 것입니다. :) 여전히이 질문은 다시 유효합니다. 디버깅을 위해 서버와 클라이언트 간의 전체 트래픽을 인쇄하는 방법을 찾을 수 없었기 때문입니다.
BastiBen

1
상세 로깅과 동일한 효과를 얻기 위해 권장되는 "새로운 방법"이 있습니까?
cbare

1
내 대답 은 Requests 1.x 이상에 대한 올바른 방법을 보여줍니다.
Inactivist
당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.