python的requests设置Content-Length的反爬措施破解办法

一、原请求方法

import requests
import json
url = 'https://xxxx.com'
data = {'a':1,'b':2}
headers = {
'Content-Type':'application/json;charset=UTF-8',
'Content-Length':str(len(json.dumps(data)))
}

res = requests.post(url=url,headers=headers,data=json.dumps(data))
print(res)  # res响应为 405

二、更改后使用方法

import requests
import json
url = 'https://xxxx.com'
data = {'a':1,'b':2}
headers = {
'Content-Type':'application/json;charset=UTF-8',
'Content-Length':str(len(json.dumps(data).replace(' ','')))
}

res = requests.post(url=url,headers=headers,data=json.dumps(data).replace(' ',''))
print(res)  # res响应为 200

方法原理是：因为python通过json.dumps会产生含空格的json字符串，有些是根据这个空格来设置反爬措施的，将其替换掉。单单在请求体替换不行，有可能会在’Content-Length’字段的长度设置反爬，请求体的长度要和’Content-Length’一样才行。