python2在写一个爬虫,需要爬取的url如下
http://www.baidu.com/1.php?id=1&json={"aa":"bb"}
直接使用request.get进行访问的话,实际请求会被url编码为
http://www.baidu.com/1.php?id=1&json=%7b"aa":"bb"%7d
导致抓取失败,
请问有啥办法在requests请求时不进行url编码吗?
python2在写一个爬虫,需要爬取的url如下
http://www.baidu.com/1.php?id=1&json={"aa":"bb"}
直接使用request.get进行访问的话,实际请求会被url编码为
http://www.baidu.com/1.php?id=1&json=%7b"aa":"bb"%7d
导致抓取失败,
请问有啥办法在requests请求时不进行url编码吗?
4 回答4.4k 阅读✓ 已解决
4 回答3.8k 阅读✓ 已解决
3 回答2.1k 阅读✓ 已解决
1 回答4.4k 阅读✓ 已解决
1 回答3.8k 阅读✓ 已解决
1 回答2.8k 阅读✓ 已解决
2 回答2k 阅读✓ 已解决
你的格式默认本身就需要被编码啊,因为那些符号是不可能直接出现在URL中的。
要么用post提交,要么用引号包裹试一下。
比如
http://www.baidu.com/1.php?id=1&json='{"aa":"bb"}'