我想用python爬取在一号店搜索“洗发水”后出现的的商品信息,而一号店在左上角可以选择收货地址。不同收货地址下进行搜索得出的结果是不一样的。我用浏览器访问时可以自动定位我的地址,即广东省;而用urllib2的urlopen方法抓取的html代码却是以上海市(缺省地址)为收货地址的商品信息。按说用我的ip地址进行抓取不是应该返回广东的商品信息吗?这个问题要怎么解决?
我想用python爬取在一号店搜索“洗发水”后出现的的商品信息,而一号店在左上角可以选择收货地址。不同收货地址下进行搜索得出的结果是不一样的。我用浏览器访问时可以自动定位我的地址,即广东省;而用urllib2的urlopen方法抓取的html代码却是以上海市(缺省地址)为收货地址的商品信息。按说用我的ip地址进行抓取不是应该返回广东的商品信息吗?这个问题要怎么解决?
4 回答4.4k 阅读✓ 已解决
4 回答3.8k 阅读✓ 已解决
3 回答2.1k 阅读✓ 已解决
1 回答4.4k 阅读✓ 已解决
1 回答3.8k 阅读✓ 已解决
1 回答2.8k 阅读✓ 已解决
2 回答2k 阅读✓ 已解决
那个是ajax的,你可以用你选择好的省份信息cookies带着去爬