Scrapy重复访问同一个api url，rules该怎么写？

morriaty_the_murderer

发布于
2016-02-26

更新于
2016-02-26

用api获得json数据，GET请求

scrapy没有构造get请求url的方法吗？
类似于requests库中的request(url,params=params),我现在是用urllib.urlencode()手动构造的
怎么反复访问这个api，只是参数改变，直到没有json返回时才终止？

python scrapy 网页爬虫

阅读 4.2k

1 个回答

安迪的信仰

发布于
2016-08-30

spider.request()就是get请求
spider.Fromrequest()可以携带post参数
反复访问可以用循环改变参数即可

撰写回答

你尚未登录，登录后可以

和开发者交流问题的细节
关注并接收问题和回答的更新提醒
参与内容的编辑和改进，让解决方法与时俱进

推荐问题

相似问题

找不到问题？创建新问题