Scrapy并没有循环callback是怎么回事?

在get_level2_topics这里并没有循环,不知道哪里出了问题,怎么就跳出了,我在get_level1_topics测试过,可以看到所有的topic_id都有输出。
不知哪里出了问题,请指教!

  • 问题:
    get_level1_topics 循环-> get_level2_topics(并没有循环)

代码如下:

def get_level1_topics(self, response):
    # 计数
    count = 0
    # print topic_ids
    for u in urls:
        yield scrapy.Request(
                 url=self.zhihu_topics_url + u,
                 headers=headers,
                 meta={
                     "proxy": proxy,
                     "cookiejar": response.meta["cookiejar"],
                     # 传递参数topic_id
                     "topic_id": topic_ids[count],
                 },
                 callback=self.get_level2_topics
                 )
        count +=1
        
def get_level2_topics(self, response):
    print response.meta['topic_id']
阅读 5.4k
2 个回答

可能你urls为空,所以不会执行到yield

新手上路,请多包涵

请问你的问题解决了没有

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题