scrapy中如何传递start_url到数据库?

我的爬虫会爬取一个start_urls列表,那么如何在存储每条数据时,同时把它对应的start_url也存下来?

部分代码:

Nature_journals_rss = {  
    'Nat Chem': 'http://feeds.nature.com/nchem/rss/current',  
    'Nat Methods': 'http://feeds.nature.com/nmeth/rss/current',  
    'Nat Protoc': 'http://feeds.nature.com/nprot/rss/current',  
}  
start_urls = list(Nature_journals_rss.values())
阅读 1.4k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题