scrapy 如何清除cookies

Question

在采集普通网站时，有时候发现采集时间久了，获取不到新连接，关闭重采时就正常，猜想可能是cookies的原因，询问下，scrapy 采集时，如何隔一段时间就清空所有的cookies 呢

Answer 1

如果是默认的cookies

self.crawler.engine.downloader.middleware.middlewares[7].jars[None].clear()

我是在 parse 函数中使用的，self就是爬虫对象

Answer 2

在setting里，

COOKIES_ENABLED=False