极客观点
研发管理
HarmonyOS
已讀 https://segmentfault.com/q/10...
但我的result.db中并没有一列为status, 应如何处理?
因为数据量太多, 如可能的话, 不想重爬处理, 只想处理FAILED的任务
pyspider 如何只重爬FAILED的任务?
新手上路，请多包涵
阅读 3k
撰写回答
你尚未登录，登录后可以
- 和开发者交流问题的细节
- 关注并接收问题和回答的更新提醒
- 参与内容的编辑和改进，让解决方法与时俱进
推荐问题
requests 和 urllib 有什么区别？
我正在学习爬虫，现在做的是 headers 带上 cookie 来模拟登录状态，爬取内容。同样的 cookie，同样的 user-agent，urllib 可以模拟登录爬取首页，requests 只返回登录页urllib 的代码及结果：requests 的代码及结果：2k 阅读
Python中网易云评论区的encSecKey参数加密怎么正确处理？
params参数目前已搞定，由于js会在每次请求生成一个16位的随机数i作为params参数第二层加密的密钥，encSecKey是这个随机数i的RSA加密结果，目前可以做到现去网页手动扒i和encSecKey扔进post请求最后获得正确的json文件，但是一旦这个随机数自己生成并RSA加密返回的就是空内容状态码200，还有一个小点就是晚上拿中午取下...1 回答880 阅读
Facebook数据抓取：如何定位`variables`加密点？
facebook爬虫，js逆向，主要是想抓点赞人员， variables一直没有跟到在哪里加密的，有有经验的大神来解惑吗?正在苦哈哈的dom断点的点，点了半天还没进入正题，崩溃452 阅读
怎么在pycharm中断点调试 pyspider的脚本？
如题，怎么在pycharm中断点调试 pyspider的脚本？1.2k 阅读
宣传栏
不在
resultdb里，在taskdb里面