segmentfaultsegmentfault
注册登录
产品
社群
使用“Bing”搜本站使用“Google”搜本站使用“百度”搜本站✓站内搜索
注册登录
问答博客资讯标签用户活动

logo极客观点logo项目管理logoHarmonyOS
开发者社区

javascript
前端
python
node.js
react
vue.js
php
laravel
go
人工智能
mysql
linux
ios
java
android
css
typescript
spring
程序员

logoONES 研发管理logo思否企业问答logo安谋科技 XPU
问答博客资讯标签用户活动

logo极客观点logo项目管理logoHarmonyOS
开发者社区

javascript
前端
python
node.js
react
vue.js
php
laravel
go
人工智能
mysql
linux
ios
java
android
css
typescript
spring
程序员

logoONES 研发管理logo思否企业问答logo安谋科技 XPU

pyspider +mongodb 多个爬虫 result 如何指定 collection 名称

头像
xxllp
    6312128
    发布于
    2016-01-09

    如题,我现在需要爬取多个网站的内容,但是结果结构是一样的。现在的配置resultdb 是一个db,每个爬虫的结果分别是不同的集合。而我想把这些结果保存到指定db下的指定集合,这个如何设置。请大侠帮我解答下。

    pyspidermongodb
    阅读 5.5k
    1 个回答
    得票最新
    头像
    足兆叉虫
      3.5k2411
      发布于
      2016-01-09

      自带的 resultdb 只是用来展示 preview 结果的,如果你更改了结构,这个功能就无效了。所以你需要拿到结果后,自己建库自己处理怎么存储。

      http://docs.pyspider.org/en/latest/Working-with-Results/

      查看全部 1 个回答
      推荐问题
      • mongodb两个表联查字段不显示?
        用thinkphp5操作mongodb数据,在做联合查询的时候,第二个表中的字段获取老是不显示出来?请教高手如何获取出来?

        1 回答864 阅读

      • 怎么在pycharm中断点调试 pyspider的脚本?
        如题,怎么在pycharm中断点调试 pyspider的脚本?

        1.4k 阅读

      相似问题
      • pyspider mongodb onresult 报错

        3.8k 阅读

      • pyspider 爬虫集群搭建

        1 回答3.3k 阅读✓ 已解决

      • pyspider 爬虫的task先后顺序设置

        1 回答4.6k 阅读

      • pyspider爬虫结果获取data-bgimage属性值

        1 回答2.3k 阅读✓ 已解决

      • MongoDB 如何修改数据库名称

        2 回答24.1k 阅读✓ 已解决

      找不到问题?创建新问题
      宣传栏
      思否旗下产品
      SegmentFault
      思否企业服务
      思否公开课
      思否企业问答
      ONES 旗下产品
      ONES
      Tower
      为知笔记
      企业问答
      ONES.com
      项目管理百科
      资源
      每周精选
      用户排行榜
      帮助中心
      建议反馈
      声望
      勋章
      合作
      关于我们
      广告投放
      联系我们
      合作伙伴
      关注
      产品技术日志
      社区运营日志
      市场运营日志
      社区访谈
      条款
      服务协议
      隐私政策
      下载 App

      Copyright © 2011-2025 SegmentFault. 当前呈现版本 25.06.09

      浙ICP备15005796号-2浙公网安备33010602002000号ICP 经营许可 浙B2-20201554

      杭州堆栈科技有限公司版权所有

      思否 - 凝聚集体智慧,推动技术进步