爬虫抓取多页数据保存到csv怎么会存在多个表头?请各位大佬指点一下 谢谢

新手上路,请多包涵

1.png

这是代码,共抓取了12页的数据

2.jpg

这是存入csv中的情况,一共12页每一页都有一个表头,如何让它存入到csv中的时候只有一个表头 请大家帮忙解决 谢谢

阅读 2.9k
2 个回答

注意你的storeData函数里面用的是 open('work.csv','a') 这个'a'表示append添加,然后每次 打开文件你都往里面fieldNames,自然就存在多个表头了,你做好一个判断,第一次打开文件才添加表头,之后就不添加了即可。
希望能帮助到你。

我刚写过类似的爬虫,我的解决办法是:首先写入表头,然后之后都不写表头

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题