python爬虫爬到的内容 整理后输入到数据库里

应该用哪个库呢?个人在用python3.
爬取每个月的某公告,每个月的表格列内容均不同,想整合在一个数据库里,就需要把所有的列标题设置在数据库,这个操作是否可以通过python来完成,然后分批爬取每个月的时候,根据网站源代码的内容,对应着Mysql里面的列自动对应填充。

阅读 3.2k
1 个回答

可以完成的,数据库的话,操作mysql数据库的有sqlalchemy库,要先安装mysql才能用。sqlite数据库就用sqlite库,这些是支持SQL语言的数据库.还有Mongo数据库,有pymongo。还有key value对应的redis数据库,你看情况用吧。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题