scrapy 爬取知乎内容,发现获取内容和原网页内容不一样啊,请问这是什么原因,主要由于什么造成的?

我是新手,最近打算学习爬虫相关知识,爬一下知乎,可是当我用scrapy shell https://www.zhihu.com/people/...,然后view(response)
发现和正常打开的网友内容不一样..主要是css文件导致的.
上截图
scrapy
浏览器

不知道问题是否已经描述清楚?可以在向我提问,谢谢!

阅读 5.5k
1 个回答

异步,js渲染问题,解决方法selenium+Phantomjs.

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进