建设通网站的爬虫设计

建设通的爬虫程序如何设计?

产品有:小程序、App、网站

  • 网站的话分析网络看不到接口调用,应该是 Node 中间层对接口和网页做了处理,返回给浏览器端的效果就是已经渲染好的页面。跟早期前后端未分离的效果一样
  • App、小程序:都是有接口的。Charles 抓包后发现有些数据是需要登陆才可以肯定,并且是 VIP 才可以,一年 5000RMB。所以不敢拿账号去尝试,爬被封

建设通网站网址

各位大佬,这种情况如何解决啊?如何爬取账号且 VIP 可见的数据

阅读 2.4k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题