CNode

会员账号网站的爬虫程序如何设计?

问答
FFantasticLBP发布于8 年前最后回复8 年前0 回复2281 浏览0 收藏

#建设通的爬虫程序如何设计?

产品有:小程序、App、网站

  • 网站的话分析网络看不到接口调用,应该是 Node 中间层对接口和网页做了处理,返回给浏览器端的效果就是已经渲染好的页面。跟早期前后端未分离的效果一样
  • App、小程序:都是有接口的。Charles 抓包后发现有些数据是需要登陆才可以肯定,并且是 VIP 才可以,一年 5000RMB。所以不敢拿账号去尝试,爬被封

建设通网站网址

各位大佬,这种情况如何解决啊?如何爬取账号且 VIP 可见的数据

查看回复

回复 (0)

暂无回复,成为第一个参与讨论的人。
参与回复
登录后即可参与回复。登录