前言:
最近研究了一下某饿了app的商铺评论的抓取,该app使用了ssl-pinning的技术来防止中间人攻击,中间代理抓包的时候,出现了unknown,你的代理工具的协议不支持,你可以手写协议或者使用下文中提到的方法。
1.目标
3.打开软件,进行抓包分析
- 使用抓包工具分析,发现评论是由两部分数据接口组成的,
- 接口1,返回的是新数据
- 接口2 返回的是旧数据接口
如果对采集方案感兴趣或者对数据抓取有兴趣的,可以加我qq: 330446875 学习交流(注明:CSDN爬虫)
文章知识点与官方知识档案匹配,可进一步学习相关知识 络技能树首页概览23095 人正在系统学习中
声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!