![](/index/img/qc-side/indexLogo4.png)
qq:800819103
在线客服,实时响应![](/index/img/qc-side/indexLogo5.png)
qq群
在线客服,实时响应![](/index/img/qc-side/indexLogo6.png)
客服电话
13318873961随着手机的普及,app越来越多,许多行业甚至都主攻app发展了,所以使用爬虫爬取app的事情也就顺理成章了。目前国内大部分人都是使用安卓手机,那么安卓app数据抓取方法是怎样的呢?
1.下载设置fiddler抓包工具
Fiddler是一个http协议调试代理工具,它能够记录并检查所有你的电脑和互联网之间的http通讯,设置断点,查看所有的“进出”Fiddler的数据(指cookie,html,js,css等文件)。
打开下载好的fiddler,进行设置,找到 Tools -> Options,然后再HTTPS的工具栏下勾选Decrpt HTTPS traffic,在新弹出的选项栏下勾选Ignore server certificate errors。
设置允许外部设备发送HTTP/HTTPS到fiddler
相同的,在Connections选项栏下勾选Allow remote computers to connect,并记住上面的端口号8888,后面会使用到。
2.手机设置
将手机设置代理,前提是电脑和手机需要在同一个网络下进行操作,比如使用wifi或者热点。
反爬的手段很多,例如对于在一定时间内频繁访问的IP进行封接口(会误杀),并且这个很好绕过使用代理IP池就可以避免这个。
3.下载Fiddler的安全证书
使用Android手机的浏览器打开:http://192.168.1.96:8888, 点"FiddlerRoot certificate" 然后安装证书。
4.测试效果,打开某app
返回代码200,表示请求已发送且响应已成功接收。这样就抓取Android移动端的数据包成功了。
上文详细的介绍了安卓app数据抓取方法,相对于web端,其实app端的数据更加容易抓取,反爬虫也没有那么强,大部分也都是http/https协议。可以根据流程测试数据抓取,另外想获取ios端数据也可以采用这样方法。
相关文章内容简介
1 安卓app数据抓取方法,fiddler抓包工具下载安装
随着手机的普及,app越来越多,许多行业甚至都主攻app发展了,所以使用爬虫爬取app的事情也就顺理成章了。目前国内大部分人都是使用安卓手机,那么安卓app数据抓取方法是怎样的呢?1.下载设置fiddler抓包工具Fiddler是一个http协议调试代理工具,它能够记录并检查所有你的电脑和互联网之间的http通讯,设置断点,查看所有的“进出”Fiddler的数据(指cookie,htm... [阅读全文]
最新标签
推荐阅读
01
2019-03
爬虫怎么找多个代理使用?几种获取代理的方法
一般使用到爬虫的任务量都不少,因此为了爬取效率,是需要加代理IP来提高爬虫的工作效率,那么如何找个代理IP来使用呢?特别是大项目,有时候一个代理IP的IP数量可能满足不了需求,需要
16
2019-01
电商用IP修改器可以做什么?换IP有什么好处?
这些年互联网的发展非常快,网购也从时尚转为大众化,网购大军极速增加。但随着时间的推移,商家竞争也是越发的激烈,消费者的要求也变高了,商家生意也不好做了,于是电商行业开始兴
14
2019-01
怎么找个高质量IP修改器呢?
现在使用IP修改器的人比较多了,通过IP修改器,可以修改IP地址,突破网络IP限制,做一些补效果等的工作,但如果这IP修改器中的IP质量不够,也容易出现IP封,使用该IP地址的账号被封等风险
30
2018-11
免费的ip修改器好用吗?ip转换器有哪些?
免费的ip修改器好用吗?ip转换器有哪些?许多工作一个IP搞不掂,经常需要换IP,如果换几个还好,几百上千,甚至更多的IP,就需要找个专业ip转换器了。现在也有很多免费的ip转换器,这些免
热门文章