一篇文章教会你用Python抓取抖音app热点数据

　　今天给大家分享一篇简单的安卓app数据分析及抓取方法。以抖音为例，我们想要抓取抖音的热点榜数据。

　　首先我们要安装charles抓包APP数据，它是一款收费的抓包修改工具，易上手，数据请求容易控制，修改简单，抓取数据的开始暂停方便等优势，网上也有汉化版，下载地址为，一路默认安装就ok了。

　　在保证手机和电脑在同一局域网的情况下，代理服务器主机名设为电脑的ip地址，端口设为8888。

　　电脑端安装方法：依次点击帮助——ssl代理——安装charles root证书 ，按下图进行安装。

　　手机端安装方式：帮助——ssl代理——在移动设备或远程浏览器上安装charles root证书。

　　打开charles，然后打开抖音app的热点榜界面，在charles很容易就找到了数据接口，一次就返回了50条数据，如下图所示。

　　此接口只能返回这一时刻的热点数据，要想返回新的数据，就要变换参数信息，但是App端的数据接口参数都比较复杂，这里我们不再深入分析。

　　为了解决这一问题，我们可以用appium定时模拟操控手机，然后用mitmproxy把数据拦截下来（关于appium、mitmproxy的简介与安装网上有很多教程，这里不再赘述）

　　1.用mitmproxy抓包前，先把手机代理ip端口设置为8080，设置方法同上；

　　3.脚本中if url in flow.request.url为数据流判断条件，如果url在该数据流的url请求数据中，则判断该数据为抖音app热点数据；

作者：admin

抖音运营 站点 QQ交谈