python爬虫怎么从软件界面抓取数据?

跟大家一直在忙聊的都是在电脑上跑爬虫,但是小伙伴们有没有想过我们怎么在手机去跑呢?手机作为人们日常随身携带的必备物品,我们在做任何事情的时候,基本上都离不开手机,那我们如果在外面,身边没有电脑,却要爬取手机上的应用信息,这是能不能实现的呢?没有什么是解决不了的事情,以上大家也不必惊呼,下面小编就教大家在手机上进行应用哦~

所需设备和环境:

设备:安卓手机

抓包:

  • fiddler+xposed+JustTrustme

  • 查壳:ApkScan-PKID

  • 脱壳:frida-DEXDump

  • 反编译:jadx-gui

  • hook:frida

关于抓包

手机安装app,设置好代理,打开 fiddler 先来抓个包,发现这个 app 做了证书验证,fiddler 开启之后 app提示连接不到服务器:

再打开app,可以看到成功抓到了包:

脱壳反编译

那先来反编译,在这之前,通常是先用查壳工具检查一下 app 是否加固,打开 ApkScan-PKID ,把 app 拖入:

等待脱壳完成,可以看到当前项目中生成了一个对应文件夹,里面有很多dex文件。

关于请求

直接上代码:

运行结果

好啦,这样我们就完成关于爬取软件的所有内容了哦~大家如果想换个软件爬取,也可以使用这个方式,直接套用代码即可哦~感兴趣的小伙伴,抓紧试试吧~

来源:PY学习网:原文地址:https://www.py.cn/article.html

hmoban主题是根据ripro二开的主题,极致后台体验,无插件,集成会员系统
自学咖网 » python爬虫怎么从软件界面抓取数据?