raxcl 在 进阶版 -- 某恋爱话术 app 的爬虫经历与思考(含脚本) 中发帖
背景
承接前文,由于上一个app 爬出来的数据只有 1w 多条,感觉不是很过瘾
所以这次又找到了一个非破解版 app,数据量大概有 40w,安全等级直线上升
声明
本次爬虫是学习实践行为,获取到的数据均已在 24 小时内全部删除,请大家不要轻易模仿,维护网络生态,共建美好生活
抓包分析
首先通过 Reqable 和 mumu 安卓模拟器进行抓包分析
得到如下接口:
[QQ_1734416545937]
通过接口分析可知,该 app 有登录注册,并且搜索接口有分页功能,还对 sex 参数进行了区分,从而查出不同接口
这里主要对 search 接口进行 爬取
难点
浅尝辄止后发现了以下难点:
难点 1:搜索接口有次数限制,普通用户一天只能搜索 6 次,svip 无限次
数次尝试后,找到了无限获取积分的漏洞,可以靠积分进行svip 的兑换
难点 2:就算有 svip 了,...