作者jackjenny (痛苦)
看板Python
标题[问题] 如果抓取network XHR ?
时间Wed Jan 6 01:32:28 2021
如题:
想透过PYTHON 爬虫抓包某A网站的数据XHR
换句话说 就是想透过PYTHON拦截下载到浏览器前的某的XHR档案
1.上网查答案
似乎要安装mitmproxy来当使用者与主机中的中间器去拦截
我并没有要串改或是过滤讯息,可否有其他方式
例如pythom写出chrome plus 拦截某的档案xhr
因为想要去抓取资料在那个某档名xhr里面
2.不考虑对该主机URL去post/get 得到资料(xhr)
URL有好多前端加密乱数 放弃
3.该网站的network每次会产生许多xhr(加密随机乱数)档案
其中我想要的xhr档案的档案有个关键字可以辨识出来
所以才想这样土法炼钢找到指定XHR
先谢谢各位大大XD
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 36.228.131.164 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Python/M.1609867951.A.102.html
1F：推 vi000246: F12有个xhr中断点功能 在那个xhr设中断点 看stack 01/06 13:02
2F：→ vi000246: 找出是哪里呼叫那个xhr的 01/06 13:02
3F：→ vi000246: 其实我看不懂你想问啥 01/06 13:02
4F：→ jackjenny: 我是想要用python 去抓取network 资料 01/06 13:45
5F：→ TakiDog: mitm能滤 能看 能改 又好写 01/07 09:29