Crossin的编程教室
标题:
python代理和抓包的问题
[打印本页]
作者:
xielong0120
时间:
2021-10-15 14:56
标题:
python代理和抓包的问题
需求是这样的:原来selenium框架的爬虫脚本,是通过browsermobproxy做本地代理,抓请求来爬数据的。现在要接入代理池,但是代理池也用到了
chrome_options.add_argument('--proxy-server=%s' % proxy)
这个参数。 现在的问题是,怎么既能接入代理,又能抓包。
2021-10-15 14:55 上传
下载附件
(201.63 KB)
用了网上的办法,不用chrome_options.add_argument('--proxy-server=%s' % proxy) 这个参数抓包,用其他的办法。可以是可以,但是不知道为什么,每次我接入代理,ip就被重置成本机了。
作者:
crossin先生
时间:
2021-10-16 00:56
不太清楚,没有这样做过
不过接代理,ip是本机这个情况,你可以先单独拿代理请求试一下。可能跟你抓包部分无关,有些代理IP是透明代理,不会改变你的请求IP。所以先单独确认下代理请求部分是否可以
欢迎光临 Crossin的编程教室 (https://bbs.crossincode.com/)
Powered by Discuz! X2.5