Crossin的编程教室

标题: python代理和抓包的问题 [打印本页]

作者: xielong0120    时间: 2021-10-15 14:56
标题: python代理和抓包的问题
需求是这样的:原来selenium框架的爬虫脚本,是通过browsermobproxy做本地代理,抓请求来爬数据的。现在要接入代理池,但是代理池也用到了
chrome_options.add_argument('--proxy-server=%s' % proxy)
这个参数。 现在的问题是,怎么既能接入代理,又能抓包。
Snipaste_2021-10-15_14-55-46.png
用了网上的办法,不用chrome_options.add_argument('--proxy-server=%s' % proxy) 这个参数抓包,用其他的办法。可以是可以,但是不知道为什么,每次我接入代理,ip就被重置成本机了。

作者: crossin先生    时间: 2021-10-16 00:56
不太清楚,没有这样做过

不过接代理,ip是本机这个情况,你可以先单独拿代理请求试一下。可能跟你抓包部分无关,有些代理IP是透明代理,不会改变你的请求IP。所以先单独确认下代理请求部分是否可以




欢迎光临 Crossin的编程教室 (https://bbs.crossincode.com/) Powered by Discuz! X2.5