请选择 进入手机版 | 继续访问电脑版
设为首页收藏本站

Crossin的编程教室

微信公众号:
crossincode
 找回密码
 立即加入
查看: 95|回复: 3

老师你好,怎么才能抓取这个页面的response

[复制链接]

1

主题

0

好友

17

积分

新手上路

Rank: 1

发表于 2020-2-2 14:58:14 |显示全部楼层
要抓取的连接这是我想抓取的页面,每次打开,他就会往http://107.148.215.103:13164/v/thk.php?token=&id=发送get请求,然后返回里面就有Location: http://pull.leshantangjt.com/live/xxx/playlist.m3u8,但是token每次都是随机的,重复发送http应答就从302变成200,然后返回里面也没有我要的连接,我应该怎么做?可以用request吗?我也试过用selenium,但是不知道怎么提取加载后的地址。谢谢

response正常

response正常

response没有我要的

response没有我要的
回复

使用道具 举报

1

主题

0

好友

17

积分

新手上路

Rank: 1

发表于 2020-2-2 15:02:09 |显示全部楼层
抓取静态页面里面也没有我要的连接,百度谷歌搜索也都找不到现成的解决方法。劳烦老师帮忙看一看
回复

使用道具 举报

155

主题

36

好友

8万

积分

管理员

Rank: 9Rank: 9Rank: 9

发表于 2020-2-2 23:19:02 |显示全部楼层
这个不太好处理。token肯定是前端生成的,你要从前端js代码里去分析,看是怎么生成的

这个一般没现成解决方法,因为每个网站都不一样,都是要单独解决的
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

1

主题

0

好友

17

积分

新手上路

Rank: 1

发表于 2020-2-3 00:59:32 来自手机 |显示全部楼层
crossin先生 发表于 2020-2-2 23:19
这个不太好处理。token肯定是前端生成的,你要从前端js代码里去分析,看是怎么生成的

这个一般没现成解决 ...

好的,我也查了不少文章,发现都是混淆了的算法,我的水平看来是不可能破解得了算法。那我就用selenium来获取响应头吧。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即加入

QQ|Archiver|手机版|Crossin的编程教室 ( 苏ICP备15063769号  

GMT+8, 2020-2-24 03:28 , Processed in 0.053956 second(s), 25 queries .

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部