查看: 7353|回复: 8

怎么处理带ajax的网页呢

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

电梯直达

楼主

发表于 2018-4-7 21:01:01 |只看该作者 |倒序浏览

比如我现在想爬取周杰伦的所有歌
这是歌列表的接口地址：http://www.kuwo.cn/artist/conten ... 8%E6%9D%B0%E4%BC%A6
这上面的歌单都是用ajax实现的好像，静态页面里没有
请问该怎么弄呢

收藏0

使用道具举报

crossin先生

174 主题	45 好友	11万积分

管理员

Rank: 9 Rank: 9 Rank: 9

发消息

沙发

发表于 2018-4-8 23:04:39 |只看该作者

用chrome开发者工具里的network看发出的请求是什么

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

板凳

发表于 2018-4-9 10:19:56 |只看该作者

crossin先生发表于 2018-4-8 23:04
用chrome开发者工具里的network看发出的请求是什么

什么开发者工具是F12 吗我用F12 里的network找到了headers里的链接正好是get方式的我就直接用了

使用道具举报

zhaolehua

0 主题	0 好友	137 积分

注册会员

Rank: 2

发消息

地板

发表于 2018-4-9 13:58:50 |只看该作者

ajax请求去开发者模式下的XHR下找。

使用道具举报

crossin先生

174 主题	45 好友	11万积分

管理员

Rank: 9 Rank: 9 Rank: 9

发消息

5^#

发表于 2018-4-9 14:48:46 |只看该作者

人工智能发表于 2018-4-9 10:19
什么开发者工具是F12 吗我用F12 里的network找到了headers里的链接正好是get方式的我就直接用了 ...

这个链接里没有数据，说明在其他请求里

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

6^#

发表于 2018-4-9 19:04:08 |只看该作者

zhaolehua 发表于 2018-4-9 13:58
ajax请求去开发者模式下的XHR下找。

开发者模式下是在浏览器里按F12 那个状态吧

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

7^#

发表于 2018-4-9 19:06:05 |只看该作者

crossin先生发表于 2018-4-9 14:48
这个链接里没有数据，说明在其他请求里

嗯我就是用F12 里的network找到了headers里的链接，链接正好是get方式的打开了里面就有我要的数据，我就直接用了
我想问一下你说的开发者工具是什么啊

使用道具举报

crossin先生

174 主题	45 好友	11万积分

管理员

Rank: 9 Rank: 9 Rank: 9

发消息

8^#

发表于 2018-4-9 23:19:26 |只看该作者

人工智能发表于 2018-4-9 19:06
嗯我就是用F12 里的network找到了headers里的链接，链接正好是get方式的打开了里面就有我要的数据，我 ...

开发者工具就是F12

一般链接都有规律

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

9^#

发表于 2018-4-10 17:25:47 |只看该作者

crossin先生发表于 2018-4-9 23:19
开发者工具就是F12

一般链接都有规律

嗯嗯

使用道具举报

返回列表

		自动登录	找回密码
密码			立即加入