设为首页收藏本站

Crossin的编程教室

 找回密码
 立即加入
查看: 7469|回复: 7
打印 上一主题 下一主题

我想爬去音乐网站上的音乐怎么弄?

[复制链接]

22

主题

6

好友

242

积分

中级会员

Rank: 3Rank: 3

跳转到指定楼层
楼主
发表于 2018-4-19 22:43:59 |只看该作者 |倒序浏览
音乐一般都是以什么形式的文件上传的? 我要从network里捕获链接吗?
回复

使用道具 举报

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

沙发
发表于 2018-4-20 00:21:03 |只看该作者
流媒体不好抓
如果是有下载链接的还好
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

22

主题

6

好友

242

积分

中级会员

Rank: 3Rank: 3

板凳
发表于 2018-4-21 21:06:45 |只看该作者
crossin先生 发表于 2018-4-20 00:21
流媒体不好抓
如果是有下载链接的还好

嗯  我今天打开之前能打开的一个图片网页  显示  Server Connection Closed    这是我的ip被封了吗
回复

使用道具 举报

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

地板
发表于 2018-4-22 18:11:28 |只看该作者
人工智能 发表于 2018-4-21 21:06
嗯  我今天打开之前能打开的一个图片网页  显示  Server Connection Closed    这是我的ip被封了吗 ...

有可能,也可能是临时的请求失败
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

22

主题

6

好友

242

积分

中级会员

Rank: 3Rank: 3

5#
发表于 2018-4-23 00:09:57 |只看该作者
crossin先生 发表于 2018-4-22 18:11
有可能,也可能是临时的请求失败

嗯 可能就是被封了 换了ip就能打开了
回复

使用道具 举报

22

主题

6

好友

242

积分

中级会员

Rank: 3Rank: 3

6#
发表于 2018-4-23 00:12:47 |只看该作者
crossin先生 发表于 2018-4-22 18:11
有可能,也可能是临时的请求失败

HTTPError: 403 Client Error:   爬取百度图片 出现这个错误怎么解决 user-agent 我也加了

链接是从xml里的json数据中提取出来的  直接用浏览器的话可以打开 爬取的话就报错
回复

使用道具 举报

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

7#
发表于 2018-4-23 11:37:24 |只看该作者
人工智能 发表于 2018-4-23 00:12
HTTPError: 403 Client Error:   爬取百度图片 出现这个错误怎么解决 user-agent 我也加了

链接是从xml ...

不仅仅要user-agent ,header里其他的 referer之类 也加上试一试
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

22

主题

6

好友

242

积分

中级会员

Rank: 3Rank: 3

8#
发表于 2018-4-23 22:43:14 |只看该作者
crossin先生 发表于 2018-4-23 11:37
不仅仅要user-agent ,header里其他的 referer之类 也加上试一试

很强 先生   成功了 哈哈
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即加入

QQ|手机版|Archiver|Crossin的编程教室 ( 苏ICP备15063769号  

GMT+8, 2024-11-22 01:56 , Processed in 0.014446 second(s), 20 queries .

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部