Crossin的编程教室»论坛 › Python › 爬虫 › 我想爬去音乐网站上的音乐怎么弄？

查看: 5547|回复: 7

我想爬去音乐网站上的音乐怎么弄？

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

电梯直达

楼主

发表于 2018-4-19 22:43:59 |只看该作者 |倒序浏览

音乐一般都是以什么形式的文件上传的？我要从network里捕获链接吗？

收藏0

使用道具举报

crossin先生

174 主题	45 好友	10万积分

管理员

Rank: 9 Rank: 9 Rank: 9

发消息

沙发

发表于 2018-4-20 00:21:03 |只看该作者

流媒体不好抓
如果是有下载链接的还好

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

板凳

发表于 2018-4-21 21:06:45 |只看该作者

crossin先生发表于 2018-4-20 00:21
流媒体不好抓
如果是有下载链接的还好

嗯我今天打开之前能打开的一个图片网页显示 Server Connection Closed 这是我的ip被封了吗

使用道具举报

crossin先生

174 主题	45 好友	10万积分

管理员

Rank: 9 Rank: 9 Rank: 9

发消息

地板

发表于 2018-4-22 18:11:28 |只看该作者

人工智能发表于 2018-4-21 21:06
嗯我今天打开之前能打开的一个图片网页显示 Server Connection Closed 这是我的ip被封了吗 ...

有可能，也可能是临时的请求失败

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

5^#

发表于 2018-4-23 00:09:57 |只看该作者

crossin先生发表于 2018-4-22 18:11
有可能，也可能是临时的请求失败

嗯可能就是被封了换了ip就能打开了

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

6^#

发表于 2018-4-23 00:12:47 |只看该作者

crossin先生发表于 2018-4-22 18:11
有可能，也可能是临时的请求失败

HTTPError: 403 Client Error: 爬取百度图片出现这个错误怎么解决 user-agent 我也加了

链接是从xml里的json数据中提取出来的直接用浏览器的话可以打开爬取的话就报错

使用道具举报

crossin先生

174 主题	45 好友	10万积分

管理员

Rank: 9 Rank: 9 Rank: 9

发消息

7^#

发表于 2018-4-23 11:37:24 |只看该作者

人工智能发表于 2018-4-23 00:12
HTTPError: 403 Client Error: 爬取百度图片出现这个错误怎么解决 user-agent 我也加了

链接是从xml ...

不仅仅要user-agent ，header里其他的 referer之类也加上试一试

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

使用道具举报

人工智能

22 主题	6 好友	242 积分

中级会员

Rank: 3 Rank: 3

发消息

8^#

发表于 2018-4-23 22:43:14 |只看该作者

crossin先生发表于 2018-4-23 11:37
不仅仅要user-agent ，header里其他的 referer之类也加上试一试

很强先生成功了哈哈

使用道具举报

返回列表

|手机版|Archiver|Crossin的编程教室 ( 苏ICP备15063769号 )

GMT+8, 2024-4-25 17:49 , Processed in 0.027039 second(s), 21 queries .

Powered by Discuz! X2.5

		自动登录	找回密码
密码			立即加入