设为首页收藏本站

开启辅助访问切换到窄版

论坛BBS

Crossin的编程教室»论坛 › Python › 爬虫 › 将知乎专栏所有文章转为pdf

发新帖

查看: 6407|回复: 4

上一主题

下一主题

将知乎专栏所有文章转为pdf

3 主题	0 好友	25 积分

Rank: 1

发消息

电梯直达

跳转到指定楼层

楼主

发表于 2018-8-13 10:57:12 |只看该作者 |倒序浏览

上周crossin公众号上推了一个文章，爬取知乎专栏的所有文章并转为pdf，我试着运行了一下公众号上给的代码，但是总是报错，有没有人帮忙看一下，到底是哪里错了？
代码地址如下：
https://gitee.com/crossin/snippet/tree/master/get_zhihu
报错内容如下：
捕获.PNG

捕获.PNG

生成了76个html之后就开始出现这个错误了，爬虫这块我不是很懂，不明白到底是哪里错了

回复

使用道具举报

174 主题	45 好友	10万积分

Rank: 9 Rank: 9 Rank: 9

发消息

沙发

发表于 2018-8-13 12:30:21 |只看该作者

知乎有些文章需要登录后可见，你把地址和结果print出来看看

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

回复

使用道具举报

174 主题	45 好友	10万积分

Rank: 9 Rank: 9 Rank: 9

发消息

板凳

发表于 2018-8-13 12:30:51 |只看该作者

解决办法是略过，或者加上自己登陆后的cookie
但不建议一直以登陆状态抓取，可能会被封

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

回复

使用道具举报

3 主题	0 好友	25 积分

Rank: 1

发消息

地板

发表于 2018-8-13 13:47:48 |只看该作者

crossin先生发表于 2018-8-13 12:30
知乎有些文章需要登录后可见，你把地址和结果print出来看看

我试的就是crossin编程教室的专栏

回复

使用道具举报

174 主题	45 好友	10万积分

Rank: 9 Rank: 9 Rank: 9

发消息

5^#

发表于 2018-8-13 23:08:50 |只看该作者

elaine2018 发表于 2018-8-13 13:47
我试的就是crossin编程教室的专栏

我说的就是我们专栏
里面有的文章不知道什么原因（这得问知乎），需要登录才可见

#==== Crossin的编程教室 ====#
微信ID：crossincode
网站：http://crossincode.com

回复

使用道具举报

发新帖

|手机版|Archiver|Crossin的编程教室 ( 苏ICP备15063769号 )

GMT+8, 2024-4-27 07:18 , Processed in 0.018145 second(s), 24 queries .

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部