用Python的BeautifulSoup抓取豆瓣热映电影

byron

BeautifulSoup是python html页面分析和xml页面分析的一个很好的工具！

最新版可以在这里下载到：http://www.crummy.com/software/BeautifulSoup/

Crossin先生说，要抓热映电影，于是，就有了这篇文章。

废话不多说，直接上代码：

https://gist.github.com/imbyron/6412676
论坛贴代码太挫了，不好看，各位来gist看吧。
详细过程的分析记录在blog中

万建涛

今天手气不错啊 发表于 2014-6-10 09:50
你这个代码有误啊，运行时提示“TypeError: 'NoneType' object is not callable”。这说明你这个代码什么也 ...

你是URL写错了，你看你是不是 写到www.douban.com

今天手气不错啊

你这个代码有误啊，运行时提示“TypeError: 'NoneType' object is not callable”。这说明你这个代码什么也没有抓取到，是不是豆瓣改源码的缘故

crossin先生

toddlerya 发表于 2014-5-15 23:12
已经搞定了先生，好耐心，在微信回复了一遍，这里又回复一遍！

toddlerya

crossin先生 发表于 2014-5-12 12:45
http://kevinkelly.blog.163.com/blog/static/21390809320133185748442/

方法一

已经搞定了先生，好耐心，在微信回复了一遍，这里又回复一遍！

toddlerya

crossin先生 发表于 2014-5-12 12:45
http://kevinkelly.blog.163.com/blog/static/21390809320133185748442/

方法一

已经搞定了先生，好耐心，在微信回复了一遍，这里又回复一遍！

crossin先生

toddlerya 发表于 2014-5-10 23:05
先生 WIN7 怎么装beautifulsoup 百度不到结果

http://kevinkelly.blog.163.com/b ... 809320133185748442/

方法一
命令行下运行 python setup.py install

方法二
直接把代码文件夹copy到python安装目录下的lib/site-packages

toddlerya

crossin先生 发表于 2013-9-3 21:33
顺便说下，论坛发代码的时候，选择高级模式，把整理好格式的代码直接粘贴进代码框，不要管它在编辑模式下 ...

先生 WIN7 怎么装beautifulsoup 百度不到结果

crossin先生

zhouhaoran 发表于 2014-2-28 15:51
movie_new = i.a.get_text() 我想问下这段是什么意思啊？

i这个节点里<a>标签的文本值

i节点本身是<li>列表中的元素

zhouhaoran

movie_new = i.a.get_text() 我想问下这段是什么意思啊？