用Python的BeautifulSoup抓取豆瓣热映电影

byron

BeautifulSoup是python html页面分析和xml页面分析的一个很好的工具！

最新版可以在这里下载到：http://www.crummy.com/software/BeautifulSoup/

Crossin先生说，要抓热映电影，于是，就有了这篇文章。

废话不多说，直接上代码：

https://gist.github.com/imbyron/6412676
论坛贴代码太挫了，不好看，各位来gist看吧。
详细过程的分析记录在blog中

crossin先生

顺便说下，论坛发代码的时候，选择高级模式，把整理好格式的代码直接粘贴进代码框，不要管它在编辑模式下是什么样，发布后显示就是正确的。如果编辑模式下调整了，反而就不对了

byron

顶下帖子，把垃圾帖缓存去掉。

匠逍之岿

你好，我有几个问题请教一下
1、div_hot = soup.find('div',{"id":"screening"})
    这一句里的 screening 是什么意思？是代指源代码里的那一串数字吗？如果代指时间用什么？
    这一句改为 div_hot = soup.find('div',id = ’screening‘) 也能运行，有什么区别吗？
2、 movie_new = i.a.get_text()
      这一句里的 a 是什么意思？

test777

匠逍之岿 发表于 2013-9-18 20:26
你好，我有几个问题请教一下
1、div_hot = soup.find('div',{"id":"screening"})
    这一句里的 screenin ...

你需要先学一下html

byron

匠逍之岿 发表于 2013-9-18 20:26
你好，我有几个问题请教一下
1、div_hot = soup.find('div',{"id":"screening"})
    这一句里的 screenin ...

你是不是也在我blog提问了？
在那里回复你了，可以去看。

zhouhaoran

movie_new = i.a.get_text() 我想问下这段是什么意思啊？

crossin先生

zhouhaoran 发表于 2014-2-28 15:51
movie_new = i.a.get_text() 我想问下这段是什么意思啊？

i这个节点里<a>标签的文本值

i节点本身是<li>列表中的元素

toddlerya

crossin先生 发表于 2013-9-3 21:33
顺便说下，论坛发代码的时候，选择高级模式，把整理好格式的代码直接粘贴进代码框，不要管它在编辑模式下 ...

先生 WIN7 怎么装beautifulsoup 百度不到结果

crossin先生

toddlerya 发表于 2014-5-10 23:05
先生 WIN7 怎么装beautifulsoup 百度不到结果

http://kevinkelly.blog.163.com/b ... 809320133185748442/

方法一
命令行下运行 python setup.py install

方法二
直接把代码文件夹copy到python安装目录下的lib/site-packages