美剧小爬虫

针对单个页面的特定需求的爬虫（弱鸡……）

目标：

爬取天天美剧（http://cn163.net/ddc1/）一善之差第一季/全集Season 1迅雷下载（http://cn163.net/archives/24240/）的带字幕的下载链接。

from urllib.request import urlopenfrom bs4 import BeautifulSoupimport re 

html = urlopen('http://cn163.net/archives/24240/')

bs0bj.find('div', {'class':'entry'})    ///我们要的下载链接位于这个标签中。URL链接以ed2k://|file|开头。

h=bs0bj.find('div', {'class':'entry'}).findAll('a', href = re.compile("^(ed2k://\|file\|)"))   

for link in h:if 'href' in link.attrs:print(link.attrs['href'])

结果：

ed2k://|file|%E4%B8%80%E5%96%84%E4%B9%8B%E5%B7%AE.Good%20Behavior.S01E01.720p.HDTV.x264.%E5%8F%8C%E8%AF%AD%E5%AD%97%E5%B9%95%E7%B2%BE%E6%A0%A1%E7%89%88-%E6%B7%B1%E5%BD%B1%E5%AD%97%E5%B9%95%E7%BB%84.mp4|703001450|919f08c0bbee174bdacea17066952d7d|h=qpdnlxbowxvp3xuv4b4jxi6epkwnyxiq|/
ed2k://|file|%E4%B8%80%E5%96%84%E4%B9%8B%E5%B7%AE.Good%20Behavior.S01E02.720p.HDTV.x264.%E5%8F%8C%E8%AF%AD%E5%AD%97%E5%B9%95.mp4|624002006|450d53ff2646f66c48ef79ca35bed1be|h=remwhugxd2bfafsdrf5a4u5tglhppglu|/
ed2k://|file|%E4%B8%80%E5%96%84%E4%B9%8B%E5%B7%AE.Good%20Behavior.S01E03.720p.HDTV.x264.%E5%8F%8C%E8%AF%AD%E5%AD%97%E5%B9%95.mp4|465925783|4455d9fbdf8949620cfbb48c4b5e487a|h=we4ap4o7txdtop2drkogrqyt74cjh5wn|/
ed2k://|file|%E4%B8%80%E5%96%84%E4%B9%8B%E5%B7%AE.Good%20Behavior.S01E04.720p.HDTV.x264.%E5%8F%8C%E8%AF%AD%E5%AD%97%E5%B9%95.mp4|570471458|b09baa77530ec06ec43f289e30cb38e7|h=rkp4ypdrxj4rk27ruul2ixzwac2zi5bs|/