简单的爬取豆瓣电影
来源:互联网 发布:生态环境监测大数据 编辑:程序博客网 时间:2024/05/22 12:58
import requestsfrom bs4 import BeautifulSoupurl =('https://movie.douban.com/chart')html =requests.get(url)soup =BeautifulSoup(html.text,'lxml')pai=soup.select('.pl2')for i in pai: s=i.find_all('a') name=s[0].text.strip(' ')#.strip('') url_1=s[0]['href'] j =i.find_all('p') jiesao=j[0].text pin = i.find_all('div') fen = pin[0].text.strip()print(name,jiesao,'\n',fen,'\n',url_1.strip(' ') )
结果:
怒 / 愤怒 / Rage 2016-09-10(多伦多电影节) / 2016-09-17(日本) / 渡边谦 / 森山未来 / 松山研一 / 绫野刚 / 广濑铃 / 皮埃尔泷 / 三浦贵大 / 佐久本宝 / 高畑充希 / 原日出子 / 池胁千鹤 / 宫崎葵 / 妻夫木聪 / 日本 / ikari-movie.com / 李相日 / 142分钟 / 怒 / 剧情... 7.9(22373人评价) https://movie.douban.com/subject/26279289/ 看不见的客人 / 布局(台) / The Invisible Guest 2016-09-23(奇幻电影节) / 2017-01-06(西班牙) / 马里奥·卡萨斯 / 阿娜·瓦格纳 / 何塞·科罗纳 / 芭芭拉·蓝妮 / 法兰西斯克·欧瑞拉 / 帕科·图斯 / 大卫·塞尔瓦斯 / 伊尼戈·加斯特西 / 珊·叶拉姆斯 / 马内尔·杜尔索 / 布兰卡·马丁内斯 /... 8.7(53432人评价) https://movie.douban.com/subject/26580232/ 杰出公民 / 玩谢大作家(港) / The Distinguished Citizen 2016-09-04(威尼斯电影节) / 2016-09-08(阿根廷) / 2016-11-11(西班牙) / 奥斯卡·马丁内兹 / 达迪·布列瓦 / 安德丽娅·弗里杰里奥 / 诺拉·纳瓦斯 / 曼努埃尔·维森特 / 马塞洛·丹德烈亚 / 贝伦·沙瓦纳 / 古斯塔沃·加尔松 / 朱利安·拉基尔·泰拉里尼... 8.6(3754人评价) https://movie.douban.com/subject/26844922/ 美女与野兽 2017-03-17(中国大陆/美国) / 艾玛·沃森 / 丹·史蒂文斯 / 卢克·伊万斯 / 凯文·克莱恩 / 乔什·加德 / 伊万·麦克格雷格 / 伊恩·麦克莱恩 / 艾玛·汤普森 / 斯坦利·图齐 / 古古·姆巴塔-劳 / 奥德拉·麦克唐纳 / 内森·麦克 / 哈蒂·莫拉汉... 7.4(109898人评价) https://movie.douban.com/subject/25900945/
。。。。。。。。。。。。。。。。
待改进。
- 简单的爬取豆瓣电影
- 爬取豆瓣的电影
- Scrapy 爬取 豆瓣电影的短评
- 关于爬取豆瓣电影和豆瓣书本的图片
- Python爬取豆瓣电影
- 爬取豆瓣电影数据
- scrapy爬取豆瓣电影
- Python爬取豆瓣电影
- 爬取豆瓣所有电影
- Python爬取豆瓣电影
- Python—爬虫—简单爬取豆瓣电影
- 简单爬虫学习---爬取豆瓣电影top250
- 豆瓣电影Top250爬取的数据的一些简单可视化笔记
- 基于BeautifulSoup爬取豆瓣网上的电影信息
- python-scrapy 实现对豆瓣电影的爬取
- 爬取6.6w+豆瓣电影之后的分析故事
- 爬取豆瓣网电影信息
- Python爬取豆瓣电影top250
- Android 自定义smartImageView
- 合并文件 SequenceInputStream
- new一个类的指针(不同括号的区别)
- 3516A-sample的使用3--vio实现CVBS输出
- 关于spring http invoker中一个常见错误,dubbo 调用 hibernate的set map list
- 简单的爬取豆瓣电影
- java 开发_数字转换汉语中 人民币的大写
- TCP/IP四层模型中协议的格式
- Android中如何将View的内容转换为图片
- DDR SDRAM工作原理
- 51nod 1674 区间的价值 V2
- mysql数据库容量及表大小查询语句
- js图片自动轮播
- Hadoop可视化与交互式工具:Zeppelin和Hue