通过python爬虫统计?站此时直播在线总人数
来源:互联网 发布:java身份证格式验证 编辑:程序博客网 时间:2024/03/28 21:01
初学python第三天
博主特别喜爱逛?站。今天在直播区闲逛,发现一个变化,过去?站人数最多不过3万,如今却有很多主播人数翻倍增长,普遍倍增。粗略算了一下,貌似和在线人数相同了。
为了验证这个想法。对?站的直播在线人数进行了统计。
选用?站直播中的热度排行作为抓取网页,我试了一下,向下翻页最少能看到1人的主播,大概就是全部人数了。
?站直播主站中的请求到的文档中并没有每个直播间在线人数信息。
注意到一个细节,在点下方加载更多时,出现了一个html请求,把这个地址放在浏览器中打开,发现是一个表单,其中有一个数据,Online:"****",这个数据就是我苦苦寻找的在线人数。
好了,开始写代码,
1.写请求头
2.遍历网页(1-15)页
3.请求网页文本
4.正则提取online数目
5.for把online相加
6.结束,获得online总数
最后获得的数据是:110万左右
而在线人数显示的是80万。
。。。。
可以理解为30万人点开了两个直播
阅读全文
0 0
- 通过python爬虫统计?站此时直播在线总人数
- Asp.net统计在线人数和总人数
- 统计在线人数、每日访问人数和总人数
- python爬虫之爬取捞月狗直播信息
- python爬虫之爬取捞月狗直播信息
- QQ游戏当前在线总人数查看
- QQ游戏当前在线总人数查看
- QQ游戏当前在线总人数查看
- QQ游戏当前在线总人数查看
- QQ游戏当前在线总人数查看
- QQ游戏当前在线总人数查看
- JSP中用application统计访客总人数
- php通过cookie统计在线人数
- 通过监听器实现在线人数统计
- 通过session统计当前在线人数
- Python爬虫—京东在线抢购
- Python+爬虫技术获取斗鱼直播图片(整理)
- python爬虫爬取各大直播平台的女主播图片
- 解决a start job is running for dev-disk-by启动错误
- lua静态检查
- Mysql 0基础进阶之mysql介绍《01》
- 【消息队列MQ】各类MQ比较
- IntelliJ IDEA中Dependencies红色波浪线报错(缺少Dependency)的解决办法
- 通过python爬虫统计?站此时直播在线总人数
- 详解jQuery each() 方法
- WAJUEJI which home strong!
- hadoop初识之四:HDFS、Yarn及mapreduce 回顾,配置文件的补充及yarn日志聚集功能配置
- Jquery学习笔记——第一章 Jquery入门及基础语法
- 修改网卡ens33为eth0
- 删除无头单链表中的节点
- 51nod 1536 不一样的猜数游戏
- HDU 1004 (求最频繁字符串)