爬取数据遇到的问题--动态显示,网页中没有所要的数据

来源:互联网 发布:图书馆占座软件 编辑:程序博客网 时间:2024/04/29 13:03

帮朋友爬世界杯的数据,但是部分网页是动态显示的,点击之后active,数据从服务器返回来,网页源码里面是没有所要的数据的。这种比较麻烦了,现在的爬取数据的水平很低,而且数据量很小,所以现在很多是半自动的。


如果遇到动态显示,可以点击网页的审查元素,服务器会返回你需要的数据,这时候再半自动搜集,即可。


没有接触过这些术语,野路子出身,如果有问题,希望大家指出来。

0 0
原创粉丝点击