004_Java实现百度网盘爬虫

视频配套视频教程：点击这里

百度网盘是个好东西，有许多的资源，对我们IT行业来说，更看中的就是学习资源了。
因为百度网盘并没有提供搜索的服务，所以我们搜索资源都只能依靠第三方软件进行搜索。
今天让我们自己实现一个百度网盘的爬虫网站，坐等收钱哦~~~

现在的百度网盘爬虫有两种：
1. 基于google的爬虫

不需要数据库，不需要自己写爬虫，只需要调用google的接口，当然还需要能科学上网。

2. 自己动手写的爬虫

这个就复杂一些了，今后咱们再认识这个。


下面咱们就开始动手实现一个百度网盘爬虫吧：
① 科学上网

方法很多，大家去摸索吧，如果摸索不到的话，文章下面的链接提供一个免费的科学上网的工具。

② 谷歌自定义搜索接口

 - 打开google自定义搜索

 - 点击新增网络，输入要搜索的网站，并创建

 - 获取源码

 - 将上面获取到的代码贴在HTML文档中，然后使用浏览器打开，复制请求网址（这里已经可以直接使用了，只是是google提供的）

 - 如果有更多的操作，就在Java代码中，去处理上面复制到的请求网址（也就是个处理Json数据，然后在前台显示）

 - 前端的部分就不再写了，最后效果

③ 完整源码：

https://mp.weixin.qq.com/s/Fn-ASaIoiH09LzRafhsoLQ

视频配套视频教程：点击这里