爬虫基于ADSL动态获取ip
来源:互联网 发布:网络文化节上的讲话 编辑:程序博客网 时间:2024/05/16 00:50
爬虫访问中,如何解决网站限制IP的问题?
开发了一个爬虫,布置在自己的服务器上,请求某网站的查询功能,然后抓取查询结果,结果访问才一会儿,就被提示封IP了。有什么好的解决方法吗?
1. 某宝买代理,简单,但是太贵;
2. ADSL动态获取ip。
java代码:
- package com.sesame.network;
- import java.io.BufferedReader;
- import java.io.InputStreamReader;
- public class ConnectNetWork {
- /**
- * 执行CMD命令,并返回String字符串
- */
- public static String executeCmd(String strCmd) throws Exception {
- Process p = Runtime.getRuntime().exec("cmd /c " + strCmd);
- StringBuilder sbCmd = new StringBuilder();
- BufferedReader br = new BufferedReader(new InputStreamReader(p
- .getInputStream()));
- String line;
- while ((line = br.readLine()) != null) {
- sbCmd.append(line + "\n");
- }
- return sbCmd.toString();
- }
- /**
- * 连接ADSL
- */
- public static boolean connAdsl(String adslTitle, String adslName, String adslPass) throws Exception {
- System.out.println("正在建立连接.");
- String adslCmd = "rasdial " + adslTitle + " " + adslName + " "
- + adslPass;
- String tempCmd = executeCmd(adslCmd);
- // 判断是否连接成功
- if (tempCmd.indexOf("已连接") > 0) {
- System.out.println("已成功建立连接.");
- return true;
- } else {
- System.err.println(tempCmd);
- System.err.println("建立连接失败");
- return false;
- }
- }
- /**
- * 断开ADSL
- */
- public static boolean cutAdsl(String adslTitle) throws Exception {
- String cutAdsl = "rasdial " + adslTitle + " /disconnect";
- String result = executeCmd(cutAdsl);
- if (result.indexOf("没有连接")!=-1){
- System.err.println(adslTitle + "连接不存在!");
- return false;
- } else {
- System.out.println("连接已断开");
- return true;
- }
- }
- public static void main(String[] args) throws Exception {
- connAdsl("宽带","hzhz**********","******");
- Thread.sleep(1000);
- cutAdsl("宽带");
- Thread.sleep(1000);
- //再连,分配一个新的IP
- connAdsl("宽带","hzhz**********","******");
- }
- }
阅读全文
0 0
- 爬虫基于ADSL动态获取ip
- 取得ADSL动态IP问题
- 如何获取ADSL的IP地址
- python 爬虫获取代理Ip
- 如何将国际域名绑定ADSL动态IP地址
- 远程桌面+花生壳控制adsl动态ip用户的电脑
- 远程桌面+花生壳控制adsl动态ip用户的电脑
- 远程桌面+花生壳控制adsl动态ip用户的电脑
- java实现动态切换上网IP (ADSL拨号上网)
- java实现动态切换上网IP (ADSL拨号上网)
- java实现动态切换上网IP (ADSL拨号上网)
- java实现动态切换上网IP (ADSL拨号上网)
- Java实现获取本机上ADSL的IP
- 动态获取当前IP
- ARM获取动态IP
- 网络爬虫爬取全国省市区(动态ip代理的获取,实现对ip限制的突破)
- adsl改变IP
- GuozhongCrawler看准网爬虫动态切换IP漫爬虫
- 用类描述计算机中CPU的速度和硬盘的容量
- 解决scrollView与recyclerView的滑动嵌套问题
- Password UVA
- sqlserver镜像搭建
- Hadoop
- 爬虫基于ADSL动态获取ip
- 在centeros搭建workpress
- MySQL分区详解
- HTTP请求和HTTP响应
- tcp udp的区别
- 【English】《赖世雄音标》学习小结
- mysql 大表数据优化方案
- 功率谱分析
- HDU-1392 Surround the Trees(凸包板子题)