java抓取数据+破解屏蔽ip访问【多线程数据采集之三】

简介:

java抓取数据+破解屏蔽ip访问

今天就讲解一下,怎么破解 服务器 屏蔽ip的请求。

现在大多网站采取 ip访问次数达到一定次数就屏蔽ip的功能。

那么要破解服务器的屏蔽。 就只有改变ip, 或者代理ip。

如果用代理,哪里去找那么多ip呢。  用adsl 获取动态ip不是很简单吗。

转载注明出处:http://blog.csdn.net/column/details/threadgrab.html

那么现在就贴上adsl获取动态ip的方案实例源码

1、抓取网页数据的时候  catch异常之后 , 就采取拨号程序

 
  1. //门票浏览  url参数 http://www.lvmama.com/dest/lantiancheng   
  2.     public static DataBean getWebData1(String url){   
  3.         DataBean data = null;   
  4.         try {   
  5.             Document docdata = Jsoup.connect(url).timeout(20000).get();   
  6.                
  7.         } catch (Exception e) {   
  8.             e.printStackTrace();   
  9.                         //拨号一下   
  10.                         ConnectAdslNet.reconnectAdsl("宽带",Main.adslname,Main.adslpass);   
  11.         }   
  12.         return data;   
  13.     }   

2、拨号获取动态ip的 工具类

 
  1. import java.io.BufferedReader;   
  2. import java.io.InputStreamReader;   
  3.    
  4. import org.apache.log4j.Logger;   
  5.    
  6. /**  
  7.  *   
  8.  * ADSL拨号上网  
  9.  * Windwos操作系统需要是GBK编码  
  10.  * @author yijianfeng  
  11.  *   
  12.  */   
  13.    
  14. public class ConnectAdslNet {   
  15.     static Logger logger = Logger.getLogger(ConnectAdslNet.class);   
  16.        
  17.      /**   
  18.      * 执行CMD命令,并返回String字符串   
  19.      */     
  20.     public static String executeCmd(String strCmd) throws Exception {     
  21.         Process p = Runtime.getRuntime().exec("cmd /c " + strCmd);     
  22.         StringBuilder sbCmd = new StringBuilder();     
  23.            
  24.         //注意编码 GBK   
  25.         BufferedReader br = new BufferedReader(new InputStreamReader(p     
  26.                 .getInputStream(),"GBK"));     
  27.         String line;     
  28.         while ((line = br.readLine()) != null) {     
  29.             sbCmd.append(line + "\n");     
  30.         }     
  31.         return sbCmd.toString();     
  32.     }     
  33.      
  34.     /**   
  35.      * 连接ADSL   
  36.      */     
  37.     public static boolean connectAdsl(String adslTitle, String adslName, String adslPass) throws Exception {     
  38.         System.out.println("正在建立连接.");     
  39.         String adslCmd = "rasdial " + adslTitle + " " + adslName + " "     
  40.                 + adslPass;     
  41.         String tempCmd = executeCmd(adslCmd);     
  42.            
  43.         // 判断是否连接成功     
  44.         if (tempCmd.indexOf("已连接") > 0) {     
  45.             System.out.println("已成功建立连接.");     
  46.             return true;     
  47.         } else {     
  48.             System.out.println(tempCmd);     
  49.             System.out.println("建立连接失败");     
  50.             return false;     
  51.         }     
  52.     }     
  53.      
  54.     /**   
  55.      * 断开ADSL   
  56.      */     
  57.     public static boolean disconnectAdsl(String adslTitle) throws Exception {     
  58.         String disconnectAdsl = "rasdial " + adslTitle + " /disconnect";     
  59.         String result = executeCmd(disconnectAdsl);          
  60.             
  61.         if (result.indexOf("没有连接")!=-1){     
  62.             System.out.println(adslTitle + "连接不存在!");     
  63.             return false;     
  64.         } else {     
  65.             System.out.println("连接已断开");     
  66.             return true;     
  67.         }     
  68.     }     
  69.        
  70.     /**  
  71.      * adsl重新拨号,尖锋网七七八八网推支持失败不断重拨  
  72.      * @param args  
  73.      * @throws Exception  
  74.      */   
  75.     public static boolean reconnectAdsl(String adslTitle, String adslName, String adslPass){   
  76.         boolean bAdsl = false;   
  77.         try {   
  78.             disconnectAdsl(adslTitle);    
  79.             Thread.sleep(3000);            
  80.             bAdsl = connectAdsl(adslTitle,adslName,adslPass);   
  81.             Thread.sleep(3000);   
  82.             int i = 0;   
  83.             while (!bAdsl){   
  84.                 disconnectAdsl(adslTitle);    
  85.                 Thread.sleep(3000);   
  86.                 bAdsl = connectAdsl(adslTitle,adslName,adslPass);   
  87.                 Thread.sleep(3000);   
  88.                 if(i>5){   
  89.                     break;   
  90.                 }   
  91.             }   
  92.         }catch(Exception e){   
  93.             logger.error("ADSL拨号异常:", e);   
  94.         }   
  95.            
  96.         return bAdsl;          
  97.     }   
  98.         
  99.     public static void main(String[] args) throws Exception {   
  100. //        reconnectAdsl("宽带","adsl账号","密码");     
  101.     }      
  102.        
  103. }   

 

采用上述办法,基本上就可以解决拨号的问题了。 

如果程序加入了多线程。 那么就必须考虑多线程,拨号同步,以及数据同步问题。  提高效率和避免重复操作。

到此,破解屏蔽ip访问就搞定了!

 








      本文转自yjflinchong 51CTO博客,原文链接:http://blog.51cto.com/yjflinchong/1165154,如需转载请自行联系原作者



相关文章
|
17天前
|
前端开发 JavaScript Java
java常用数据判空、比较和类型转换
本文介绍了Java开发中常见的数据处理技巧,包括数据判空、数据比较和类型转换。详细讲解了字符串、Integer、对象、List、Map、Set及数组的判空方法,推荐使用工具类如StringUtils、Objects等。同时,讨论了基本数据类型与引用数据类型的比较方法,以及自动类型转换和强制类型转换的规则。最后,提供了数值类型与字符串互相转换的具体示例。
|
8天前
|
安全 Java API
java如何请求接口然后终止某个线程
通过本文的介绍,您应该能够理解如何在Java中请求接口并根据返回结果终止某个线程。合理使用标志位或 `interrupt`方法可以确保线程的安全终止,而处理好网络请求中的各种异常情况,可以提高程序的稳定性和可靠性。
38 6
|
21天前
|
存储 监控 小程序
Java中的线程池优化实践####
本文深入探讨了Java中线程池的工作原理,分析了常见的线程池类型及其适用场景,并通过实际案例展示了如何根据应用需求进行线程池的优化配置。文章首先介绍了线程池的基本概念和核心参数,随后详细阐述了几种常见的线程池实现(如FixedThreadPool、CachedThreadPool、ScheduledThreadPool等)的特点及使用场景。接着,通过一个电商系统订单处理的实际案例,分析了线程池参数设置不当导致的性能问题,并提出了相应的优化策略。最终,总结了线程池优化的最佳实践,旨在帮助开发者更好地利用Java线程池提升应用性能和稳定性。 ####
|
16天前
|
安全 算法 Java
Java多线程编程中的陷阱与最佳实践####
本文探讨了Java多线程编程中常见的陷阱,并介绍了如何通过最佳实践来避免这些问题。我们将从基础概念入手,逐步深入到具体的代码示例,帮助开发者更好地理解和应用多线程技术。无论是初学者还是有经验的开发者,都能从中获得有价值的见解和建议。 ####
|
16天前
|
Java 调度
Java中的多线程编程与并发控制
本文深入探讨了Java编程语言中多线程编程的基础知识和并发控制机制。文章首先介绍了多线程的基本概念,包括线程的定义、生命周期以及在Java中创建和管理线程的方法。接着,详细讲解了Java提供的同步机制,如synchronized关键字、wait()和notify()方法等,以及如何通过这些机制实现线程间的协调与通信。最后,本文还讨论了一些常见的并发问题,例如死锁、竞态条件等,并提供了相应的解决策略。
40 3
|
17天前
|
监控 Java 开发者
深入理解Java中的线程池实现原理及其性能优化####
本文旨在揭示Java中线程池的核心工作机制,通过剖析其背后的设计思想与实现细节,为读者提供一份详尽的线程池性能优化指南。不同于传统的技术教程,本文将采用一种互动式探索的方式,带领大家从理论到实践,逐步揭开线程池高效管理线程资源的奥秘。无论你是Java并发编程的初学者,还是寻求性能调优技巧的资深开发者,都能在本文中找到有价值的内容。 ####
|
23天前
|
缓存 Java 开发者
Java多线程并发编程:同步机制与实践应用
本文深入探讨Java多线程中的同步机制,分析了多线程并发带来的数据不一致等问题,详细介绍了`synchronized`关键字、`ReentrantLock`显式锁及`ReentrantReadWriteLock`读写锁的应用,结合代码示例展示了如何有效解决竞态条件,提升程序性能与稳定性。
86 6
|
21天前
|
监控 Java 数据库连接
Java线程管理:守护线程与用户线程的区分与应用
在Java多线程编程中,线程可以分为守护线程(Daemon Thread)和用户线程(User Thread)。这两种线程在行为和用途上有着明显的区别,了解它们的差异对于编写高效、稳定的并发程序至关重要。
28 2
|
21天前
|
监控 Java 开发者
Java线程管理:守护线程与本地线程的深入剖析
在Java编程语言中,线程是程序执行的最小单元,它们可以并行执行以提高程序的效率和响应性。Java提供了两种特殊的线程类型:守护线程和本地线程。本文将深入探讨这两种线程的区别,并探讨它们在实际开发中的应用。
27 1
|
22天前
|
安全 Java 开发者
Java中的多线程编程:从基础到实践
本文深入探讨了Java多线程编程的核心概念和实践技巧,旨在帮助读者理解多线程的工作原理,掌握线程的创建、管理和同步机制。通过具体示例和最佳实践,本文展示了如何在Java应用中有效地利用多线程技术,提高程序性能和响应速度。
54 1