程序博客网 > 淘宝助手mac版

StringTokenizer

来源：互联网 发布：淘宝助手mac版 编辑：程序博客网 时间：2024/05/16 11:55

原文地址：http://blog.csdn.net/kjfcpua/article/details/5274816


之前没接触过StringTokenizer，看上去类名很长，仿佛很牛13似的。最近了解了一下

引用

  StringTokenizer 类允许应用程序将字符串分解为标记 


也就是分解字符串用的 
让我们来看一个简单的例子

Java代码 
  1. StringTokenizer st =  new  StringTokenizer( "this is a test" );  
  2. while  (st.hasMoreTokens()) {  
  3.     System.out.println(st.nextToken());  
  4. }  
[java] view plaincopy
  1. StringTokenizer st = new StringTokenizer("this is a test");  
  2. while (st.hasMoreTokens()) {  
  3.     System.out.println(st.nextToken());  
  4. }  


出去结果如下

Java代码 
  1. this   
  2. is  
  3. a  
  4. test  
[java] view plaincopy
  1. this  
  2. is  
  3. a  
  4. test  


这种不带参数的StringTokenizer使用的分隔符是/t/n/r/f，即空白字符、制表符、换行符、回车符和换页符。 
ok，StringTokenizer还提供了另一种构造方法，StringTokenizer(String str, String delim) 
从名字上看，可以知道，我们可以自定义delimiter。那么，这个delimiter是不是可以为正则表达式呢？满怀期待的试验一下

Java代码 
  1. String input =  "This is just a test" ;  
  2. //设想的delimiter可以为正则表达式   
  3. StringTokenizer st = new  StringTokenizer(input, "//s{1}" );  
  4. while (st.hasMoreTokens()){  
  5.   System.out.println(st.nextToken());  
  6. }  
[java] view plaincopy
  1. String input = "This is just a test";  
  2. //设想的delimiter可以为正则表达式  
  3. StringTokenizer st = new StringTokenizer(input,"//s{1}");  
  4. while(st.hasMoreTokens()){  
  5.   System.out.println(st.nextToken());  
  6. }  


本以为结果会是

Java代码 
  1. this   
  2. is  
  3. a  
  4. test  
[java] view plaincopy
  1. this  
  2. is  
  3. a  
  4. test  


哪知一看，结果为

Java代码 
  1.   Thi  
  2.  i  
  3.  ju  
  4. t a te  
  5. t  
[java] view plaincopy
  1.   Thi  
  2.  i  
  3.  ju  
  4. t a te  
  5. t  


可见，StringTokenizer的delimeter不可以为正则表达式 
替代方法？ 
首先，来看String的split方法

Java代码 
  1. String input =  "This is just a test" ;  
  2. String [] str = input.split("//s{1}" );  
  3. for ( int  i= 0 ;i<str.length;i++){  
  4.   System.out.println(str[i]);  
  5. }  
[java] view plaincopy
  1. String input = "This is just a test";  
  2. String [] str = input.split("//s{1}");  
  3. for(int i=0;i<str.length;i++){  
  4.   System.out.println(str[i]);  
  5. }  


输出结果为

Java代码 
  1. this   
  2. is  
  3. a  
  4. test  
[java] view plaincopy
  1. this  
  2. is  
  3. a  
  4. test  


ok，正确。String的split方法接受的参数可以为正则表达式。 
我们可以看一下split方法的定义

Java代码 
  1. public  String[] split(String regex) {  
  2.       return  split(regex,  0 );  
  3. }  
[java] view plaincopy
  1. public String[] split(String regex) {  
  2.       return split(regex, 0);  
  3. }  


其实这个参数他们就是按正则表达式来对待的。(哎，我一直以为只能是字符呢 ) 

接着来看Scanner的表现。

引用

一个可以使用正则表达式来解析基本类型和字符串的简单文本扫描器 

 

Java代码 
  1. Scanner scanner =  new  Scanner(input);  
  2. scanner.useDelimiter("//s{1}" );  
  3. while (scanner.hasNext()){  
  4. ystem.out.println(scanner.next());  
  5. }  
[java] view plaincopy
  1. Scanner scanner = new Scanner(input);  
  2. scanner.useDelimiter("//s{1}");  
  3. while(scanner.hasNext()){  
  4. ystem.out.println(scanner.next());  
  5. }  


同样的，通过设置Delimiter(可以为正则表达式)，我们可以很轻松的拆分字符串 
输出结果为

Java代码 
  1.   This  
  2. is  
  3. just  
  4. a  
  5. test  
[java] view plaincopy
  1.   This  
  2. is  
  3. just  
  4. a  
  5. test  


另外，还可以使用Pattern类的split方法，我觉得这个和String的split方法差不多。（Pattern类主要不是用在拆分字符串，而是在正则表达式的应用那里）

Java代码 
  1. Pattern pattern = Pattern.compile( "//s{1}" );  
  2. str = pattern.split(input);  
  3. for ( int  i= 0 ;i<str.length;i++){  
  4. ystem.out.println(str[i]);  
  5. }  
[java] view plaincopy
  1. Pattern pattern = Pattern.compile("//s{1}");  
  2. str = pattern.split(input);  
  3. for(int i=0;i<str.length;i++){  
  4. ystem.out.println(str[i]);  
  5. }  


结果同样为

Java代码 
  1.   This  
  2. is  
  3. just  
  4. a  
  5. test  
[java] view plaincopy
  1.   This  
  2. is  
  3. just  
  4. a  
  5. test  



好了，现在已经知道的就有三种方式来代替StringTokenizer了，并且由于StringTokenizer只能做一些很简单的拆分，远不能适应现在的要求，所以，StringTokenizer，你可以放心的撤退了，远离历史舞台吧。 
其实sun也知道这个

sun 写道

<tt>StringTokenizer</tt> is a legacy class that is retained for 
* compatibility reasons although its use is discouraged in new code. It is 
* recommended that anyone seeking this functionality use the <tt>split</tt> 
* method of <tt>String</tt> or the java.util.regex package instead. 


ps:那个老帖子是04年的。也许那会还没有这么多的替代方法。 
不过5年过去了。StringTokenizer就不要再用了。

 

 

 

 

 

 

//////////////////////////////////////////////////////////////////////////////////////////////////////////////

dennis_zane 写道
kaka2008 写道
dennis_zane 写道
不知道你有没有考察过性能。。如果不需要正则，并且切分非常频繁的话,StringTokenizer快上很多。


没有考察过性能。 
有时间了，我测试一下。然后补充。 
不过不知道不需要正则的切分用处多不多。


很多的是，比如我过去干过的用StringTokenizer来切分memcached文本协议，就比用Pattern.split快多了。 



我简单的测试了下。的确是它最快。 
不知道我的测试结果科学不科学，请指教

 

 

 

 

 

 

////////////////////////////////////////////////////////////////////

 

Java代码 
  1.         public   static   void  main(String [] args){  
  2.     long  start = System.currentTimeMillis();  
  3.     for ( int  i= 0 ;i< 100000 ;i++){  
  4.         test1();  
  5.     }  
  6.     long  end = System.currentTimeMillis();  
  7.     System.out.println("StringTokenzier: " +(end-start));  
  8.       
  9.     start = System.currentTimeMillis();  
  10.     for ( int  i= 0 ;i< 100000 ;i++){  
  11.         test2();  
  12.     }  
  13.     end = System.currentTimeMillis();  
  14.     System.out.println("Scanner: " +(end-start));  
  15.       
  16.     start = System.currentTimeMillis();  
  17.     for ( int  i= 0 ;i< 100000 ;i++){  
  18.         test3();  
  19.     }  
  20.     end = System.currentTimeMillis();  
  21.     System.out.println("String: " +(end-start));  
  22.       
  23.     start = System.currentTimeMillis();  
  24.     for ( int  i= 0 ;i< 100000 ;i++){  
  25.         test4();  
  26.     }  
  27.     end = System.currentTimeMillis();  
  28.     System.out.println("Pattern: " +(end-start));  
  29. }  
  30.        //用StringTokenizer   
  31. public   static   void  test1(){  
  32.     String input = "This is 1 just a test" ;  
  33.     StringTokenizer st = new  StringTokenizer(input);  
  34.     while (st.hasMoreTokens()){  
  35.         String s = st.nextToken();  
  36.     }  
  37. }  
  38. //用Scanner的方法   
  39. public   static   void  test2(){  
  40.     String input = "This is 1 just a test" ;  
  41.     Scanner scanner = new  Scanner(input);  
  42.     scanner.useDelimiter(" " );  
  43.     while (scanner.hasNext()){  
  44.         String s = scanner.next();  
  45.     }  
  46. }  
  47. //用String的split方法   
  48. public   static   void  test3(){  
  49.     String input = "This is 1 just a test" ;  
  50.     String [] str = input.split(" " );  
  51.     for ( int  i= 0 ;i<str.length;i++){  
  52.         String s = str[i];  
  53.     }  
  54. }  
  55. //用Pattern的方法   
  56. public   static   void  test4(){  
  57.     Pattern pattern = Pattern.compile(" " );  
  58.     String input = "This is 1 just a test" ;  
  59.     String [] str = pattern.split(input);  
  60.     for ( int  i= 0 ;i<str.length;i++){  
  61.         String s = str[i];  
  62.     }  
  63. }  
[java] view plaincopy
  1.        public static void main(String [] args){  
  2.     long start = System.currentTimeMillis();  
  3.     for(int i=0;i<100000;i++){  
  4.         test1();  
  5.     }  
  6.     long end = System.currentTimeMillis();  
  7.     System.out.println("StringTokenzier: "+(end-start));  
  8.       
  9.     start = System.currentTimeMillis();  
  10.     for(int i=0;i<100000;i++){  
  11.         test2();  
  12.     }  
  13.     end = System.currentTimeMillis();  
  14.     System.out.println("Scanner: "+(end-start));  
  15.       
  16.     start = System.currentTimeMillis();  
  17.     for(int i=0;i<100000;i++){  
  18.         test3();  
  19.     }  
  20.     end = System.currentTimeMillis();  
  21.     System.out.println("String: "+(end-start));  
  22.       
  23.     start = System.currentTimeMillis();  
  24.     for(int i=0;i<100000;i++){  
  25.         test4();  
  26.     }  
  27.     end = System.currentTimeMillis();  
  28.     System.out.println("Pattern: "+(end-start));  
  29. }  
  30.        //用StringTokenizer  
  31. public static void test1(){  
  32.     String input = "This is 1 just a test";  
  33.     StringTokenizer st = new StringTokenizer(input);  
  34.     while(st.hasMoreTokens()){  
  35.         String s = st.nextToken();  
  36.     }  
  37. }  
  38. //用Scanner的方法  
  39. public static void test2(){  
  40.     String input = "This is 1 just a test";  
  41.     Scanner scanner = new Scanner(input);  
  42.     scanner.useDelimiter(" ");  
  43.     while(scanner.hasNext()){  
  44.         String s = scanner.next();  
  45.     }  
  46. }  
  47. //用String的split方法  
  48. public static void test3(){  
  49.     String input = "This is 1 just a test";  
  50.     String [] str = input.split(" ");  
  51.     for(int i=0;i<str.length;i++){  
  52.         String s = str[i];  
  53.     }  
  54. }  
  55. //用Pattern的方法  
  56. public static void test4(){  
  57.     Pattern pattern = Pattern.compile(" ");  
  58.     String input = "This is 1 just a test";  
  59.     String [] str = pattern.split(input);  
  60.     for(int i=0;i<str.length;i++){  
  61.         String s = str[i];  
  62.     }  
  63. }  


运行了五次。输出结果如下：

Java代码 
  1.  StringTokenzier:  110   
  2. Scanner: 3281   
  3. String: 453   
  4. Pattern: 438   
  5.   
  6. StringTokenzier: 109   
  7. Scanner: 3297   
  8. String: 453   
  9. Pattern: 438   
  10.   
  11. StringTokenzier: 110   
  12. Scanner: 3265   
  13. String: 485   
  14. Pattern: 437   
  15.   
  16. StringTokenzier: 109   
  17. Scanner: 3266   
  18. String: 469   
  19. Pattern: 437   
  20.   
  21. StringTokenzier: 109   
  22. Scanner: 3297   
  23. String: 469   
  24. Pattern: 422   
[java] view plaincopy
  1.  StringTokenzier: 110  
  2. Scanner: 3281  
  3. String: 453  
  4. Pattern: 438  
  5.   
  6. StringTokenzier: 109  
  7. Scanner: 3297  
  8. String: 453  
  9. Pattern: 438  
  10.   
  11. StringTokenzier: 110  
  12. Scanner: 3265  
  13. String: 485  
  14. Pattern: 437  
  15.   
  16. StringTokenzier: 109  
  17. Scanner: 3266  
  18. String: 469  
  19. Pattern: 437  
  20.   
  21. StringTokenzier: 109  
  22. Scanner: 3297  
  23. String: 469  
  24. Pattern: 422  


StringTokenizer最快 
Scanner最慢。 
String和Pattern速度差不多。Pattern稍快些。

 

 

 

 

 

 

 

 

 

 

 

 

////////////////////////////////////////////////////////////////

 

 

zhouxiang_fly 写道
额，弱弱的问一下，将Pattern改在外面是如何改的。。。


循环外面。 
只用一个Pattern 
然后当成参数传进去。这就是dennis_zane大哥说的缓存吧。

Java代码 
  1. public   static   void  test4(Pattern pattern){    
  2.     String input = "This is 1 just a test" ;    
  3.     String [] str = pattern.split(input);    
  4.     for ( int  i= 0 ;i<str.length;i++){    
  5.         String s = str[i];    
  6.     }    
  7. }  
  8. public   static   void  main(String [] args){   
  9.     Pattern pattern = Pattern.compile("//s{1}" );  
  10.     start = System.currentTimeMillis();    
  11.     for ( int  i= 0 ;i< 100000 ;i++){    
  12.         test4(pattern);    
  13.     }    
  14.     end = System.currentTimeMillis();    
  15.     System.out.println("Pattern: " +(end-start));   
  16. }  
[java] view plaincopy
  1. public static void test4(Pattern pattern){    
  2.     String input = "This is 1 just a test";    
  3.     String [] str = pattern.split(input);    
  4.     for(int i=0;i<str.length;i++){    
  5.         String s = str[i];    
  6.     }    
  7. }  
  8. public static void main(String [] args){   
  9.     Pattern pattern = Pattern.compile("//s{1}");  
  10.     start = System.currentTimeMillis();    
  11.     for(int i=0;i<100000;i++){    
  12.         test4(pattern);    
  13.     }    
  14.     end = System.currentTimeMillis();    
  15.     System.out.println("Pattern: "+(end-start));   
  16. }  


明白？

humaeks 写道
我没记错的话ST遇到"|" 作为字段分隔符会死。


刚试了下，确实是这样的。 
不知道为什么。有空了看下源代码


淘宝助手mac版 淘宝助手mac版
原创粉丝点击
热门IT博客
windows pci e 开发windows pci e 开发
sht20数据手册sht20数据手册
关于黑奴的电影知乎
海康网络摄像头默认ip
企业软件论坛
支持json编辑
怎么购买已备案域名
数据库开发师工资
兰州大学远程网络教育
人类进化史 很黄 知乎
汇成凯网络
橄榄油去黑头 知乎
强制刷机软件
网络用语米代表多钱
java重载构造函数格式
考研真相与黄皮书知乎
淘宝怎么修改类目属性
pe装ubuntu 16.04系统
造价师用什么软件
淘宝差评卖家能删除吗
热门问题 老师的惩罚 人脸识别 我在镇武司摸鱼那些年 重生之率土为王 我在大康的咸鱼生活 盘龙之生命进化 天生仙种 凡人之先天五行 春回大明朝 姑娘不必设防，我是瞎子 春日野结衣边做家事 家产 家产演员表 陈平继承家产 家产剧情介绍 搞笑一家人 家人作文 我们一家人 幸福一家人 那城这家人 温州两家人 幸福家人 家人英文 上海一家人 家人的英文 永远一家人 家人换日 山下一家人 家人 家人英语 家人去世 家人 英语 在家人 家人的英语 什么是家人 梦见家人 家人的拼音 家人图片 家人探望执勤战士 家人互换共乐晓红 那座城这家人 温州一家人全集 相亲相爱一家人 一家人相互日黄小梅 搞笑一家人韩剧 搞笑一家人韩国版国语全集 温州一家人全集免费观看 温州一家人全集观看 我们一家人作文500 那座城这家人演员表 两家人快乐的互换曰

程序博客网，程序员的互联网技术博客家园。csdn论坛精品 msdn技术资料都在这里