分别采用匿名类和lambda来实现spark API的接口

SparkConf conf = new SparkConf().setAppName("SparkSample").setMaster("local[*]");JavaSparkContext sc = new JavaSparkContext(conf);SQLContext sqlContext = new SQLContext(sc);JavaRDD<String> lines = sc.textFile("D:\\eclipse_1\\sparkTest\\src\\main\\java\\source\\idWordsFile.txt");

JavaPairRDD<String, String> countss = lines.filter(x -> x!="")    .mapToPair(PairFunction<String,K2,V2>) 
    /* 对于这段话的意思是mapToPair 方法里面接受一个接口叫PairFunction方法,
                             这个PairFunction 接受三个参数，String,和K2,V2,对于K2和V2可以自己设定类型。     其中第一个String为输入类型，K2和V2为返回值的类型。     下面是两个分别用匿名类实现这个接口和用lambda实现这个方法的例子
    */

//用匿名类 实现该接口方法：JavaPairRDD<String,String> counts = lines.filter(x -> x!="").mapToPair(new PairFunction<String ,String,String>(){public Tuple2<String, String> call(String line) throws Exception {    String[] splited =  line.split(":");    return new Tuple2<String,String>(splited[0],splited[1]);   }});//用lambda实现该接口方法：JavaPairRDD<String, String> countss = lines.filter(x -> x!="") // 对于lambda ->前面的内容为接口方法的输入的参数， ->后面的内容为需要返回的内容    .mapToPair(w ->     {    String[] splited = w.split(":");    return new Tuple2<String,String>(splited[0],splited[1]);   });