spark如何wordcount中文
来源:互联网 发布:用php编辑九九乘法表 编辑:程序博客网 时间:2024/05/16 07:47
典型的wordcount英文的例子
val conf = new SparkConf().setAppName("FirstApp").setMaster("local") val sc = new SparkContext(conf) val c = sc.textFile("hdfs://hadoop1:9000/input/sparkwc").flatMap(_.split(" ")).map((_, 1)).reduceByKey(_ + _).map(x => (x._2, x._1)).sortByKey(false).map(x => (x._2, x._1)).saveAsTextFile("hdfs://hadoop1:9000/out") sc.stop
那么问题来了,中文,这么wordcount。各种求。
0 0
- spark如何wordcount中文
- spark-wordcount
- Spark-wordcount
- wordcount spark...
- wordCount spark
- spark wordcount
- Spark WordCount
- spark wordcount
- Spark WordCount
- spark wordcount
- spark wordcount
- Spark 加强版WordCount ,统计日志中文件访问数量
- Spark下如何运行Java版本的WordCount
- Spark流处理(WordCount)
- spark入门之wordcount
- Spark入门-WordCount
- Spark之WordCount
- 007-spark的wordCount
- CF 547 B. Mike and Feet(并查集)
- Android内存泄露问题分析
- Matlab中常用的取整函数
- Android 5.1 彩蛋游戏分析
- HDU 2602 Bone Collector
- spark如何wordcount中文
- osg自定义操作器实现视图缩放
- 【单调队列】【cogs825】【RQNOJ 167】免费午餐
- 单例模式的最佳实现
- 创建此博客的缘由
- ios开发中常用的英文单词
- sqlAlchemy学习手册(二)简单教程①
- Leetcode33: Excel Sheet Column Title
- POJ 1953 World Cup Noise