程序博客网 > 曼彻斯特大学知乎

Spark实现WordCount单词计数

来源：互联网发布：曼彻斯特大学知乎编辑：程序博客网时间：2024/05/01 19:21

spark连接到master：

这里写图片描述

bin/spark-shell –master spark://master:7077

这里写图片描述

连接成功。

这里写图片描述

scala>sc.textFile(“hdfs://master:9000/root/data/input/data.txt”).flatMap(.split(” “)).map((,1)).reduceByKey(+).collect

刷新 http://192.168.222.100:8080/ 网页
可以看到有一个应用启动：

这里写图片描述

阅读全文

0 0

曼彻斯特大学知乎

曼彻斯特大学知乎

原创粉丝点击

热门问题 老师的惩罚人脸识别我在镇武司摸鱼那些年重生之率土为王我在大康的咸鱼生活盘龙之生命进化天生仙种凡人之先天五行春回大明朝姑娘不必设防，我是瞎子迟姝颜农女姝色枝儿星云逐月武亦姝被清华录取武亦姝军训心得原文姝是什么意思姝的意思名姝第三季第一姝姝什么意思有姝贵女其姝农女姝色陶枝儿免费阅读诗词大会武亦姝新农村伯伯下乡姝玩整版姝字取名洋气女孩名字姝配什么字起名姝配哪个字好听女孩姝字配什么字好听我的妹姝作文200字我的妹姝作文400字我的妹姝作文300字婚嫁姝祉将军夫人生存手册姝祉再嫁小夫郎 sj姣儿农家.小厨.神医 sj姣儿姣妇姣妇贡茶月初姣姣姣姣姣姣媚生香月初姣姣名门暖婚姣姣如卿作品月初姣姣名门隐婚月初姣姣的作品月初姣姣新书演技派姣姣如卿古穿的姣姣到六零年代太子妃璃儿沈姣姣康熙太子妃沈姣姣名门暖婚权少盛宠妻月初姣姣姣美