本地开发spark代码上传spark集群服务并运行

来源:互联网 发布:软件质量保证什么阶段 编辑:程序博客网 时间:2024/06/07 22:24

打包 :右击、export、Java 、jar File 

把TestSpark.jar包上传到spark集群服务器的 spark_home下的myApp下:

提交spark任务:

  1. cd /usr/local/spark/spark-2.1.1-bin-hadoop2.7
  2. bin/spark-submit --class "ClusterWordCount" --master local[4] myApp/TestSpark.jar​
原创粉丝点击