spark伪分布式安装

spark的伪分布式简单安装

安装Scala并配置好scala_home和path后，只需在/etc/profile再添加以下内容即可：

export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop  export SPARK_MASTER=localhostexport SPARK_LOCAL_IP=localhostexport SPARK_LIBARY_PATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib:$HADOOP_HOME/lib/nativeexport YARN_CONF_DIR=$HADOOP_HOME/etc/hadoopexport PATH=$PATH:$SCALA_HOME/bin:$SPARK_HOME/bin

运行事例：

./bin/run-example org.apache.spark.examples.SparkPi 2 spark://192.168.220.300:7077