Spark开发环境搭建之使用Scala和maven的pom文件
来源:互联网 发布:iphone6s 切换2g网络 编辑:程序博客网 时间:2024/05/29 17:23
原文:http://www.xiaofateng.com/?p=1017
一般使用的是sbt和scala或者 maven和java搭建。
对于喜欢使用Scala和maven的同学,本文给出了pom文件。
<?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd"> <modelVersion>4.0.0</modelVersion> <groupId>org.baidu.wenxue</groupId> <artifactId>sparkdemo</artifactId> <version>1.0-SNAPSHOT</version> <properties> <!--编译时候 java版本 <maven.compiler.source>1.7</maven.compiler.source> <maven.compiler.target>1.7</maven.compiler.target> --> <encoding>UTF-8</encoding> <scala.tools.version>2.10</scala.tools.version> <!-- Put the Scala version of the cluster --> <scala.version>2.10.3</scala.version> </properties> <dependencies> <dependency> <!-- Spark dependency --> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.10</artifactId> <version>1.2.0</version> <scope>provided</scope> </dependency> <dependency> <groupId>org.scala-lang</groupId> <artifactId>scala-library</artifactId> <version>2.10.3</version> </dependency> </dependencies> <build> <pluginManagement> <plugins> <plugin> <!--用来编译scala的--> <groupId>net.alchim31.maven</groupId> <artifactId> scala-maven-plugin</artifactId> <version>3.1.5</version> </plugin> </plugins> </pluginManagement> <plugins> <plugin> <groupId>net.alchim31.maven</groupId> <artifactId>scala-maven-plugin</artifactId> <executions> <execution> <id>scala-compile-first</id> <phase>process-resources</phase> <goals> <goal>add-source</goal> <goal>compile</goal> </goals> </execution> <execution> <id>scala-test-compile</id> <phase> process-test-resources</phase> <goals> <goal>testCompile</goal> </goals> </execution> </executions> </plugin> </plugins> </build> </project>
0 0
- Spark开发环境搭建之使用Scala和maven的pom文件
- Intellij IDEA使用Maven搭建spark开发环境(scala)
- spark 之 Scala 环境搭建,开发工具使用
- 开发spark使用的pom文件
- ideal+maven+scala配置spark的pom.xml文件内容,直接写spark代码
- 使用IDEA构建Spark Scala开发环境(支持maven)
- maven环境下使用java、scala混合开发spark应用
- scala spark maven pom.xml2
- 搭建eclipse+maven+scala-ide的scala web开发环境
- Eclipse+maven+scala+spark环境搭建
- Eclipse+maven+scala+spark环境搭建
- eclipse + maven + scala+spark环境搭建
- 分别用Eclipse和IDEA搭建Scala+Spark开发环境
- Scala IDE 搭建Spark 2开发环境和运行例子
- hadoop spark环境搭建及idea scala maven集成开发spark任务
- [1.0.2] 详解基于maven管理-scala开发的spark项目开发环境的搭建与测试
- 基于linux的spark与scala开发环境搭建
- 0070 IntelliJ IDEA+Scala+Hadoop +Spark的开发环境搭建
- Oracle权限管理
- MySQL集群搭建详解
- centos 6.5 安装docker
- 用正则表达式来判断是否有需要的字符串
- 监听android home键的实现方式
- Spark开发环境搭建之使用Scala和maven的pom文件
- 初识DE2-115开发板
- keil c51 printf 重定向
- Error:Cause: org/gradle/api/publication/maven/internal/DefaultMavenFactory
- Oracle用户管理
- 网络加载框架Retrofit使用介绍和实例展示
- Origin作图出现锯齿状以及出现大C字母问题解决方案
- Win32下UCOSII创建多任务
- VisualSVN搭建svn代码服务器