Spark集成 hadoop,hbase 的 maven冲突
来源:互联网 发布:监控系统怎么连接网络 编辑:程序博客网 时间:2024/06/06 04:10
Spark和Hadoop、HBase集成,使用Maven管理依赖的时候需要考虑包的兼容性:
报错:java.lang.SecurityException: class "javax.servlet.FilterRegistration"'s signer information does notmatch signer information of other classes in the same package
三个依赖有冲突:
spark-core: org.eclipse.jetty.orbit:javax.servlet
hbase-server:org.mortbay.jetty:servlet-api-2.5
hadoop-client:javax.servlet:servlet-api
解决方案:
直接在maven的pom.xml文件中使用exclusions元素将冲突包进行去除
直接在hadoop-client和hbase-server中进行去除就可以了
注意:不要把org.eclipse.jetty.orbit:javax.servlet这个依赖去除了
<dependency>
<groupId>org.apache.hbase</groupId>
<artifactId>hbase-server</artifactId>
<version>${hbase.version}</version>
<exclusions>
<exclusion>
<artifactId>servlet-api-2.5</artifactId>
<groupId>org.mortbay.jetty</groupId>
</exclusion>
</exclusions>
</dependency>
- Spark集成 hadoop,hbase 的 maven冲突
- windows 环境下hadoop+spark+maven集成
- Spark,Hbase和Hadoop之间的关系
- hadoop集成hbase遇到的错误
- Hbase集成到Hadoop的一些注意事项
- maven hadoop hbase 依赖
- Hbase与Hadoop结合出现的jar包冲突问题
- hadoop spark环境搭建及idea scala maven集成开发spark任务
- Hadoop+Hbase+Spark整合部署
- Hadoop and Hbase and Spark
- Hadoop+hbase+zookeeper+spark+sqoop
- hadoop spark hbase 单机安装
- Hadoop、Spark、HBase与Redis的适用性讨论
- Hadoop、Spark、HBase与Redis的适用性讨论
- Hadoop、Spark、HBase与Redis的适用性讨论(全文)
- Hadoop、Spark、HBase与Redis的适用性讨论(全文)
- Hadoop、Spark、HBase与Redis的适用性讨论
- Hadoop、Spark、HBase与Redis的适用性讨论(全文)
- servlet生命周期
- 【JSON学习】--简介
- Zookeeper实例Curator API-TestingCluster
- windows运行 HiveContext 报错
- spark-SQL的DataFrame和DataSet
- Spark集成 hadoop,hbase 的 maven冲突
- 三大机器翻译技术的high-level概述:Neural, Rule-Based and Phrase-Based Machine Translation
- 代理模式-以房屋中介说明
- ios tabar icon 图片渲染模式
- JavaSE 反射机制
- FAST特征点检测算法
- SSD 安装日志
- Spark任务卡死
- ext文件系统机制