Spark 提交任务时 Invalid signature file digest 错误
来源:互联网 发布:詹姆斯17年总决赛数据 编辑:程序博客网 时间:2024/06/05 03:59
第一次用 spark-submit
提交任务,是 Scala 的程序,命令格式是
spark-submit --class <main-class> --master local[*] --name "My first Spark Job" spark-test-fat-1.0-SNAPSHOT.jar
结果报出错误
Exception in thread "main" java.lang.SecurityException: Invalid signature file digest for Manifest main attributes
at sun.security.util.SignatureFileVerifier.processImpl(SignatureFileVerifier.java:330)
at sun.security.util.SignatureFileVerifier.process(SignatureFileVerifier.java:263)
at java.util.jar.JarVerifier.processEntry(JarVerifier.java:318)
......
at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:119)
at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)
Google 查了下,是需要把 jar 文件中的 META-INF/*.RSA META-INF/*.DSA META-INF/*.SF
文件清理掉。我们可以执行如下命令从现有的 jar 中除去
zip -d <jar file name>.jar META-INF/*.RSA META-INF/*.DSA META-INF/*.SF
是因为 jar 包中包含有这些文件才造成提交 Spark 时验证文件签名摘要时失败。 阅读全文 >>
- Spark 提交任务时 Invalid signature file digest 错误
- Spark 提交任务时,报: Invalid signature file digest for Manifest main attributes
- Spark 提交任务时,报: Invalid signature file digest for Manifest main attributes
- Spark 提交任务时,报: Invalid signature file digest for Manifest main attributes
- Spark 提交任务时,报: Invalid signature file digest for Manifest main attributes
- spark<SecurityException: Invalid signature file digest for Manifest main attributes>
- Spark Q&A : Invalid signature file digest for Manifest main attributes
- 遇到了 Invalid signature file digest for Manifest main attributes错误怎么办
- Invalid signature file digest for manifest main attributes
- Invalid signature file digest for Manifest main attributes
- Invalid signature file digest for Manifest main attributes
- java.lang.SecurityException: Invalid signature file digest for...
- JBOSS每次启动第一次运行页面 invalid SHA1 signature file digest for javax/mail/internet/AsciiOutputStream
- java.lang.SecurityException: Invalid signature file digest for Manifest main attributes
- Maven打成jar包运行,“Invalid signature file digest for Manifest main attributes”
- java.lang.SecurityException: Invalid signature file digest for Manifest main attributes
- Intellij打包jar文件,“java.lang.SecurityException: Invalid signature file digest for Manifest main attrib
- 如何解决java.lang.SecurityException: Invalid signature file digest for Manifest main attributes
- bzoj2631 tree(路径权值的加乘操作)
- 内存四区模型与指针
- 11月25日学习笔记__filter 和 sorted
- 链接
- 动态规划之最长公共子序列
- Spark 提交任务时 Invalid signature file digest 错误
- IIS 部署 FTP 文件共享
- myBatis 中查询多表数据时使用association处理一对一关联
- Docker 登录远程仓库Harbor https 问题
- 面试题整理--开发中实现spring的事务有5种方式
- 浏览器上传图片的方法
- mysql 数据库服务器忘记了密码,以及中文乱码的解决方案
- Redis之高级特性
- palsquare