Scala 如何排除META-INF/*.RSA''；META-INF/*.SF''；META-INF/*.DSA'；在sbt中

我已经从Intellij for spark+scala代码中创建了jar，并尝试在开发集群中运行jar，但最终出现以下错误：

Exception in thread "main" java.lang.SecurityException: Invalid signature file digest for Manifest main attributes
        at sun.security.util.SignatureFileVerifier.processImpl(SignatureFileVerifier.java:286)
        at sun.security.util.SignatureFileVerifier.process(SignatureFileVerifier.java:239)
        at java.util.jar.JarVerifier.processEntry(JarVerifier.java:317)
        at java.util.jar.JarVerifier.update(JarVerifier.java:228)
        at java.util.jar.JarFile.initializeVerifier(JarFile.java:348)
        at java.util.jar.JarFile.getInputStream(JarFile.java:415)
        at sun.misc.JarIndex.getJarIndex(JarIndex.java:137)
        at sun.misc.URLClassPath$JarLoader$1.run(URLClassPath.java:674)
        at sun.misc.URLClassPath$JarLoader$1.run(URLClassPath.java:666)
        at java.security.AccessController.doPrivileged(Native Method)
        at sun.misc.URLClassPath$JarLoader.ensureOpen(URLClassPath.java:665)
        at sun.misc.URLClassPath$JarLoader.<init>(URLClassPath.java:638)
        at sun.misc.URLClassPath$3.run(URLClassPath.java:366)
        at sun.misc.URLClassPath$3.run(URLClassPath.java:356)
        at java.security.AccessController.doPrivileged(Native Method)
        at sun.misc.URLClassPath.getLoader(URLClassPath.java:355)
        at sun.misc.URLClassPath.getLoader(URLClassPath.java:332)
        at sun.misc.URLClassPath.getResource(URLClassPath.java:198)
        at java.net.URLClassLoader$1.run(URLClassLoader.java:358)
        at java.net.URLClassLoader$1.run(URLClassLoader.java:355)
        at java.security.AccessController.doPrivileged(Native Method)
        at java.net.URLClassLoader.findClass(URLClassLoader.java:354)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:425)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:358)
        at java.lang.Class.forName0(Native Method)
        at java.lang.Class.forName(Class.java:270)
        at org.apache.spark.util.Utils$.classForName(Utils.scala:174)
        at org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:689)
        at org.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:181)
        at org.apache.spark.deploy.SparkSubmit$.submit(SparkSubmit.scala:206)
        at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:121)
        at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)
    enter code here

线程“main”java.lang.SecurityException中的异常：清单主属性的签名文件摘要无效 在sun.security.util.SignatureFile杠杆器.processImpl（SignatureFile杠杆器.java:286） 在sun.security.util.SignatureFileForever.process（SignatureFileForever.java:239）上 位于java.util.jar.JarVerifier.processEntry（JarVerifier.java:317） 位于java.util.jar.JarVerifier.update（JarVerifier.java:228） 位于java.util.jar.JarFile.initializeVerifier（JarFile.java:348） 位于java.util.jar.JarFile.getInputStream（JarFile.java:415） 位于sun.misc.JarIndex.getJarIndex（JarIndex.java:137） 位于sun.misc.URLClassPath$JarLoader$1.run（URLClassPath.java:674） 位于sun.misc.URLClassPath$JarLoader$1.run（URLClassPath.java:666） 位于java.security.AccessController.doPrivileged（本机方法） 在sun.misc.URLClassPath$JarLoader.ensureOpen（URLClassPath.java:665） 位于sun.misc.URLClassPath$JarLoader。（URLClassPath.java:638） 位于sun.misc.URLClassPath$3.run（URLClassPath.java:366） 位于sun.misc.URLClassPath$3.run（URLClassPath.java:356） 位于java.security.AccessController.doPrivileged（本机方法） 位于sun.misc.URLClassPath.getLoader（URLClassPath.java:355） 位于sun.misc.URLClassPath.getLoader（URLClassPath.java:332） 位于sun.misc.URLClassPath.getResource（URLClassPath.java:198） 在java.net.URLClassLoader$1.run（URLClassLoader.java:358） 在java.net.URLClassLoader$1.run（URLClassLoader.java:355） 位于java.security.AccessController.doPrivileged（本机方法） 位于java.net.URLClassLoader.findClass（URLClassLoader.java:354） 位于java.lang.ClassLoader.loadClass（ClassLoader.java:425） 位于java.lang.ClassLoader.loadClass（ClassLoader.java:358） 位于java.lang.Class.forName0（本机方法） 位于java.lang.Class.forName（Class.java:270） 位于org.apache.spark.util.Utils$.classForName（Utils.scala:174） 位于org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain（SparkSubmit.scala:689） 位于org.apache.spark.deploy.SparkSubmit$.doRunMain$1（SparkSubmit.scala:181） 位于org.apache.spark.deploy.SparkSubmit$.submit（SparkSubmit.scala:206） 位于org.apache.spark.deploy.SparkSubmit$.main（SparkSubmit.scala:121） 位于org.apache.spark.deploy.SparkSubmit.main（SparkSubmit.scala） 在这里输入代码 您能建议如何排除META-INF的详细信息吗

---

谢谢。

您需要添加一个

maven shade

插件，并使用

excludes

如下所示：

 <plugin>
    <groupId>org.apache.maven.plugins</groupId>
    <artifactId>maven-shade-plugin</artifactId>
           ..
          <filters>
            <filter>
              <artifact>*:*</artifact>
              <excludes>
                <exclude>META-INF/*.SF</exclude>
                <exclude>META-INF/*.DSA</exclude>
                <exclude>META-INF/*.RSA</exclude>
              </excludes>
            </filter>
          </filters>

org.apache.maven.plugins
maven阴影插件
..
*:*
META-INF/*.SF
META-INF/*.DSA
META-INF/*.RSA

这将删除已签名的文件并解决您的问题