spark + sbt-assembly: «дедупликация: в следующих файлах содержится другое содержимое файла»
Я запустил приложение spark и хочу упаковать тестовые классы в толстую банку. Что странно, я успешно запустил «сборку sbt», но потерпел неудачу, когда запустил «тест sbt: сборка».
Я старалсяsbt-сборка: включая тестовые классы, это не сработало для моего случая.
Версия SBT:, 0.13.8
build.sbt:
import sbtassembly.AssemblyPlugin._
name := "assembly-test"
version := "1.0"
scalaVersion := "2.10.5"
libraryDependencies ++= Seq(
("org.apache.spark" % "spark-core_2.10" % "1.3.1" % Provided)
.exclude("org.mortbay.jetty", "servlet-api").
exclude("commons-beanutils", "commons-beanutils-core").
exclude("commons-collections", "commons-collections").
exclude("commons-logging", "commons-logging").
exclude("com.esotericsoftware.minlog", "minlog").exclude("com.codahale.metrics", "metrics-core"),
"org.json4s" % "json4s-jackson_2.10" % "3.2.10" % Provided,
"com.google.inject" % "guice" % "4.0"
)
Project.inConfig(Test)(assemblySettings)