Как построить Uber JAR (FAT JAR) с использованием SBT в IntelliJ IDEA?

Наконец, я полностью пропускаю использование IntelliJ IDEA, чтобы избежать генерации шума в моем глобальном понимании 🙂

Я начал читать официальный учебник SBT .

Я создал свой проект со следующей файловой структурой:

 my-project/project/assembly.sbt my-project/src/main/scala/myPackage/MyMainObject.scala my-project/build.sbt 

Добавлен плагин sbt-assembly в файле assembly.sbt . Позвольте мне построить толстый JAR:

 addSbtPlugin("com.eed3si9n" % "sbt-assembly" % "0.12.0") 

Мой минимальный build.sbt выглядит так:

 lazy val root = (project in file(".")). settings( name := "my-project", version := "1.0", scalaVersion := "2.11.4", mainClass in Compile := Some("myPackage.MyMainObject") ) libraryDependencies ++= Seq( "org.apache.spark" %% "spark-core" % "1.2.0" % "provided", "org.apache.spark" %% "spark-streaming" % "1.2.0" % "provided", "org.apache.spark" % "spark-streaming-twitter_2.10" % "1.2.0" ) // META-INF discarding mergeStrategy in assembly <<= (mergeStrategy in assembly) { (old) => { case PathList("META-INF", xs @ _*) => MergeStrategy.discard case x => MergeStrategy.first } } 

Примечание . % "provided" означает не включать зависимость в конечной толчке JAR (эти библиотеки уже включены в мои работники)

Примечание : META-INF отбрасывается воодушевлением этого answser .

Примечание : значение % и %%

Теперь я могу построить свой полный JAR с помощью SBT ( как его установить ), выполнив следующую команду в корневой папке / my-project :

 sbt assembly 

Мой толстый JAR теперь находится в новой сгенерированной / целевой папке:

 /my-project/target/scala-2.11/my-project-assembly-1.0.jar 

Надеюсь, что это помогает кому-то другому.

Для тех, кто хочет внедрить SBT в IntelliJ IDE: как запускать задачи сборки sbt из IntelliJ IDEA?

3 Шаг процесса для создания Uber JAR / Fat JAR в IntelliJ Идея:

Uber JAR / FAT JAR : JAR-файл, имеющий все внешние зависимости между библиотеками.

1. Добавление плагина сборки SBT в IntelliJ Idea

   

   Перейдите в ProjectName / project / target / plugins.sbt файл и добавьте эту строку addSbtPlugin("com.eed3si9n" % "sbt-assembly" % "0.12.0")

2. Добавление слияния, удаления и не добавления страtagsи в build.sbt

   

   Перейдите в файл ProjectName / build.sbt и добавьте Страtagsю упаковки Uber JAR

   Страtagsя слияния: если есть конфликт в двух пакетах о версии библиотеки, то какой из них нужно упаковать в Uber JAR.
   Страtagsя удаления : удалить некоторые файлы из библиотеки, которые вы не хотите упаковывать в Uber JAR.
   Не добавлять страtagsю: не добавляйте пакет в Uber JAR.
   Например: spark-core будет уже присутствовать на вашем Spark Cluster. Поэтому мы не должны упаковывать это в Uber JAR

   Страtagsя объединения и отказ от страtagsи. Основной код:

   assemblyMergeStrategy in assembly := { case PathList("META-INF", xs @ _*) => MergeStrategy.discard case x => MergeStrategy.first }

   Поэтому вы просите отменить файлы META-INF, используя эту команду MergeStrategy.discard и для остальной части файлов, которые вы берете первое вхождение файла библиотеки, если есть конфликт, используя эту команду MergeStrategy.first .

   Не добавлять страtagsческий код:

   libraryDependencies += "org.apache.spark" %% "spark-core" % "1.4.1" %"provided"

   Если мы не хотим добавлять искровое kernel ​​в наш Uber-файл JAR, так как он уже находится на нашем clutser, мы добавляем % "provided" в конце его зависимости от библиотеки.

3. Создание Uber JAR со всеми его зависимостями

   

   В терминальном типе sbt assembly для сборки пакета

Вуаля !!! Uber JAR построен. JAR будет в ProjectName / target / scala-XX

Добавьте в проект следующую строку / plugins.sbt

 addSbtPlugin("com.eed3si9n" % "sbt-assembly" % "0.12.0") 

Добавьте в свой файл build.sbt следующее:

 mainClass in assembly := some("package.MainClass") assemblyJarName := "desired_jar_name_after_assembly.jar" val meta = """META.INF(.)*""".r assemblyMergeStrategy in assembly := { case PathList("javax", "servlet", xs @ _*) => MergeStrategy.first case PathList(ps @ _*) if ps.last endsWith ".html" => MergeStrategy.first case n if n.startsWith("reference.conf") => MergeStrategy.concat case n if n.endsWith(".conf") => MergeStrategy.concat case meta(_) => MergeStrategy.discard case x => MergeStrategy.first } 

Страtagsя слияния Ассамблеи используется для разрешения конфликтов, возникающих при создании толстой банки.