sbt包和程序集包含我不想要的jars
，这个问题涉及到构建工具和依赖管理的方面。
首先，sbt（Simple Build Tool）是一种基于Scala语言的构建工具，用于构建和管理Scala项目。它使用sbt构建定义文件（build.sbt）来管理项目的依赖关系和构建过程。
在sbt中，程序集（assembly）是指将项目的所有依赖项打包成一个可执行的JAR文件或者一个包含所有依赖项的目录。程序集的生成可以通过sbt的插件来实现，例如sbt-assembly插件。
如果程序集包含了不想要的JAR文件，可以通过以下几种方式解决：
- 排除依赖项：在build.sbt文件中，可以使用exclude或者excludeAll方法来排除特定的依赖项。例如，如果想要排除名为"unwanted-jar"的JAR文件，可以在build.sbt中添加如下配置：
libraryDependencies += "group" % "artifact" % "version" exclude("unwanted-group", "unwanted-jar")这样就会排除掉该JAR文件。
- 调整依赖项版本：有时候不想要的JAR文件是由于与其他依赖项的版本冲突导致的。可以尝试调整依赖项的版本，以解决冲突问题。
- 清理无用依赖项：可以使用sbt的clean命令清理项目中的无用依赖项。运行以下命令：
sbt clean这将删除项目中未使用的依赖项。
- 手动删除不需要的JAR文件：如果以上方法都无法解决问题，可以手动删除不需要的JAR文件。在程序集生成后，通过删除不需要的JAR文件来达到目的。
需要注意的是，以上方法都是基于sbt构建工具的解决方案。对于其他编程语言和构建工具，可能会有不同的解决方法。
对于腾讯云相关产品，推荐使用腾讯云的云原生应用平台TKE（Tencent Kubernetes Engine），它提供了强大的容器化和微服务支持，可以帮助开发者更好地管理和部署应用程序。TKE可以与sbt等构建工具结合使用，实现自动化构建和部署。更多关于TKE的信息可以参考腾讯云官方文档：Tencent Kubernetes Engine (TKE)
希望以上回答能够满足您的需求，如果还有其他问题，请随时提问。
相关·内容
1回答
我有这样的sbt.build，来做火花编程：
libraryDependencies ++= Seq(
"org.apache.spark" %% "spark-core" % "3.0.1" withSources(),
"com.datastax.spark" %% "spark-cassandra-connector" % "3.0.0" withSources()
...
)
由于我的程序使用的是Spark本身以外的其他库，所以我必须使用sbt assembly来生成一个uber
浏览 10提问于2020-12-13得票数 2
回答已采纳
我的build.sbt文件有以下内容：
scalaVersion := "2.10.3"
libraryDependencies += "com.databricks" % "spark-csv_2.10" % "1.1.0"
我在独立集群模式下运行Spark，我的SparkConf是SparkConf().setMaster("spark://ec2-[ip].compute-1.amazonaws.com:7077").setAppName("Simple Application") (我不使用
浏览 5提问于2015-07-23得票数 6
2回答
SBT组件jar排除
、、、
我使用星星之火(在java中)，并且需要一个可以推送到集群中的jar，但是jar本身不应该包含spark。当然，部署工作的应用程序应该包括星星之火。
我想：
sbt运行-所有的东西都应该编译和执行。
sbt smallAssembly -创建一个没有火花的jar
sbt程序集-为了便于部署，创建一个包含所有东西(包括火花)的uber jar。
我有1，3，工作。对我如何才能做到这一点有什么想法？我需要在我的build.sbt文件中添加什么代码？
这个问题不仅与激发有关，而且与我可能希望排除的任何其他依赖有关。
浏览 3提问于2013-11-21得票数 14
回答已采纳
我无法使我的Play Framework项目正常运行。我想使用postgresql数据库和ebean，但是配置有问题，并且我一直收到编译错误。你能看看是什么原因吗？
我的build.sbt文件：
import play.sbt.PlayJava
name := """play-java-intro"""
version := "1.0-SNAPSHOT"
lazy val root = (project in file(".")).enablePlugins(PlayJava)
scalaVersion :
浏览 4提问于2017-04-10得票数 0
1回答
如何创建模块化的java项目？
、、、、
我必须创建一个java项目，其中的结构将类似于下面的图像：
也就是说，该项目将有一个主要包含框架的公用文件夹。然后，将有不同的模块依赖于公共框架，并将有自己的框架。如何使用maven/sbt设置这种依赖关系？该项目的结构应使：
如果需要的话，可以将框架作为jar发送到完全不同的项目，每个模块可以单独作为jar发送。整个项目可以作为jar提供
我要寻找的是如何在每个级别上拥有不同的头/构建/ and，并链接它们的依赖项？
你能提出解决办法吗？
浏览 1提问于2020-05-01得票数 0
我有一个项目的主要目的是提供一个算法的集合给客户。但是，它对这些算法的HTTP接口进行了二次处理。因为我不想让我的客户机继承HTTP库(unfiltered和dispatch)，所以在sbt中将它们的作用域设置为provided。如何设置我的项目，使得当我sbt assembly时，这些依赖项(以及日志记录实现)被编译，而当我sbt package或sbt publish时，它们不被编译？
浏览 0提问于2013-10-29得票数 1
4回答
我正在安装Sbt-程序集，但现在卡住了。
Sbt Version (from 'sbt about'): 0.13.8
Current project is built against scala 2.11.6
Sbt, sbt plugins, and build definitions are using Scala 2.10.4
项目/组装.
addSbtPlugin("com.eed3si9n" % "sbt-assembly" % "0.14.0")
resolvers += Resolver.url(
浏览 16提问于2015-09-22得票数 14
回答已采纳
1回答
我在sbt程序集中遇到了重覆错误，试图打包我的多项目火花作业。我查看了sbt程序集文档，上面写着
如果您试图排除已经是容器一部分的JAR文件(如Spark)，请考虑将依赖库的作用范围限定为“提供”配置：
但是他们所说的“已经是容器的一部分”是什么意思呢？我已经复制了下面的完整链接。
浏览 0提问于2019-03-17得票数 3
回答已采纳
我想使用构建的sbt来使用lift-json解析器。我的built.sbt文件有以下内容：
name := "MyProject"
version := "1.0"
scalaVersion := "2.10.0"
// https://mvnrepository.com/artifact/net.liftweb/lift-json_2.10
libraryDependencies += "net.liftweb" % "lift-json_2.10" % "3.0-M1"
val lift_j
浏览 4提问于2016-11-23得票数 0
回答已采纳
1回答
是否有一种方法可以在一个jar中下载并打包sbt中提供的所有依赖项，以便在启动应用程序时添加到应用程序的类路径中？
我正在使用sbt-程序集，但是生成的jar对于我的口味来说太大了: 16 Mb，包括Scala、Akka和喷雾。我计划构建大约10-15个小型独立服务，每个服务都是一个jar，而且每当我创建一个新版本部署时，我都不想继续将16个Mb文件上传到s3 (目前是我的回购)。
当我将Scala语言和上面提到的其他jar排除在外时，我的程序集jar降到了大约1MB。因此，我想要实现的是有一种方法来提供一个只有提供的依赖项和scala语言的胖jar，这样我可以在启动服务时将其添加到服务的类路
浏览 4提问于2013-04-06得票数 3
回答已采纳
1回答
我正在开发一个火花应用程序。为了在本地测试它，我想运行sbt运行。这要求依赖项在本地可用。但是我也想使用sbt assembly来生成一个jar，它可以用于spark-submit，jar应该只包含一些依赖项，例如，不包括火花依赖项。
当我将build.sbt中的依赖项标记为% "provided"时，它将不再通过sbt run提供。
浏览 1提问于2016-11-24得票数 2
回答已采纳
1回答
我已经创建了一个蔚蓝的hdinsight火花集群，我正在尝试在头节点上安装Server。我已经进入了头节点，下面是我要遵循的步骤
其HDI 3.5与火花1.6.3
安装SBT：
回显"deb /“区-a /etc/apt/ sudo .list.d/sbt.list
sudo apt-key adv --密钥服务器hkp://keyserver.ubuntu.com:80 --recv 2EE0EA64A89B84B2DF734E82A75642AC823
sudo apt-get update
sudo apt-获取安装sbt
git克隆
大师是星火1.6.
浏览 0提问于2017-04-01得票数 0
1回答
我先后将一个用Ant构建的Java项目转换为一个Maven项目。依赖性解析、编译和打包工作得很好。不过，我有个问题：
我只创建了一个包含应用程序和所有依赖项的胖jar。项目规范要求我
jar文件包含应用程序 jar文件包含来自供应商的依赖项A jar文件包含所有其他依赖项
我的问题是:用Maven可以很容易地做到这一点吗?还是它违反了Maven哲学？我想要创建一个程序集描述符，尽管我还不确定如何准确地完成它。
对此的评论和想法将受到高度赞赏。
浏览 4提问于2011-03-09得票数 0
在没有SBT或另一个构建工具的情况下，如何手动维护依赖关系并运行Scala应用程序？
运行scala app.scala会导致查找任何导入和依赖项时出错。
对于每个具有依赖关系的项目，这是可能的还是SBT (或表亲)的要求？
浏览 1提问于2018-05-27得票数 0
回答已采纳
1回答
我使用的是sbt v0.13.9和Scalav2.11.7。我尝试过将sbt程序集插件添加到assembly.sbt和plugin.sbt中，但都没有效果：
addSbtPlugin("com.eed3si9n" % "sbt-assembly" % "0.14.2")
我尝试将sbt本机包程序添加到plugin.sbt中，但我得到了相同的错误(复制如下)：
addSbtPlugin("com.typesafe.sbt" % "sbt-native-packager" % "1.1.0-RC1"
我
浏览 9提问于2016-03-14得票数 2
回答已采纳
1回答
在运行"sbt :packageBin“命令时，fakeroot程序失败，因为它试图查找/target dir中的fat jar (程序集)，而不是/target/scala-2.11/目录。
那么，是否有一个设置来指定使用sbt插件进行debian打包的源目录？
SBT版本: 0.13.11添加在plugins.sbt: addSbtPlugin("com.typesafe.sbt“%”sbt-本机-包“% "1.3.4")
在build.sbt中，添加了以下内容:惰性val =(文件中的项目(“.”))。enablePlugins(DebianPlugin)
浏览 0提问于2018-05-15得票数 0
回答已采纳
1回答
我见过这个问题的近似变体，但没有包含所有有用信息的答案。
使用SBT0.13.13和SBT-Assembon0.14.3，以及基于build.sbt的多项目，如下所示：
lazy val commonSettings = Seq(
version := "2.3.0",
scalaVersion := "2.10.6"
)
lazy val config_jar = (project in file(".")).
settings(commonSettings: _*).
settings(
name := "m
浏览 0提问于2017-02-10得票数 3
回答已采纳
1回答
当我逃离sbt的时候
(sbt运行)
我的akka http服务运行良好，但是在使用jar运行时会出现以下错误
(java -jar myservice.jar)
由publishLocal创建
(sbt publishLocal)
Exception in thread "main" java.lang.NoClassDefFoundError: org/slf4j/LoggerFactory
at com.rogers.profileauthn.StartProfileAuthService.<clinit>(StartProfi
浏览 1提问于2018-04-13得票数 2
回答已采纳
1回答
我有这个疯狂的想法很长一段时间了，所以最终决定问。有没有一些项目可以将包直接集成到构建过程中，而不需要显式地做额外的工作来包括osgi容器和添加包等。所以基本的想法是在你的build.sbt或pom.xml中，你只需像往常一样指定你的依赖，而不是获取jars，sbt或mvn为你的依赖获取包(如果有)。在构建项目时，您选择的容器将被下载，捆绑包(和jars)将自动添加到其中？就像童话故事一样。
编辑:在最后一部分中，我指的是像felix gogo一样的东西，它将创建一个脚本，用于添加包来运行容器。虽然这要求太高了，但是在构建之后，我只需要运行一个脚本，我的整个项目就可以在一个没有jar地狱的os
浏览 1提问于2013-05-23得票数 2
1回答
我试图在sbt本机包程序中使用sbt插件，并遇到一个问题，即指向aspectj加载时间编织器jar的关联-javaagent路径引用的是常春藤缓存位置，而不是打包的内容。
也就是说，在运行sbt stage之后，通过bash -x target/universal/stage/bin/myapp/执行阶段性应用程序将在此javaagent中得到结果：
exec java -javaagent:/home/myuser/.ivy2/cache/org.aspectj/aspectjweaver/jars/aspectjweaver-1.8.10.jar -cp /home/myuser/mypr
浏览 10提问于2017-06-13得票数 1
回答已采纳
是否可以使用sbt-assembly和sbt-native-packager插件来创建一个java应用程序原型安装，而不是让项目jar及其在<app>/lib中的依赖项只包含程序集jar？
我已经构建了一个Spark应用程序，我希望将程序集添加到上下文中，而不是单独添加每个jar。
编辑:我需要构建用于部署的deb包。我希望deb包包含程序集，而不是项目相关的jars。
文件系统布局应该是
<install_dir>
bin
appname
conf
application.conf
lib
浏览 10提问于2014-06-18得票数 3
2回答
我正在尝试在一个dataproc集群中运行一个简单的spark脚本，它需要使用scala和java云存储客户端库对gcs存储桶进行读/写。脚本如下： //Build.sbt
name := "trialGCS"
version :="0.0.1"
scalaVersion := "2.12.10"
val sparkVersion = "3.0.1"
libraryDependencies ++= Seq(
// Spark core libraries
"org.apache.spark" %%
浏览 17提问于2021-04-17得票数 2
回答已采纳
您必须知道，当您第一次运行SBT时，它开始下载他的依赖项：
>sbt sbt-version
Getting org.scala-sbt sbt 0.12.4
downloading repo.typesafe.com/typesafe/ivy-releases/org.scala-sbt/main/0.12.4/jars/main.jar ...
问题是，我住在非洲，ISP不是很好:由于一些未知的原因，他们是一些领域，我无法下载任何文件。例如，如果我进入WAMP的站点并尝试下载安装程序，下载就会开始，但它永远不会结束。通常，我使用代理(如HideMyAss或ZendProxy)解决此问
浏览 3提问于2013-09-20得票数 2
回答已采纳
我是sbt新手。我想知道如何通过Scala代码获得依赖的jar文件，而不是执行sbt插件。 在Gradle中，它支持通过Java代码获取依赖的jar文件，如下所示(project是Project类的一个实例)： Configuration config = project.getRootProject().getBuildscript().getConfigurations().detachedConfiguration();
Set<File> jars = config.resolve(); 我想知道在sbt和Scala中这样做的方法。有人知道这个吗？我试着使用sbt.Pro
浏览 17提问于2020-04-08得票数 0
回答已采纳
我正试图在一台远程机器上用Scala写一个程序，但那台机器没有互联网接入。因为我使用的是Hadoop的预编译版本，所以我能够运行预编译的示例：
[user@host spark-0.7.2]$ ./run spark.examples.LocalPi
但是我不能在机器上编译任何引用spark的东西：
$ scalac PiEstimate.scala
PiEstimate.scala:1: error: not found: object spark
import spark.SparkContext
^
通常，我会使用SBT来处理任何依赖项，但是机器不能访问internet，并
浏览 0提问于2013-06-11得票数 2
回答已采纳
我刚刚开始使用Play Framework。我已经下载并安装了play，并创建了一个示例java应用程序。当我试图在应用程序目录中启动play console时，它挂起在“加载项目定义”。
PS C:\dev\play\javatest> play.bat
Getting org.scala-sbt sbt_2.9.1 0.11.3 ...
:: retrieving :: org.scala-sbt#boot-app
confs: [default]
37 artifacts copied, 0 already retrieved (7245kB/283
浏览 1提问于2012-07-07得票数 61
回答已采纳
我使用的是Kafka 0.9.0和Spark 2.1.0，我的Spark提交如下：
./spark-submit --jars /home/cnbo/jars/spark-sql-kafka-0-10_2.11-2.1.0.cloudera1.jar --class ClickStream /home/cnbo/jars/sparkstreamingfi_2.11-0.1.jar
我收到以下错误：
java.lang.NoSuchMethodError: org.apache.kafka.clients.consumer.KafkaConsumer.subscribe(Ljava/util/C
浏览 2提问于2018-05-26得票数 1
因此，正如标题所示，sbt解析仅包含配置/属性且没有关联.pom文件的.jar文件依赖关系？
我目前正在开发一个新的前端应用程序使用Play！框架和天使。下面是一个场景：
根项目(àla maven编译/部署)
- Core business Module - pom.xml
- Web modules - pom.xml
- Rest API-pom.xml
- Module - pom.xml
- Module - pom.xml
- Frontend (à la SBT compilation, multi-module
浏览 2提问于2014-10-03得票数 4
回答已采纳
连接到星火应用程序中的postgresql db存在问题，该应用程序是通过使用spark-submit.sh脚本在Bluemix Apache-Spark服务集群上启动的。
我的scala文件代码是
val conf = new SparkConf().setAppName("My demo").setMaster("local")
val sc = new SparkContext(conf)
val sqlContext = new SQLContext(sc)
val driver = "org.postgresql.Driver"
浏览 1提问于2016-05-12得票数 1
回答已采纳
我是的新手。我希望它将所有依赖项jar文件以及我的jar文件放在一个位置。SBT将运行这个应用程序，但我有分散的各种依赖项和一个.ivy文件夹，里面装满了我的jar文件间接依赖的内容。
那么有没有一个简单的命令可以把它们都复制到一个地方，这样我就可以把它分发到另一台机器上呢？
浏览 3提问于2011-11-02得票数 37
回答已采纳
我有一个简单的Scala项目，在IntelliJ中作为sbt项目创建。在我手动将一些jars复制到lib/之后，IntelliJ无法编译项目或找到这些依赖项。sbt工作正常。
我相信，虽然不幸的是我没有记录，但即使在这些库之前，sbt可以编译，但IntelliJ不能。
当sbt运行良好时，我如何将IntelliJ配置为在内部使用sbt (而不是它们的Make)，或者执行让IntelliJ查找依赖项并进行编译所需的任何其他操作？
(使用: IntelliJ IDEA 13.1.2，SBT0.13，项目是通过IntelliJ创建的，作为sbt项目。IntelliJ正在读取sbt托管依赖项，并在外部
浏览 0提问于2014-07-06得票数 3
在构建web应用程序时，SBT能够将我的所有jar依赖项收集到WAR文件中。
是否可以让SBT将我在非web应用程序中依赖的所有jars文件放到一个目录中，这样我就可以在运行该应用程序时轻松地将它们放到类路径中？
浏览 2提问于2011-04-06得票数 19
回答已采纳
有没有办法让我可以使用sbt包来包含一些外部jars，但不是全部。我知道sbt组装，但这将包括在build.sbt中配置的所有jars
浏览 1提问于2020-05-04得票数 1
我需要用python将我的独立Spark连接到我的Cassandra实例。我已经从下载了Apache spark，解压并构建如下：
tar -xvf spark-1.4.1.tgz
sbt/sbt assembly
我添加了更新的./bashrc文件，可以运行Spark了。我还设置了Cassandra，可以从我的python程序中提取数据。
如何将Spark连接到Cassandra实例以访问作为Spark RDDs的Cassandra表？
浏览 2提问于2016-04-12得票数 1
2回答
我有一个火花项目，我可以运行从sbt控制台。但是，当我试图从命令行运行它时，在线程“java.lang.NoClassDefFoundError: org/apache/SparkContext”中会出现异常。这是意料之中的，因为星火库是按照build.sbt中提供的方式列出的。
如何配置这些东西，使我可以在命令行中运行JAR，而不必使用sbt控制台？
浏览 1提问于2014-05-15得票数 3
回答已采纳
我正在使用sbt-assembly创建一个可运行的jar，但是我的应用程序崩溃了，因为jai imageio从MANIFEST.MF文件加载了供应商名称。如果我从以下位置手动编辑META-INF/MANIFEST.MF文件：
Manifest-Version: 1.0
Main-Class: myMainClass
至
Implementation-Vendor: foo
Implementation-Title: bar
Implementation-Version: 1.0
Manifest-Version: 1.0
Main-Class: myMainClass
一切都很好。
如何配置s
浏览 1提问于2012-01-26得票数 9
回答已采纳
我有一个程序试图连接到Neo4j数据库，并在Spark，testApp.scala上运行，我用sbt package将它打包成a.jar，并根据 (我已经有了neo4j-spark-connector-2.0.0-M2.jar)将它封装在a.jar中。
resolvers += "Spark Packages Repo" at "http://dl.bintray.com/spark-packages/maven"
libraryDependencies += "neo4j-contrib" % "neo4j-spark-connecto
浏览 0提问于2018-04-29得票数 0
我正在通过sbt &使用scalatra框架制作webapp。
我希望将所有资源(模板、css、js)打包到一个jar中。
在带有的sbt中，assembly命令生成包含所有项目依赖项的单个jar .
$ java -jar myproject.jar
我在浏览器中打开它
无法加载资源:/ within /views/index.scaml；您确定它在null内吗？
我解压缩jar以确认它不包括src/main/webapp/*。
如何配置sbt以包括src/main/webapp/*和构建可执行jar？
浏览 1提问于2011-12-04得票数 3
1回答
所以我一直试图用scala和sbt做一些。其中一个建议是
将部署包的大小最小化到其运行时所需的大小。这将减少在调用之前下载和解压缩部署包所需的时间。对于在Java或.NET Core中编写的函数，请避免将整个AWS库作为部署包的一部分上载。
我一直在使用sbt程序集为我的代码和依赖项创建fat jars，但是当我只使用添加了大量内容的aws库的10%时，sbt程序集似乎将打包所有库依赖项。想知道我是否可以做些什么来减少代码中实际导入的依赖项的数量(以及它们的依赖项)。
浏览 0提问于2018-08-03得票数 1
回答已采纳
我想知道在使用SBT控制台和Spark交互地为Spark项目开发新代码(笔记本实际上不是w/服务器防火墙)之间是否有任何重要的区别。
两者都可以导入项目依赖项，但对我来说，SBT稍微方便一些。SBT会自动引入build.sbt中的所有依赖项，shell可以在命令行中使用--jar、--包和--存储库参数。
SBT有方便的initialCommands设置，可以在启动时自动运行行。我用这个来初始化SparkContext。
还有其他人吗？
浏览 2提问于2018-08-03得票数 0
1回答
我已经将我的目录结构设置为这样。
src/main/scala/main/Main.scala
src/main/scala/scripts/MainScript.scala
脚本是将运行的后台作业。
我以前曾使用sbt-assembly将主文件打包到jar中以供部署，但我不知道如何使用sbt-assembly或sbt-native-packager创建两个单独的jar。我怎样才能做到这一点，解决这个问题的最佳方法是什么？
我想做一些类似的事情。
java -jar main.jar $PORT
java -jar scriptMain.jar
浏览 2提问于2016-04-01得票数 4
我正在为我的scala项目使用sbt，我想为不同的环境创建构建，如本地，开发，阶段和生产。这些构建将具有不同的属性文件、log4j文件和令牌文件。因此，为了处理这个问题，我需要在src/main/resources下使用不同的文件夹，比如local、dev、stage和prod。根据构建环境，它应该从各自的文件夹中挑选文件。你能指导我使用sbt来做这件事吗？
浏览 0提问于2016-11-10得票数 0
我正在使用ScalaVersion2.11.4，我尝试过各种选项，如sbt组装、构建工件(Intellij功能)、sbt包。不幸的是，他们中没有一个在我身上起作用。
我试着做以下几件事：
使用sbt程序集：
创建了assembly.sbt文件并添加了以下行：
addSbtPlugin("com.eed3si9n" % "sbt-assembly" % "0.12.0")
build.sbt：
scalaVersion in ThisBuild := "2.11.4"
resolvers += Resolver.url
浏览 5提问于2016-02-10得票数 1
1回答
在sbt 0.13中，有几个关于这个问题的老掉牙的答案不适用于我。
将项目的所有运行时依赖项(主要是jars)复制到SBT0.13中的某个给定目录的最简单方法是什么？请包括任何给定的代码应该放置的位置。
如果重要的话，这是为了导出一些用Scala编写的类( servlet过滤器)，以便在war中使用(在遗留的java前面)。
浏览 4提问于2015-01-15得票数 0
回答已采纳
1回答
我有一个scala测试，它动态生成java源代码并在运行时编译它。当我在IDE (IntelliJ)中运行测试时，它运行得很好，但在使用sbt test时却失败了。
主要的区别是在IDE中运行我的测试类时，第三方类(jars)和com.sun.tools.javac.api.JavacTool类是由jdk.internal.loader.ClassLoaders$AppClassLoader加载的。在sbt中运行时，我的测试类、第三方类(jars)使用sbt.internal.LayeredClassLoader加载，但com.sun.tools.javac.api.JavacTool仍然由j
浏览 5提问于2022-07-20得票数 0
回答已采纳
我已经为spark-submits构建了很长一段时间的罐子，它们的效果非常好。
现在我想在kubernetes之上部署spark-jobs。
spark site ()上描述的方法只是调用一个脚本docker-image-tool.sh，将一个基本jar捆绑到一个docker容器中。
我在想：
如果结合使用sbt-native-packager和sbt-assembly来构建docker镜像，其中包含启动spark驱动程序、运行代码(捆绑了所有库)所需的所有代码，并提供一种将类路径库(如postgres jar)捆绑到单个镜像中的方法，这会更好吗？
以这种方式运行pod将启动spark k8s
浏览 11提问于2019-07-08得票数 4
回答已采纳
我希望在我的SBT项目中使用。由于，唯一可行的选择是让SBT编译一些使用类星体的java类。
我试着把
javaOptions += "-javaagent:PATH_TO_JAR/quasar-core-0.5.0.jar"
和
fork := true
正如我所读到的，要使用例如JRebel，必须将这两个语句都插入到build.sbt中
但是，它似乎也不像使用Quasarish类()的结果那样起作用：
[error] IllegalArgumentException: : Fiber class HelloWorldSpec$$anonfun$1$$anonfun$a
浏览 5提问于2014-07-13得票数 7
1回答
作为sbt程序集的一部分，我希望在jar中同时包含src和test类文件。Sbt-程序集只包含带有依赖项的src文件。是否有任何方法可以将测试类也包含在同一个jar中？
浏览 1提问于2013-12-10得票数 13
回答已采纳
我有一个scala SBT项目，其中我使用了本地打包插件。我捆绑为一个JavaServerAppPackaging，并希望生成脚本自动注册应用程序的启动和关闭与rc.d脚本(Amazon Linux)。在我的plugins.sbt中：addSbtPlugin("com.typesafe.sbt" % "sbt-native-packager" % "1.2.0-M5")
在build.sbt lazy val server = DefProject("some/server", "server") .setti
浏览 13提问于2016-08-20得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
云直播活动推荐
腾讯云开发者
