知道为什么Spark的REPL (Spark 2.0.0)会抛出以下错误：Loading ../StatsWithMissing.scala...defined class NAStatCounter
<console:Load</e
浏览 11提问于2016-08-12得票数 0
我尝试了许多不同的方法来使用JDBC连接从Apache Spark连接到我们的Teradata环境。下面是我一直使用的代码。我确保我的JDBC驱动程序是正确的，因为我使用相同的驱动程序从其他平台连接到Teradata。
在运行spark-shell ./bin/spark-shell --jars /home/path/*.jar
浏览 0提问于2015-06-24得票数 2
1回答
我试图使用Spark对远程Oracle 11gDB执行一个简单的SQL查询。错误出现在.load()方法的最后一行。编辑: 01/27/2017Hadoop版本为2.6.0-cdh.5.8.3我试图在scala
浏览 4提问于2017-01-26得票数 3
回答已采纳
3回答
我使用的是Spark 1.4.1。我可以毫不费力地使用spark-submit。但是当我运行~/spark/bin/spark-shell时15/10/08 02:40:30 WARN NativeCodeLoader: Unable t
浏览 7提问于2015-10-08得票数 8
此外，我希望国家和地区是这个DataFrame中的列。<init>(LogicalRelation.scala:39) at org.apache.spark.sql.DataFrameReader.load(DataFrameReader.scala</em
浏览 2提问于2018-12-03得票数 2
我刚刚将spark 1.6.0解压并安装到了全新安装了hadoop 2.6.0和hive 0.14的环境中。$ spark-shell ____ __(SparkILoop.scala:105
浏览 0提问于2016-02-16得票数 6
线程"main“java.lang.NoSuchMethodError: java.lang.NoSuchMethodError中的异常在org.apache.spark.repl.SparkILoop(SparkILoop.scala:159) at org.apache.spark.repl.SparkILoop.process(SparkILoop.scala:182) at org.apache.spark.
浏览 0提问于2018-11-30得票数 0
spark-shell和scala CLI客户端提供了类似的功能；它们之间有什么区别吗？
浏览 1提问于2016-12-31得票数 2
我们在使用JDBC通过Apache连接到MonetDB集群时遇到了问题。与非群集数据库的连接工作。但是，当我们试图通过Apache连接到集群MonetDB数据库时，它会失败，出现“未处理的结果类型错误”。下面给出了整个查询 at org.apache.spark.sql.sources.ResolvedDataSource$.apply(ddl.scala
浏览 0提问于2015-04-20得票数 0
1回答
我在将数据作为数据从卡桑德拉表(包含元组类型的)加载到Spark时遇到了问题。我的系统规范如下所示。) at org.apache.spark.sql.DataFrameReader.load(DataFrameReader.scala</
浏览 2提问于2016-03-25得票数 6
1回答
找不到蜂箱表
、、、、
Table not found 'amitesh_test'
END HIVE FAILURE OUTPUT我在代码中做了一些修改，以加载文件，因为文件位置在HDFS中：： import org.apache.spark.SparkContext
============
浏览 2提问于2017-03-15得票数 1
回答已采纳
1回答
在中读取本地文件时出错。(HadoopRDD.scala在org.apache.spark.rdd.RDD$$anonfun$partitions$2.apply(RDD.scala:239) at org.apache.spark.rdd.RDD$$anonfun$partitions$2.apply(RDD.scala:237) at scala.Option.getOrElse(Option.scala
浏览 0提问于2017-05-30得票数 0
我正在试着测试火花壳中的一些代码，我需要设置一些时间域。我们使用nscala_time实现DateTime功能。当我跑的时候从我的放好的jars目录中，一切正常，我可以运行。> val current = DateTime.now
current: org.joda.time.DateTime = 2015-04-23T10:44:35
浏览 1提问于2015-04-23得票数 0
回答已采纳
在scala中将这个项目/jar作为依赖项添加之后，我尝试访问MyFileLoader.loadFile。不幸的是，这会给出一个java.lang.NullPointerException，因为找不到资源。为了进行调试，我在spark-shell中运行了这个命令，显示了这个资源确实存在：
scala> getClass.getResource("/my/path/model.bin").
浏览 1提问于2015-08-26得票数 0
回答已采纳
齐柏林飞艇在开始导入com.databricks.spark.xml时需要一些参数吗？org.apache.spark.sql.sources.ResolvedDataSource$.apply(ddl.scala:233) at org.apache.spark.sql.DataFrameReader.load$ReadEvalPrint.call(SparkIMain.scala:1065)，org.apache.spark.<e
浏览 2提问于2016-04-27得票数 1
回答已采纳
我试图创建一个伏拉表使用星火，但无法创建它。请在下面找到完整的错误日志at com.sap.spark.vora.catalog.VoraCatalog.exists(VoraCatalog.scala:122)
at com.sap.spark.vora.SchemaCatalog.load(SchemaCatalog.j
浏览 2提问于2016-05-04得票数 0
回答已采纳
我在尝试将文件从hdfs读取到Spark时遇到错误。-rw-r--r-- 1 spark supergroup 4811 2016-02-25 23:38 README.mdscala> val(SparkILoop.scala:1059)
at org.apache.spark.repl.Main$.main(Main.
浏览 13提问于2016-02-26得票数 7
我正试图通过Yarn在Hadoop集群上运行星体外壳。我使用
mvn -Pyarn -Phadoop-2.4 -Dhadoop.version=2.4.1 -DskipTests clean package at org.apache.spark.deploy.SparkSubmit.main(SparkSub
浏览 1提问于2014-07-07得票数 11
因此，当使用-Dspark.io.compression.codec=org.apache.hadoop.io.compress.GzipCodec启动spark shell时，我会得到。由于我们集群的空间限制，我想使用更积极的压缩编解码器，但我如何使用BZip2Codec并避免此异常？这有可能吗？at org.apache.spark.repl.SparkIMain.interpret(SparkIMain.scala</e
浏览 2提问于2014-06-09得票数 2
2回答
我面临的问题是连接卡桑德拉使用火花..。Scala版本2.11，Scala vesrion 1.6，cassandra版本3.0。当进入火花壳时，我正在使用：我正在尝试使用以下步骤连接cassandra
val table = sc.cassand
浏览 1提问于2016-12-18得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
