腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1385)
视频
沙龙
6
回答
有什么好的java面试问题的资源吗?
、
有没有人能告诉我一个好的java/j2ee编程和架构师职位的
面试题
库?
浏览 13
提问于2009-01-23
得票数 34
1
回答
(非
面试题
)?
、
(非
面试题
)
浏览 119
提问于2022-02-07
回答已采纳
0
回答
2022-03-10:限制:0 <= start <= end,0 <= target <= 64?
、
、
真实
面试题
,被问到了四五次,包括华为。 微信图片_20220310064457.png
浏览 145
提问于2022-03-10
1
回答
错误:无法识别表源中靠近“减号”的输入,选择“*”,而在spark中运行
、
有人能告诉我如何在spark-sql中解决以下问题吗?MINUS
浏览 2
提问于2018-04-06
得票数 0
1
回答
Cassandra逻辑行的
SparkSQL
跨越
、
、
、
、
在这种情况下,我希望使用
SparkSQL
“迭代”或映射“宽行”,而不是逻辑Cassandra行(CQL行)。我如何通过保持数据的局部性(我认为我的数据模型非常适合于这些任务)来有效地使用
SparkSQL
呢? 我阅读了,其中提到了Cassandra连接器中的spanBy和spanByKey。这将如何与
SparkSQL
一起使用?
浏览 0
提问于2016-03-13
得票数 0
2
回答
SparkSQL
是关系数据库管理系统还是NOSQL?
、
、
、
、
最近,当我们遇到这个问题时,我正在和我的朋友讨论
SparkSQL
的特性。它们是酸性交易吗?
SparkSQL
是否遵循CAP定理? 我对这个领域有点陌生,帮帮我吧。提前谢谢。
浏览 3
提问于2016-05-10
得票数 3
回答已采纳
1
回答
使用bcl.DateTime字段在proto case类上创建数据帧抛出none不是术语异常
、
我有一个通过scalapb从.proto文件生成的case类,它有几个bcl.DateTime类型的字段。case类定义如下: @SerialVersionUID(0L) customerid: _root_.scala.Int = 0, orderId: _root_.scala.Long = 0L, dataFeedId: _root_.scal
浏览 17
提问于2020-07-10
得票数 0
回答已采纳
1
回答
无法将SparkR::sampleBy函数应用于sparklyr数据SparkR
、
、
、
我使用df_pqt_tbl <- spark_read_parquet(...)函数读取了一个拼花文件。我的环境是Databricks。我想使用SparkR::sampleBy函数进行分层抽样,但是我得到了一个错误: fractions = list('0'=0.7, '1'=0.7), seed =
浏览 0
提问于2019-09-03
得票数 1
回答已采纳
1
回答
通过集群提高
SparkSQL
查询性能
我是
SparkSQL
新手,我主要负责编写
SparkSQL
查询。我们经常需要在查询中使用JOIN大表,并且不需要很长时间就会遇到与它们相关的性能问题(例如。Joins、aggregates等)。在网上搜索补救方法时,我最近遇到了一些术语-- COALESCE()、REPARTITION()、DISTRIBUTE BY、CLUSTER BY等,而且它们可能用于提高慢速运行的
SparkSQL
查询的性能有谁能在这里帮助我,并提供
SparkSQL
查询它们的用法和何时使用它们的例子?例如。syntaxhint syntaxtipss
浏览 5
提问于2020-06-05
得票数 0
1
回答
使用几个GBs大小的数据集的
sparksql
、
、
我的一些查询使用join命令如果我有多台服务器要运行,那么使用
sparkSQL
可以获得更好的性能吗?是否适合使用
sparkSQL
或postgresSQL ?的数据集? 什么时候选择
sparkSQL
而不是postgresSQL ?
浏览 2
提问于2021-01-04
得票数 1
回答已采纳
0
回答
2021-12-24:划分字母区间。 字符串 S 由小写字母组成。我们要把这个字符串划分为尽可能多?
某大厂
面试题
。
浏览 43
提问于2021-12-24
1
回答
SparkSQL
中不带聚合函数的GROUP BY
、
、
我正在尝试在
SparkSQL
中重现与sql中的group by相同的行为。下面是一个使用SQL而不是使用
SparkSQL
函数在
SparkSQL
中所能完成的操作的示例: 输入数据集: val input = Seq( ("Toronto----+-----+|Toronto|2016|4 |+-------+----+-----+ 我希望对
SparkSQL</em
浏览 26
提问于2021-08-30
得票数 0
回答已采纳
0
回答
雅典娜使用
SparkSQL
吗?如果不使用,那么它使用什么?
、
我如何理解它是否是
SparkSQL
。Spark文档说
SparkSQL
有数据帧,但如果我有MS SQL Server代码,我如何转换成
SparkSQL
才能在亚马逊网络服务上成功运行?
浏览 7
提问于2018-07-18
得票数 1
回答已采纳
2
回答
为什么在星火上使用Hive而不是Spark?
、
、
、
我是数据科学领域的新手,我不明白为什么有人会想要将Hive连接到Spark,而不是仅仅使用Sqark-SQL。谢谢
浏览 5
提问于2015-05-12
得票数 2
回答已采纳
1
回答
如何将Avro结构转换为SchemaRDD格式?
、
有没有办法把结构转换成?我在中看到了一个JavaRDD的例子,但是找不到任何东西来创建SchemaRDD。
浏览 0
提问于2014-09-12
得票数 5
1
回答
结合使用
SparkSQL
和Cassandra时的IF/Case语句
、
、
当使用Scala从Cassandra选择到Spark时,我正在尝试转换数据。我找不到与Spark SQL一起使用的IF/CASE语句。有什么想法吗? SELECT trip_sell_key, trip_veh_key, idle_stop_date, COUNT(*), and idle_stop_duration < 5 then 1 els
浏览 0
提问于2016-04-08
得票数 0
1
回答
SparkSQL
:读取JSON还是直接对文件执行查询?
、
我刚刚开始使用
SparkSQL
,并且正在努力确保我理解从文件使用
SparkSQL
(并推断出模式)和使用之间的好处。如果你有任何使用
SParkSQL
的经验,我很想知道哪种方法是首选的,为什么。
浏览 1
提问于2016-11-09
得票数 0
1
回答
星火中的转移矿是用来做什么的?
、
、
、
我在python中使用
SparkSQL
。我已经创建了一个分区表(大约几百个分区),并使用hiveContext将其存储到Hive内部表中。母公司仓库位于S3。
浏览 2
提问于2015-06-22
得票数 4
1
回答
在
SparkSQL
中使用Avro模式和Parquet格式进行读写
、
、
、
我正在尝试从
SparkSQL
中写入和读取镶木面板文件。出于模式演变的原因,我希望在写入和读取时使用Avro模式。但是,我想使用
SparkSQL
的write()和read()方法(它们与DataFrameWriter和DataFrameReader一起工作),它们与
SparkSQL
很好地集成在一起(我将编写和读取Dataset
SparkSQL
拼接格式似乎只支持“压缩”和"mergeSchema“选项--也就是说,没有用于指定替代模式格式或替代模式的选项。换句话说,似乎没有办法通过Avro模式使用
SparkS
浏览 1
提问于2017-01-04
得票数 5
1
回答
HBase表上的
SparkSQL
、
、
、
任何人直接在HBase表上使用
SparkSQL
,就像在Hive表上使用
SparkSQL
一样。我是spark.Please新手,指导我如何连接hbase和spark.How来查询hbase表。
浏览 22
提问于2016-09-16
得票数 7
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
SparkSQL内核剖析
Spark之SparkSQL
从0到1认识 SparkSQL
SparkSQL在有赞大数据的实践
看SparkSQL如何支撑企业级数仓
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券