腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
如何
使用
API
确定
Databricks
集群
是否
就绪
?
、
我
使用
PowerShell调用/clusters/events
API
来检查
Databricks
集群
是否
已启动并准备好进行下一步的设置过程。这是最好的方法吗?最近,我发现我的发布管道在检查
集群
状态时挂起了。事实证明,
集群
实际上正在运行,但它的状态是DRIVER_HEALTHY,而不是RUNNNING。所以,我修改了我的脚本,每个人都再次高兴起来。我
是否
有一个官方的
API
调用返回yes/no、true
浏览 13
提问于2020-12-05
得票数 2
1
回答
如何
通过
API
或消息队列获取
Databricks
工作区火花作业日志
、
、
、
我正在尝试创建一个服务,查找特定
databricks
工作区的所有火花作业日志。假设我已经在
databricks
工作空间中部署了两个星火流作业--我希望通过任何
API
或像kafka/eventhubs这样的消息队列获取这两个作业的日志。在
Databricks
工作区中
是否
有任何
API
可以提供每个火花作业的日志,或者我们可以在事件中心上获得那些星火应用程序的自定义日志?
浏览 5
提问于2022-09-19
得票数 1
1
回答
以编程方式将库导入数据库中的工作区
、
我想以编程方式向
Databricks
上的/Shared工作区添加一个(Python砂轮)库。在GUI (Workspace > Import > Library)中很容易做到,但我不知道
如何
在
Databricks
CLI中这样做。似乎不可行,因为库术语专门用于
集群
上的实际安装,而2)不可行,因为workspace import需要语言(Python、R、SQL等),并将文件解释为脚本。 所以我有点不知道该
如何
处理这个问题。
浏览 0
提问于2019-07-12
得票数 4
1
回答
无法在Azure
DataBricks
集群
上执行scala代码
、
、
、
、
我正在尝试为
DataBricks
设置一个开发环境,这样我的开发人员就可以
使用
VSCODE (或其他一些IDE)编写代码,并在
DataBricks
集群
上执行代码。发布我能够在Azure
DataBricks
集群
上执行python代码的设置,但不能
使用
Scala代码在运行安装程序时,我发现它说的是跳过上的scala命令测试,我不
确定
这里
是否
缺少一些配置请建议
如何
解决这个问题。
浏览 2
提问于2020-08-26
得票数 1
1
回答
如何
在现有的azure
databricks
工作区中获取
集群
、作业、安装的库等的总数?
、
、
在现有的azure
databricks
工作区中,有没有一种编程的方式来获取
集群
,作业,spark & scala运行时版本,安装的库,其他工件等的总数?
浏览 11
提问于2021-08-26
得票数 1
3
回答
使用
curl,
如何
向
databricks
api
进行身份验证?
索夫我读了这篇文档: 它给出了一个大致的想法,但没有示例。无论
如何
,我从bash中的一个简单的curl命令开始:我得到的回复是:我去了谷歌:<
浏览 0
提问于2016-03-10
得票数 1
1
回答
数据库--职务
集群
中的标记
、
、
对于
如何
通过
api
在
databricks
中标记作业
集群
,我有疑问。请求示例: curl --location --request POST 'https://
databricks
.com/
api
浏览 3
提问于2022-05-10
得票数 1
回答已采纳
1
回答
线程"main“com.
databricks
.dbutils_v1.DBUtilsHolder$$anon$1.invoke中的异常
、
、
、
、
DelegatingMethodAccessorImpl.java:43) at com.
databricks
.dbutils_v1directory C:\Users\Admin\AppData\Local\Temp\spark-cbdbcfe7-bc70-4d34-ad8e-5baed8308ae2import com.
databricks
.dbutils_v1name := "sparkdemo1"
浏览 14
提问于2020-06-10
得票数 1
回答已采纳
2
回答
如何
从
DataBricks
中删除自动
集群
?
、
、
我意外地在Azure
DataBricks
上创建了自动
集群
。有办法删除吗?我只想删除其中一个。
浏览 7
提问于2020-08-11
得票数 1
回答已采纳
1
回答
Azure数据库:
如何
在
Databricks
集群
中添加火花配置
、
、
我正在
使用
星火数据库
集群
,并希望添加自定义星火配置。 在这方面有一个
Databricks
文档,但是我不知道我应该
如何
以及应该做什么更改。有谁能分享一下配置
Databricks
集群
的例子吗?在
Databricks
集群
中
是否
有任何方法可以查看Spark的默认配置。
浏览 1
提问于2019-11-04
得票数 5
回答已采纳
1
回答
使用
Python文件从
Databricks
上的Azure工件安装Python包
、
、
、
、
我希望能够
使用
Python文件将其安装在
Databricks
上。我该怎么做?我能做一些像pip install ..这样的事情吗?到目前为止,我们一直遵循的过程是通过Azure管道将相应的.whl文件发布到
Databricks
工作区,然后从那里
使用
它,但是,对于我当前的用例来说,这是行不通的。我希望能够
使用
存储在DBFS文件系统中的Python文件安装特定版本的包。我怎样才能做到这一点?
浏览 6
提问于2022-06-17
得票数 1
1
回答
如何
检查
是否
有人在
使用
带有
databricks
连接的
集群
?
、
当有人连接到
Databricks
集群
时,我可以在
集群
中看到某些
集群
是活动的,并且有一些附加的笔记本。但是,当我
使用
带有
databricks
-connect,的
集群
时,
集群
并没有运行。
是否
有一种方法可以检查某人
是否
与
databricks
-connect连接到
集群
?
浏览 2
提问于2021-01-21
得票数 1
回答已采纳
2
回答
使用
Pyspark将XML转换为Dataframe
、
、
、
我
使用
pyspark开发
Databricks
。<?xml version="1.0" encoding="UTF-8"?
浏览 2
提问于2018-09-12
得票数 2
2
回答
如何
使用
ARM模板创建
Databricks
集群
、
、
、
我想
使用
ARM模板创建
Databricks
集群
。
是否
支持?如果支持,请提供一些references.Following是
使用
ARM模板创建数据库工作空间的代码 "resources": [ "type": "Microsoft.
Databricks
浏览 17
提问于2019-03-04
得票数 1
回答已采纳
1
回答
有没有办法
使用
ADO.Net连接到数据库?
、
、
、
、
我想构建一个
API
来查询
databricks
的表,并将结果输出为JSON。实现这一点的一种方法是调用
databricks
来执行作业并读取作业输出,但这有数据大小限制(最大5MB,我的结果集可以超过20MB)。相反,我
是否
可以
使用
集群
提供的JDBC/ODBC端点通过Microsoft.Net连接到
databricks
,或者
是否
有任何其他直接连接的方法?我的
API
层最好是用Microsoft.Net构建的。但是,我愿意尝试<em
浏览 0
提问于2020-12-17
得票数 2
3
回答
如何
使用
MongoDB
API
将Azure
Databricks
连接到Cosmos DB?
、
、
、
我已经
使用
MongoDB应用编程接口创建了一个azure CosmosDB帐户。我需要将CosmosDB( Azure
API
)连接到MongoDB
Databricks
集群
,以便从cosmos读取和写入数据。
如何
将Azure
Databricks
群集连接到CosmosDB帐户?
浏览 2
提问于2018-11-28
得票数 3
1
回答
Databricks
auto_termination设置为60分钟,而我的工作失败
、
、
我在
databricks
中创建了一个笔记本,我想从AWS Lambda按需运行这个工作。也就是说,当一个文件到达我的S3桶时,我想为了我的ETL目的运行
databricks
笔记本作业。
databricks
集群
的autotermination_minutes参数设置为60分钟。有时我的工作不运行,因为
集群
在空闲60分钟时自动终止。在运行作业之前,我可以从AWS重新启动
集群
吗? 谢谢
浏览 0
提问于2018-08-10
得票数 0
回答已采纳
1
回答
如何
在数据库上运行python3?
、
我尝试在
databricks
(社区版)上运行我的机器学习代码,并且需要
使用
Orange3数据挖掘库。setup.py egg_info" failed with error code 1 in /tmp/pip-build-DnpIcU/orange3/我还在
databricks
论坛上搜索并找到了这篇文章()。 然而,我仍然不太明白
如
浏览 4
提问于2018-01-04
得票数 1
回答已采纳
2
回答
如何
使用
ADF在
databricks
中安装jar
、
、
我们可以
使用
UI方法将jar文件安装到特定的
集群
。但是我们需要在工作空间中的所有按需
集群
上安装它。我们
使用
下面的shell脚本将jar文件下载到DBFS。不
确定
如何
使用
全局init脚本在所有
集群
中引用/安装此jar curl https://repo1.maven.org/maven2/com/
databricks
/spark-xml_2.12/0.12.
浏览 54
提问于2021-07-28
得票数 3
回答已采纳
1
回答
如何
清理天蓝色数据库工作区
我正在将
databricks
工作区从一个帐户迁移到另一个帐户,在此过程中,我需要用更新的数据(笔记本、用户、组、
集群
、数据库和表)刷新
databricks
工作区,我们有任何过程来清理
databricks
浏览 3
提问于2022-06-06
得票数 0
点击加载更多
相关
资讯
如何确定一个网站是否合法且安全使用?
如何使用Oozie API接口向非Kerberos环境的CDH集群提交Java作业
如何使用Oozie API接口向非Kerberos环境的CDH集群提交Shell工作流
成功从 Hadoop 迁移到 Lakehouse 架构的 5 个关键步骤
加米谷大数据:比拼生态和未来,Spark和Flink哪家强?
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
云直播
活动推荐
运营活动
广告
关闭
领券