腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
将带
空格
的
字符串
参数
传递
到
databricks
中
的
SQL
notebook
?
、
、
我有一个
SQL
notebook
(notebookA),我想在其中
传递
来自另一个
notebook
(notebookB)
的
参数
。---notebookA---%run .但是,当值中有一个
空格
时,它会给出如下错误 ---notebookB--- %run .
浏览 26
提问于2019-06-16
得票数 0
2
回答
以变量为
参数
的
Powershell - JSON
字符串
、
、
、
我正在尝试在PowerShell中使用
Databricks
CLI。我需要将JSON
字符串
作为
参数
传递
。我使用了4种不同
的
组合,但仍然得到一个错误
的
Error: JSONDecodeError: Expecting property name enclosed in double quotes: line1 column 2 (char 1)
databricks
jobs run-now --job-id $job_id --
n
浏览 16
提问于2021-10-26
得票数 1
1
回答
从.Net UI对数据库运行Spark
SQL
查询
、
、
、
、
我希望我
的
用户在UI
中
运行Spark
SQL
查询,并查看查询
的
结果集。 在内部,.Net Rest API会将查询从UI
传递
到
Databricks
集群或
notebook
或odbc以运行查询。我
的
后端平台是
databricks
。 请建议
如何
通过一些代码/代码链接来实现这一点。提前感谢!
浏览 12
提问于2020-09-23
得票数 1
回答已采纳
2
回答
如何
在spark jar中使用dbutils.secrets
、
、
、
、
因此,我目前正在尝试为我
的
Databricks
开发环境设置秘密。我已经使用
Databricks
-cli成功地设置了它们。我现在正尝试在我
的
spark jar (用scala编写)中使用它们。但是,我找不到dbutils位于哪个包
中
。. = dbutils.secrets.get(scope = "SCOPE", key = "VARIABLE") 这是我正在尝试实现
的
用例,如果有任何帮助,我将不胜感激!
浏览 43
提问于2019-02-07
得票数 0
2
回答
如何
在
Databricks
笔记本中使用气流变量?
、
、
、
我有一个从Airflow DAG调用
的
Databricks
PySpark笔记本。我通过转到Admin - Variables在Airflow
中
创建了一个变量,并添加了一个键-值对。我找不到在
Databricks
中使用该气流变量
的
方法。 编辑以添加我
的
代码示例。"token": token} 和这里定义
的
运算符 opr_submit_run = DatabricksSubmitRunOperator( task_id='
浏览 42
提问于2021-07-13
得票数 2
回答已采纳
2
回答
Azure :以编程方式指定笔记本路径,其中包含dbutils.
notebook
.run
中
的
特殊字符“dbutils.
notebook
.run”
、
我有一个
databricks
笔记本,它有以下一行:"notebooks_base_path“
参数
的
值
字符串
是工作区
中
现有的根路径,其值为:"/base/oracle/dim/ops$test” 执行它时,收到与解析记事本路径相关
的</e
浏览 10
提问于2022-02-21
得票数 1
1
回答
Azure数据工厂用户
参数
、
、
、
、
在Azure
Databricks
中
,我想让用户在数据工厂管道
中
手动触发
Notebook
。我认为Data Factory没有一个动态
参数
来将用户
传递
给
Databricks
,只有管道特性和函数。你知道解决这个问题
的
办法吗?
浏览 22
提问于2019-10-19
得票数 1
1
回答
databricks
-cli:在bash脚本
中
运行作业时
的
JSONDecodeError
、
、
、
我正在尝试使用Linux服务器上
的
bash脚本
中
的
notebook
参数
运行
Databricks
作业。我正在按照docs
的
说明进行操作,并且我已经验证了这些命令在终端
中
是否正常工作。下面是我
的
脚本: #!job-id 1 --
notebook
-params '{"param1":"value1"}' ### this command works fine i
浏览 23
提问于2019-05-08
得票数 1
1
回答
如何
将
databricks
notebook
的
输出值作为
字符串
传递
给数据工厂?
、
、
我有一个
databricks
notebook
Notebook
1,我在其中编写了一个查询,用于从
databricks
数据表获取last_mod_time,并将其保存为dataframe。现在,我已经在azure数据工厂
中
创建了一个管道,并使用该
notebook
的
输出将last_mod_time值作为
字符串
传递
给一个IF condition活动。
浏览 15
提问于2021-03-18
得票数 1
回答已采纳
1
回答
Databricks
-一种通过每次获得另一个输入来多次运行单元格
的
自动化方法
、
、
我需要为我拥有的每个文件在
Databricks
中
运行几个单元。输入是一个图像路径,对于这个图像路径,大约有40个细胞需要10分钟才能全部运行。我要运行50个图像
的
代码。
如何
在python
中
的
Databricks
中
实现自动化?这有可能吗? 如下所示:获取文件,然后从下面运行所有内容。
浏览 6
提问于2022-09-08
得票数 1
1
回答
notebook
的
参数
-小部件未定义错误
我从JobScheduling向
Databricks
Notebook
传递
了一个
参数
,并尝试使用dbutils.widgets.get ()在python
Notebook
中
捕获它。当我运行排定
的
作业时,我得到由库模块""InputWidgetNotDefined“”抛出
的
错误“"No Input Widget defined”“ 我可以知道原因吗,谢谢。
浏览 5
提问于2018-12-04
得票数 0
2
回答
将带
空格
的
字符串
传递
到
javascript
我试图
将带
有
空格
的
php定义
字符串
传递
给javascript函数,以便我可以将其附加到查询
字符串
中
。但是,该函数只有在没有
空格
时才能工作,甚至在有
空格
时也不执行--通过使用警告()进行测试。有没有一种方法可以
将带
空格
的
字符串
传递
到
javascript函数
中
,以便最终可以进行转义(),然后追加到查询
字符串
浏览 17
提问于2009-12-21
得票数 2
回答已采纳
1
回答
使用Airflow使用PySpark代码执行
Databricks
笔记本
、
、
、
我使用
的
是气流、数据库和PySpark。我想知道,当我想通过气流执行
Databricks
笔记本时,是否可以添加更多
的
参数
。我在Python中使用了名为MyETL
的
下一个代码: spark.
sql
("CREATE TABLE {0} {1}".format(table, columnsif __name__== "__main__":我想要定义运行有更
浏览 0
提问于2019-06-25
得票数 2
回答已采纳
2
回答
如何
使用YAML执行和调度Azure Devops管道
中
的
Databricks
笔记本
、
、
、
、
我想用YAML文件做我
的
蓝色数据库笔记本电脑
的
CICD。我遵循了下面的流程 低于误差 ##errorError:无法找到可执行文件:“
da
浏览 19
提问于2022-02-11
得票数 1
1
回答
如何
在数据库笔记本中使用ADF级输出
、
、
我需要使用
databricks
笔记本来匹配文件名。数据库
中
ADF
中
Get元数据阶段
的
输出
如何
与
字符串
文件名部分匹配?
浏览 8
提问于2022-07-12
得票数 0
1
回答
如何
在ADF
中
运行火花作业?
、
、
、
、
我创建了一个带有
参数
的
星火作业,并在Azure
中
附加了一个交互式集群。我在Azure数据工厂有一个使用笔记本活动
的
管道。当我创建链接服务时,它指向了我
的
交互式集群。
如何
使用ADF使用我在
databricks
中
创建
的
作业运行管道?谢谢
浏览 3
提问于2022-07-08
得票数 0
回答已采纳
3
回答
并行执行多个记事本
、
、
、
这在
databricks
火星雨中是可能
的
吗?
浏览 6
提问于2021-08-26
得票数 4
回答已采纳
1
回答
如何
将获取元数据阶段
的
输出
传递
给
databricks
笔记本
中
的
文件名比较
、
、
我在ADF中有两个获取元数据阶段,它从两个不同
的
文件夹
中
获取文件名,我需要在
databricks
笔记本中使用这些输出进行文件名比较,如果所有文件都存在,则返回true。
如何
将Get元数据阶段
的
输出
传递
给
databricks
,并执行
字符串
比较,如果所有文件都存在,则返回true;如果缺少一个文件,则返回false
如何
做到这一点?
浏览 9
提问于2022-07-13
得票数 0
2
回答
存储容器
中
每个新blob
的
Azure触发器数据库
、
、
、
、
此笔记本正在执行以下任务(用于测试)-*上述步骤也可在不同
的
笔记本上完成。现在,我需要为容器
中
的
每个新Blob触发这个笔记本。我会执行以下
的
编排- 新
浏览 5
提问于2020-12-07
得票数 0
7
回答
在Bash
中
传递
带
空格
的
字符串
作为函数
参数
、
我正在编写一个Bash脚本,其中需要将一个包含
空格
的
字符串
传递
给Bash脚本
中
的
一个函数。#!echo $2} 运行时,我期望
的
输出是:second string with spaces然而
浏览 4
提问于2009-12-31
得票数 204
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
皕杰报表中的参数如何传给sql
jQuery实例:jQuery Ajax中的data如何传递到php后端
EntityFramework Core 2.0执行原始查询如何防止SQL注入?
成功从 Hadoop 迁移到 Lakehouse 架构的 5 个关键步骤
SQL进阶知识——字符处理函数
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券