我可以使用这里介绍的API将数据文件写入Databricks： https://docs.databricks.com/dev-tools/api/latest/index.html https://docs.databricks.com/dev-tools/api/latest/dbfs.html 我有几个要写入Databr
浏览 28提问于2020-12-18得票数 1
我们希望在azure databricks集群中部署/创建此python脚本(作为notebook)，以便稍后我们可以运行Azure数据工厂管道，并且管道可以执行在databricks中创建/部署的notebook如果是，是如何实现的？
谢谢。
浏览 21提问于2021-05-28得票数 1
我正在使用azure函数和databricks服务构建pipline。 在我的函数中，我返回从外部api获取的JSON。它是有效的，并且函数将其作为调用结果返回。我需要在我的数据库服务->中使用这个JSON，清除它并将它保存到sql中(我知道如何做这一部分)。 我希望避免创建二进制json文件，而更喜欢将函数的结果直接传递给databricks。我想过在databricks中使用python调用我的azure函数，但我不确定这是
浏览 41提问于2021-09-15得票数 0
2回答
我找不到在Databricks中使用该气流变量的方法。 编辑以添加我的代码示例。notebook_task = { 'base_parameters': {', run_name='test',
浏览 42提问于2021-07-13得票数 2
回答已采纳
如何在Databricks notebook - API中运行以检查其他正在运行的作业： https://docs.databricks.com/dev-tools/api/latest/jobs.html
浏览 13提问于2020-07-29得票数 1
5回答
Databricks很聪明，但是如何识别当前笔记本的路径呢？关于的指南没有帮助。它建议：dbutils.notebook.getContext.notebookPath
res1: Option[String] = Some(/Users/user@org.dk/my_test_notebook
浏览 1提问于2018-11-28得票数 19
回答已采纳
我正在使用Databricks Resi API在现有集群中使用notebook_task创建作业，并获取job_id。然后调用run-now api来触发作业。在这一步中，我想通过notebook_params发送一个list作为参数，它抛出一个错误，说“字段值需要非数组”。
浏览 3提问于2019-06-07得票数 1
我想从我的本地机器连接到Databricks集群(AWS)，但我想在集群中执行整个代码。使用Databricks Connect，只在集群中执行spark代码。我在寻找替代的解决方案。
浏览 2提问于2021-12-02得票数 1
我在databricks中有一台python 3.5笔记本。我有一个基于某些条件的执行databricks notebook单元的要求。我没有看到任何开箱即用的功能。我已经尝试用下面的代码创建了一个python鸡蛋，并将其安装在databricks集群中。del shell.magics_manager.magics['cell']['skip']
但是，当我尝试使用%load_ext skip_cell加载扩展时，它抛出了一个错误，说“该模块不是IPython
浏览 10提问于2019-08-20得票数 0
1回答
我正在尝试构建在spark DataBricks中完成的处理的摘要/报告。我遇到了下面的一段代码，它允许将数据写入dbfs和ADLS(通过挂载点)，但当我将代码打包到jar中并尝试将其作为DataBricks作业执行时，问题出现了，我得到了文件未找到异常，现在想知道如何在不使用notebooks的情况下将数据写入存储。writer.close()
我偶然发现了来自DataBricks的DButils，但还没有看到任何我可以使用</em
浏览 0提问于2019-11-27得票数 0
因此，我目前正在尝试为我的Databricks开发环境设置秘密。我已经使用Databricks-cli成功地设置了它们。我现在正尝试在我的spark jar (用scala编写)中使用它们。
浏览 43提问于2019-02-07得票数 0
我在databricks中有一个笔记本，我将其放入作业中，以便每天在特定时间运行，并且我还从该笔记本创建了仪表板，如何在每次作业运行时自动导出仪表板结果？我知道Jobs API，但我找不到正确的命令来执行此操作。现在，我使用python包databricks-api (https://pypi.org/project/databricks-api/)连接到databricks。我的最终
浏览 12提问于2019-09-24得票数 4
I使用以下代码触发databricks notebook： TOKEN = "xxxxxxxxxxxxxxxxxxxx"data = { "notebook_task": {
"base_parameters": {/api</em
浏览 13提问于2021-11-01得票数 1
1回答
除了导航到Databricks上的“Data”>“Add Data”之外，是否还可以读取位于本地计算机中的文件。在我过去使用Databrick的经验中，当使用s3存储桶时，我能够通过如下方式指定路径来读取和加载数据帧： df = spark.read.format('delta').load('<path>')有没有办法使用databricks读取本地文件来做类似的事情？
浏览 132提问于2020-10-30得票数 2
1回答
我试图使用由气流(如DatabricksSubmitRunOperator或DatabricksRunNowOperator )提供的databricks内置操作符，但我无法使用它，它给出了以下错误：对数据库的1次API请求失败，原因是: HTTPSConnectionPool(host='usdev.databaricks.xyz.com'，port=443)：最大重试超过url: /api/2.0正在使用的示例代码：
from airflow
浏览 8提问于2021-12-21得票数 2
2回答
路径包含空名称
、、、
我正在运行以下任务，以将笔记本上传到Azure DevOps发布管道的Databricks：--overwrite _databricks/notebook/$(notebook_name)-$(Build.SourceVersion.
浏览 0提问于2020-05-16得票数 0
我想通过REST API调用从Azure Databricks notebook连接到本地数据库(比如SQL Server)。此外，我还想在同一数据库中的一个表上执行UPSERT操作。有可能吗？
浏览 2提问于2020-05-06得票数 0
2回答
我正在使用databricks-connect和VS Code为Databricks开发一些python代码。我想使用databricks-connect直接从VS code中编码和运行/测试所有东西，以避免与Databricks web IDE打交道。对于基本的笔记本，它工作得很好，但我想对多个笔记本做同样的事情，并使用导入(例如，在另一个笔记本中使用import config-notebook )。据我所知，Da
浏览 45提问于2021-10-19得票数 1
使用Python-3，我试图将Excel (xlsx)表与Databricks中相同的星火表进行比较。我希望避免在Databricks中进行比较。因此，我正在寻找一种通过Databricks api读取星火表的方法。这个是可能的吗？我怎样才能继续读一张桌子: DB.TableName？
浏览 8提问于2021-03-19得票数 1
回答已采纳
云服务器
对象存储
ICP备案
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号