从Datafactory IDE中删除管道

文章/答案/技术大牛

发布

3回答

azure、azure-pipelines、azure-data-factory

我已经成功地创建了管道并成功地部署了它们。我是不是遗漏了什么？

浏览 24提问于2019-11-25得票数 1

回答已采纳

2回答

由于数据工厂模式，无法使用GIT同步发布Azure数据工厂？

azure、azure-data-factory、azure-data-factory-pipeline

数据工厂从GIT获取其更改。因此，通常我们只需签入/合并分支，然后我转到门户并按下发布新的更改，它就可以正常工作。最后我意识到有一个按钮可以切换到"DataFactory“模式。我假设这是我们在设置GIT之前使用的旧模式？在这种模式下，我找到了导致失败的管道，将其删除，但随后我无法实际保存<

浏览 4提问于2021-01-09得票数 1

2回答

从Azure DataFactory更新SalesForce中的字段

azure、salesforce、azure-data-factory

我正在寻找从Azure DataFactory管道中更新DataFactory字段的方法。我有从SalesForce到SQL server的标准复制管道，然后对下载的数据执行存储过程，然后我需要更新SalesForce中在过程之后更改的字段。现在我完全不知道该怎么尝试。

浏览 0提问于2018-07-19得票数 0

回答已采纳

2回答

如何从ADF中清除管道？

azure、azure-data-factory

每当我试图从ADF中删除任何管道时，都会收到以下错误消息： The scope '/subscriptions/<subscription_id>/resourcegroups/<RGName>/providers/Microsoft.DataFactory/datafactories/<ADF_Name>/datapipelines/HivePipe'

浏览 1提问于2016-06-20得票数 3

回答已采纳

1回答

Azure DataFactory在没有调试的情况下找到活动块的输出结构

azure-data-factory-2

目前，为了使用Azure DataFactory (v2)的各种数据操作块，我需要在调试器中运行管道，并查看实际的输出，以便找出它们的输出的JSON结构。有些活动在MSDN (例如)中记录了示例输出，但其他活动则没有(例如)。那么，我是否有可能知道我想要过滤器输出的.Values属性，而不必在此之前实际执行管道？

浏览 2提问于2020-08-07得票数 0

回答已采纳

2回答

如何删除具有强制引用的ADFPipeline

azure、powershell、pipeline、azure-data-factory、azure-data-factory-2

作为其中的一部分，我试图删除所有ADF V2管道。问题是，我的管道有许多引用与不同的管道本身。$ADFPipeline = Get-AzDataFactoryV2Pipeline -DataFactoryName $(datafactory-name) -ResourceGroupName $(ADFPipeline | ForEach-Object { Remove-AzDataFactoryV2Pipeline -ResourceGroupName $(rg) -DataFactoryName $(<

浏览 3提问于2019-10-25得票数 0

回答已采纳

1回答

ADF Tumpling窗口触发器更新startTime属性行为

azure、azure-data-factory

\",\r\n \"target\": null,\r\n \"details\": null\r\n }\r\n}"}]}切换到调度触发器不是一个选项，因为它不允许具有重试策略。

浏览 28提问于2020-05-26得票数 2

2回答

删除多重Azure数据工厂管道

azure、azure-pipelines、azure-powershell、azure-data-factory-2、azureportal

我想删除连接到的50+ ADF管道。我们可以通过Azure前端手动完成，但这是一个乏味的任务。我尝试过通过Powershell删除它，但是powershell只能删除在DataFactory(PFA，屏幕截图)模式下出现的管道，而不影响连接到Azure DevOps GIT的管道。

浏览 7提问于2020-08-19得票数 1

回答已采纳

5回答

发布后如何将Azure数据工厂参数导入ARM模板参数文件(ARMTemplateParametersForFactory.json)

azure、azure-devops、azure-pipelines、azure-data-factory、arm-template

我正在尝试为Azure Data创建Azure DevOps发布管道。我在Data中定义了一些管道参数，希望它们在我的部署管道中是可配置的。JSON如下所示： "Microsoft.DataFactory/factories

浏览 0提问于2018-12-06得票数 10

回答已采纳

1回答

Azure发布管道Powershell任务失败

powershell、ssis、azure-devops、azure-pipelines、azure-powershell

我有一个Azure发布管道与Azure Powershell任务内联脚本失败。我正在运行一个自我托管的构建代理。当我从本地执行它时，Powershell命令工作得很好。如果在您控制的环境中运行PowerShell，则可以使用“卸载- AzureRm”cmdlet从计算机中删除所有AzureRm模块。如果您在Azure自动化中运行，请注意您的运行簿中没有一个同时导入Az和AzureRM模块。更多信息可以在这里找到：。有关更多信息，请运行“Import-M

浏览 4提问于2019-10-01得票数 1

回答已采纳

1回答

如何将Azure DataFactory日志存储到ApplicationInsights

logging、azure-data-factory、azure-application-insights

运行Azure数据工厂管道时，我们希望在Azure应用程序洞察中执行审核日志记录。任何人可以帮助任何逐步指导如何从Azure DataFactory管道任务中将数据登录到应用程序洞察中？谢谢

浏览 27提问于2020-10-07得票数 0

1回答

Azure ADF ARM模板部署由于链接服务的授权而失败

azure-devops、azure-data-factory、azure-data-factory-2

我使用DevOps管道从dev环境进行ARM模板部署。但我得到了下面的错误部署失败了..。'PROD_DataFactory/ADF_KV' of type 'Microsoft.DataFactory/factories/

浏览 1提问于2021-02-02得票数 0

回答已采纳

2回答

如何用Python创建Azure数据工厂管道活动之间的依赖关系

python、dependencies、azure-data-factory

在Azure DataFactory管道中，我尝试使两个CopyActivities按顺序运行，即第一个将数据从blob复制到database，然后将第二个CopyActivities表复制到另一个数据库我尝试了下面的代码，但是结果管道不依赖于活动(从工作流图和JSON签入Azure )。当我运行管道时，会收到如下错误消息："ErrorResponseException:模板验证失败：'runAfter‘属性的模板操作’我的第二个活动nameScop

浏览 0提问于2018-08-28得票数 2

回答已采纳

1回答

如何通过Azure CLI将触发器绑定到Azure Datafactory管道？

azure、azure-data-factory、azure-cli

我试图用脚本自动创建azure数据仓库管道。我能够用az datafactory pipeline create和az datafactory trigger create创建管道和触发器。问题是我无法在AZ文档中找到将这两者绑定的方法，因此我不必手动将触发器添加到管道中。有办法吗？

浏览 12提问于2021-11-01得票数 0

回答已采纳

1回答

如何在使用Azure将文件上传到ftp位置并启动复制作业时获得通知？

azure、azure-pipelines、azure-data-factory、azure-triggers

每当将文件(所需)上传到FTP位置时，我需要启动复制作业。那么，为了通知文件在该位置可用，除了使用ADF的逻辑应用程序之外，是否还有其他方法(例如，如果文件可用，则运行此复制作业)？有没有人可以提一些建议？

浏览 26提问于2021-09-15得票数 0

1回答

使用Azure Data实用程序生成ARM模板不会生成Data资源的位置标记

azure、azure-data-factory、azure-pipelines-yaml

Azure Data上使用“发布”时，会生成ARM模板 "type": "Microsoft.DataFactory/factories", "location": "[parameters('

浏览 2提问于2021-06-04得票数 1

回答已采纳

8回答

具有对象id的客户端没有授权在作用域上执行操作'Microsoft.DataFactory/datafactories/datapipelines/read‘。

azure、azure-functions、azure-data-factory

我试图以编程的方式从azure函数调用数据工厂管道。它抛出了跟随错误。链接： 'Microsoft.DataFactory/datafactories/datapipelines/read‘：对象id’xx829e05‘XXXXX’的客户端‘XXXXX’没有授权对作用域'/subscriptions/XXXXXX-4bf5-84c6-3a352XXXXXX/resourcegroups/fffsrg/providers/Micros

浏览 6提问于2017-02-09得票数 62

2回答

如何从执行的管道中获得自定义输出？

azure、azure-data-factory、azure-data-factory-2

我希望能够从“执行管道活动”中获得自定义输出。在被调用管道的执行过程中，我使用"Set变量“活动在变量中捕获一些信息。我希望能够在主管道中使用这个值。我知道主管道可以使用"@activity('InvokedPipeline').output“读取被调用管道的名称和.output，但这些是唯一可用的属性。我有可调用管道，因为它是可配置的，可供多个其他管道使用，

浏览 0提问于2019-09-01得票数 14

回答已采纳

1回答

Azure数据工厂部署中的CICD发布管道问题

json、git、azure、azure-devops、azure-data-factory-2

我已经在Azure DevOps中创建了一个发布管道，在那里我将开发资源(管道、数据集、触发器、集成运行时)移动到Prod数据工厂。挑战是，在我的开发ADF中，我使用了一个集成运行时ir-myonpremdata，它是自托管和共享的，同样的ir也作为自托管链接存在于prod数据工厂中。但这是非常痛苦的，就像如果再一次有人发布主分支，那么在adf_publish分支中，额外的代码将自动从ARMTemplateForFactory.JSON和ARMTemplateParam

浏览 17提问于2021-02-10得票数 0

2回答