我每小时将数据从Azure data Lake Store中的csv文件加载到Azure SQL数据仓库中的表中。加载由SqlServerStoredProcedure数据工厂活动执行,输入数据集是最近一小时收到的csv文件之上的一个外部表。在数据工厂活动监视器中,一切都是绿色的(就绪),数据似乎已按预期加载到目标表中,但在SQL DW的查询活动监视器中,我看到了许多失败的
我正在使用Azure Data Factory将我的表格转换为拼图文件格式。使用databricks for reporting对拼图文件执行查询。我只想更新在原始sql server表中更新的现有记录。由于我每天都在非常大的表上执行它,所以我不想执行截断和重载整个表,因为这将是代价高昂的。有没有什么方法可以在不执行截断和重新加载操作的情况下更新这些拼图文件。