雪花临时表排序

文章/答案/技术大牛

发布

1回答

sql、snowflake-cloud-data-platform

我正在尝试对CTE (WITH)和临时表进行性能比较。我已经将查询转换为使用的临时表，但我看到了这样一种情况:当作为一个整体运行时，执行会失败，因为早期的临时表执行被取消了。我尝试了CTAS，并使用标准CREATE TABLE定义表，然后执行INSERT INTO，但其结果与取消执行的结果相同。有没有一种方法可以通过标准sql语法更好地对这些数据进行排序，而不必走存储过程或任务的路线？ Edit2在这里是一个更简单的场景，它使用了行为相同的COVID数

浏览 11提问于2020-10-17得票数 2

1回答

我们如何在Snowflake中处理雪地管道中的数据验证

snowflake-task

当新文件到达S3时，我使用SNS触发雪花管道。为了将数据从S3中的平面文件加载到Snowflake表中，我使用了Snow-pipe。那么，当通过Snow-pipe将数据从平面文件加载到snowflake表时，我是否可以对源数据进行数据验证和一些计算？如果我们有什么办法的话请帮帮我。提前谢谢。

浏览 0提问于2020-02-28得票数 0

1回答

雪花查询性能优化

snowflake-cloud-data-platform、snowflake-schema

我有一个带有多个ctes的雪花查询，并使用Talend作业插入到表中。执行查询需要超过90分钟。它是多个级联ctes，一个调用其他，另一个调用另一个。我想提高查询的性能。

浏览 3提问于2020-02-06得票数 2

1回答

在Tableau桌面中使用自定义SQL删除和插入数据

sql、database、snowflake-cloud-data-platform、tableau-desktop

我正在尝试使用Tableau桌面上的自定义sql创建临时表并将数据插入雪花。

浏览 3提问于2022-01-25得票数 1

1回答

更改雪花中删除表的数据保留

snowflake-cloud-data-platform、time-travel

我们正在利用雪花作为仓库平台。在将数据加载到雪花时，我们使用了一些降创建逻辑来填充雪花中的数据。我们没有使用临时表或临时表，而是意外地利用了永久表，这导致了作为时间旅行存储的一部分的巨大存储大小(接近140 tb)。事先非常感谢，普

浏览 6提问于2020-04-02得票数 1

回答已采纳

1回答

雪花数据砖:在数据砖中创建雪花临时表

snowflake-cloud-data-platform、databricks、temp-tables、databricks-connect

我们想在databricks中创建雪花临时表。好的，临时表被创建了，但是当我们尝试访问它时，它说表确实存在。我们检查了雪花历史，并看到临时表正在创建，但是其他访问查询有不同的会话id，因此表丢失了。我无法在这里加载屏幕截图。

浏览 4提问于2022-10-13得票数 1

1回答

来自S3的雪花负载数据(复制)与来自外部表的加载

snowflake-cloud-data-platform

用S3中的文件创建外部表，并从外部表将“插入.选择.”加载到雪花目标。将数据从S3加载到临时表，然后从临时表加载(“INSERT.SELECT.”)到雪花目标。

浏览 4提问于2020-09-17得票数 0

2回答

如何删除在snowflake中创建的临时表

database、snowflake-cloud-data-platform

我正在通过ODI将数据加载到用c$创建的雪花临时表中，加载成功后需要删除这些临时表，如何删除这些临时表非常感谢您的建议

浏览 0提问于2020-01-24得票数 1

1回答

立即清除永久桌

snowflake-cloud-data-platform

有没有办法强迫雪花立即清除掉的永久桌子？如果这是不可能的，在删除之前删除表中的所有记录是否会在存储成本方面有所帮助？

浏览 0提问于2020-05-03得票数 0

1回答

如何在SnowFlake中加快偏移量计算时间？

sql、limit、offset、snowflake-cloud-data-platform

请注意，我不允许在结果集的顶部创建视图，也不允许将结果集存储为另一个表(也就是说，我只想在db上拥有读取权限)。

浏览 3提问于2020-06-03得票数 1

1回答

如何通过Spark作为SnowFlake数据仓库JDBC分布式查询引擎访问RDD表？

amazon-web-services、apache-spark、apache-spark-sql、snowflake-cloud-data-platform

嗨，我想从雪花数据库查询我的临时数据库表。有没有办法从运行在AWS上的雪花数据库中执行此操作？

浏览 3提问于2018-11-08得票数 1

回答已采纳

3回答

将Hadoop事务表复制到雪花中

snowflake-cloud-data-platform

目前，我们正在使用Hadoop和雪花存储我们的数据。现在，我有了一个新的需求，其中Hadoop表是一个事务性表，现有条目每小时更新一次。如果我将ORC文件复制到S3并运行copy命令，它会将更多的条目添加到现有的表中，而不会更新现有的1。我怎样才能在雪花<

浏览 1提问于2019-01-23得票数 1

回答已采纳

2回答

如何在雪花中创建临时表

pyspark、snowflake-cloud-data-platform

我可以用sqlContext读取电火花数据格式中的雪花表 ..options(**snowflake_options) .load() 我如何在雪花中创建一个临时表

浏览 10提问于2022-04-27得票数 0

2回答

我怎么用仓库？

snowflake-cloud-data-platform、warehouse

我已经完成了以下步骤：因为我没有找到任何关于仓库功能的信息

浏览 4提问于2022-07-24得票数 0

回答已采纳

1回答

如何将数据插入到雪花数据库的临时表中。我已经创建了一个DDL:Create temporary table table_name as Select

snowflake-cloud-data-platform

如何在雪花数据库的临时表中插入数据？我已经创建了一个表，如下所示： CREATE TEMPORARY TABLE mydata.name as

浏览 13提问于2019-09-04得票数 1

1回答

雪花:将数据从csv文件导入临时表

snowflake-cloud-data-platform

是否有方法将数据从csv文件导入到雪花上的临时表中？最好使用网页接口。

浏览 2提问于2021-11-03得票数 1

回答已采纳

1回答

雪花存储过程中缺乏表输出功能

stored-procedures、snowflake-cloud-data-platform

我正在重新设计我们公司的API，以使用Server中的雪花。我们当前的第一个障碍是，我们现有的SQL Server存储过程返回表输出，雪花不允许这种类型的输出。我不想完全重新设计所有的东西，所以我想：有没有人对如何处理这件事有更好的建议？我知道，对于编码来说，使用python这样的工具会更容

浏览 4提问于2021-04-15得票数 2

2回答

使用标准SQL填充包含数据集中更改的表的最有效方法是什么？

sql、database、snowflake-cloud-data-platform

我有一个表(表a)，它包含以下字段：customer_status (varchar)segment2(varchar)segment2_flag (smallint) 然后，我有一个表(表c)，它包含表之间的更改，即刷新(即，如果字段值在当前上载和最后一次上载之间发生了更改表C包含以下字段。的历史记录，并且需要有一个表</

浏览 2提问于2020-08-21得票数 0

1回答

如何在完成创建或替换之后从雪花中还原数据

sql、cloud、snowflake-cloud-data-platform

我错误地更改了表，在雪花中临时表有任何方法来检索我做了2天前的数据，请建议我。任何我需要的检索数据的选项。

浏览 4提问于2022-08-17得票数 0

4回答

数据摄取:将动态文件从S3加载到雪花

python、amazon-web-services、lambda、snowflake-cloud-data-platform、matillion

其要求是在雪花中创建一个正在运行的表，并将数据加载到该表中。马蒂尔利是我们的ELT工具。到目前为止，这就是我所做的。Matillion检测SQS消息，并将带有JSON数据的文件加载到SF表中的Variant列中。SF存储的proc将使用变体列并根据JSON数据中字段的数目生成一个表。JSON数据文件比它们的CSV文件要大得多，我预计json文件将在10-20GB左右，因为该文件有超过10M的rows.Matillion，它有一个Excel组件，它可以在其中获取头部并动态创建一个表并加载

浏览 1提问于2021-01-26得票数 1

点击加载更多