‘'LAG’功能在Amazon Redshift中不起作用
LAG功能是一种在数据库中用于计算行与前一行之间的差异的窗口函数。然而，在Amazon Redshift中，LAG功能不起作用。Amazon Redshift是亚马逊AWS提供的一种高性能、可扩展的数据仓库解决方案，专为大规模数据集的分析和查询而设计。
虽然Amazon Redshift提供了许多强大的功能和窗口函数，但LAG功能不是其中之一。如果需要在Amazon Redshift中实现类似的功能，可以考虑使用其他方法，如自连接或子查询来计算行与前一行之间的差异。
腾讯云提供了类似Amazon Redshift的数据仓库解决方案，即TDSQL-C。TDSQL-C是一种高性能、可扩展的云数据仓库，适用于大规模数据集的存储和分析。它提供了丰富的窗口函数和分析函数，可以满足各种数据分析需求。
更多关于TDSQL-C的信息，请访问腾讯云官方网站：TDSQL-C产品介绍。
相关·内容
1回答
我在S3中加载了一个CSV平面文件，它偶尔会在以逗号分隔的列中有一个空值，例如："ColumnValue1,,ColumnValue3,...etc"将",,"标记为CSV中缺少的值。下面是使用S3组件从tDBBulkExec到Talend中的Redshift安装程序的基本步骤：
将列映射如下，并运行：
如果源文件中缺少这些值，则引发错误：
Exception in component tDBBulkExec_1 (tncretail_opportunity)
java.sql.SQLException: [Amazon](500310) I
浏览 1提问于2018-10-24得票数 1
回答已采纳
1回答
我正在尝试编写一个sql查询(在amazon redshift中)，该查询统计客户从不符合标准到符合标准的次数，因此当1出现时，日期是0之后的日期。
我很难弄清楚这样做的逻辑。
ID Snapshot_date Meets Criteria
55 1/1/2018 0
55 1/5/2018 1
55 1/10/2018 1
55 1/15/2018 1
55 1/20/2018 0
55 1/25/2018 1
浏览 2提问于2018-02-22得票数 0
我使用带有Redshift的spring类，当参数类型为List/Set且没有元素或只有一个元素( weir！)时，我有一个bug/崩溃。
_This是我的艺术品
<dependency>
<groupId>com.amazon.redshift</groupId>
<artifactId>redshift-jdbc42</artifactId>
<version>1.2.41.1065</version>
</dependency>
这是我的桌子脚本
CREATE TABL
浏览 5提问于2020-06-04得票数 1
我在Amazon Redshift中的一个表中有一些数据，格式如下
Column1 Column2
'a' 'b'
我想从该表中删除单引号字符，并按如下方式获取数据：
Column1 Column2
a b
我原以为Replace函数能做到这一点，所以我编写了以下查询：
select replace(column1,''',''),
replace(column2,''','')
from table
但这不起作用，给
浏览 2提问于2017-03-21得票数 2
1回答
我正在使用talend在Amazon Redshift上插入数据到表中。java代码由talend生成，但Amazon Redshift不支持today()函数。
我正在尝试从Salesforce加载一个表，并使用talend将其放入Redshift中。当我从talend运行作业时，我有以下错误：
Exception in component tRedshiftOutput_1
java.sql.SQLException: [Amazon](500310) Invalid operation: function today() does not exist;
at com.amazon
浏览 23提问于2019-07-18得票数 0
在Amazon Redshift的中，数据从Amazon S3中提取，并使用SQLWorkbench/J加载到Amazon Redshift集群中。我想模拟连接到集群并使用将样本数据加载到集群中的相同过程。
然而，在Redshift的中，我找不到一种方法可以让我将数据上传到Amazon Redshift集群中。
我已经能够通过以下代码使用Boto3连接到Redshift：
client = boto3.client('redshift')
但我不确定什么方法可以让我像在中那样创建表格或将数据上传到Amazon Redshift。
浏览 5提问于2016-01-25得票数 18
回答已采纳
在EMR集群上使用PySpark向Redshift写入数据时，我遇到了一个错误。
df.write.format("jdbc") \
.option("url", "jdbc:redshift://clustername.yyyyy.us-east-1.redshift.amazonaws.com:5439/db") \
.option("driver", "com.amazon.redshift.jdbc42.Driver") \
.option("dbtable", "
浏览 1提问于2021-05-26得票数 0
我正在使用Amazon Redshift SQL查询，我尝试根据3列对记录进行排序: timestamp、cookieID、trackingpointID，但是当这3列排序的两个记录之间的时间差小于30分钟(具有相同的cookieID和trackingpoint)时，我想省略此记录，只保留最高的记录，例如，如果我有：
timestamp cookie track
9:04:29 A 10420641
9:04:32 A 10420641
9:04:36 A 10420641
9:04:32 A 1042064
浏览 1提问于2015-08-11得票数 0
3回答
S3存储桶缺少红移火花
、、、
我尝试使用spark-redshift从redshift中读取数据，但遇到了这个错误。我已经在S3中创建了存储桶，并且我能够使用足够的凭据访问它。
java.sql.SQLException: Amazon Invalid operation: S3ServiceException:The specified bucket does not exist,Status 404,Error NoSuchBucket,Rid AA6E01BF9BCED7ED,ExtRid 7TQKPoWU5lMdJ9av3E0Ehzdgg+e0yRrNYaB5Q+WCef0JPm134XHeiSNk1mx4cdzp
浏览 1提问于2016-08-09得票数 0
我正在尝试在RHEL上设置ODBC连接以连接到redshift集群。我已经安装了最新的Redshift ODBC驱动程序，并修改了odbc.ini文件以包含必要的详细信息：
[ODBC Data Sources]
Redshift_Connection=Amazon Redshift (x64)
[Redshift_Connection]
Driver=/u01/redshift/lib/64/libamazonredshiftodbc64.so
#Driver=/u01/redshift/lib/32/libamazonredshiftodbc32.so
Description=Amazo
浏览 63提问于2021-02-23得票数 1
我正在使用spark-redshift，并使用pyspark查询红移数据进行处理。
如果我使用工作台etc.But在redshift上运行这个查询，那么spark-redshift将数据卸载到s3，然后检索它，当我运行它时，它抛出以下错误。
py4j.protocol.Py4JJavaError: An error occurred while calling o124.save.
: java.sql.SQLException: [Amazon](500310) Invalid operation: Assert
Details:
----------------------------
浏览 52提问于2017-12-27得票数 2
回答已采纳
有没有办法改变Amazon Redshift (或者Postgres，因为它是基于它)中的列排序？或者在特定位置添加一列？
在mysql中，您可以执行以下操作：
ALTER TABLE MY_TABLE
ADD COLUMN {NEW_COL} AFTER {EXISTING_COL}
但这在Redshift中不起作用。有什么想法吗？
浏览 1提问于2015-04-23得票数 8
1回答
无法创建红移连接
、、、
我正在尝试使用redshift jdbc驱动程序创建红移连接，这是我从AWS红移集群控制台下载的。异常以下
java.sql.SQLException: The connection attempt failed.
at com.amazon.redshift.util.RedshiftException.getSQLException(RedshiftException.java:48)
at com.amazon.redshift.Driver.connect(Driver.java:303)
at java.sql/java.sql.DriverManager.g
浏览 1提问于2021-05-17得票数 0
回答已采纳
如何更改Amazon Redshift数据库中的列数据类型？
我无法更改Redshift中的列数据类型；有什么方法可以修改Amazon Redshift中的数据类型吗？
浏览 6提问于2013-06-14得票数 91
我正在开发Springboot应用程序，需要使用Springboot-starter jpa将数据存储到红移中。
但是我无法理解红移和我的springboot应用程序之间的联系。
这里是我对pom.xml:的依赖
<dependency>
<groupId>com.amazon.redshift</groupId>
<artifactId>redshift-jdbc42</artifactId>
<version>1.2.43.1067</ve
浏览 0提问于2021-01-04得票数 1
1回答
我在使用sbt组装scala项目时遇到了问题。我有一个涉及aws依赖jars的合并冲突。
我看了一大堆帖子，我不明白为什么我的合并策略不起作用。
这是我的汇编错误：
[error] (*:assembly) deduplicate: different file contents found in the following:
[error] /Users/xxxx/.ivy2/cache/com.amazon.redshift/redshift-jdbc42/jars/redshift-jdbc42-1.2.27.1051.jar:com/amazonaws/auth/AWSCredenti
浏览 25提问于2020-02-20得票数 1
回答已采纳
以下准备好的陈述
String pattern = "[\\w\\-\\.]+@([\\w\\-]+\\.)+[\\w\\-]{2,4}";
PreparedStatement statement = conn.prepareStatement("SELECT sum(case when regexp_count(email, ?) > 0 then 1 else 0 end) AS email_1 FROM \"testschema\".\"test_table\"")
statement.setObject(1, pat
浏览 4提问于2020-05-27得票数 0
我正在尝试设置Redshift docker。每当我尝试使用我的java代码运行容器时，我都会得到以下异常： Caused by: java.sql.SQLException: [Amazon][JDBC](11380) Null pointer exception.
at com.amazon.redshift.client.PGClient.startSession(Unknown Source)
at com.amazon.redshift.client.PGClient.<init>(Unknown Source)
at com.amazon.re
浏览 24提问于2020-07-06得票数 0
1回答
我正在将Redshift SQL迁移到snowflake SQL。需要建议如何在雪花的LAG()中包含偏移值作为表达式。关于偏移量，Redshift支持在LAG()中的表达式，而snowflake不支持。
例如:期望SF中的sql：
LAG(exp, **exp**) over (partition by col1 order by col2)
浏览 0提问于2020-09-30得票数 0
我正在尝试在我的Spring Boot应用程序中建立与Redshift数据库的连接。我的属性文件中有以下条目。
spring.datasource.driver-class-name=com.amazon.redshift.jdbc41.Driver
spring.datasource.url=jdbc:redshift://redshift_url/db_name
spring.datasource.username=username
spring.datasource.password=password
spring.datasource.testWhileIdle = true
spr
浏览 155提问于2019-11-19得票数 0
红移数据库连接问题每两周发生一次
java.sql.SQLException: [Amazon](500150) Error setting/closing connection: Not Connected.
at com.amazon.redshift.client.PGClient.isConnected(Unknown Source) ~[redshift-jdbc40-1.2.16.jar:na]
Exception is java.sql.SQLException: [Amazon](500150) Error setting/closing connecti
浏览 0提问于2019-08-13得票数 0
我遇到了一个JDBC连接到Redshift的问题，我不能完全解决。使用文档中给出的示例，当用户使用纯密码时，我可以很容易地连接到Redshift集群，但当用户使用带有#字符的密码时，我会收到身份验证失败。我能够使用SQL Workbench/J使用这两组凭据连接到集群。当我使用下面的代码时，没有连接问题。
DriverManager.setLoginTimeout(60);
Properties props = new Properties();
props.setProperty("user", "johndoe"
浏览 0提问于2017-03-30得票数 1
1回答
当试图从最新的清算/清算库映像v4.17.0连接到Redshift时，Liquibase返回一个错误：
Unexpected error running Liquibase: Driver class was not specified and could not be determined from the url (jdbc:redshift://aaaa.aaaa.eu-west-2.redshift.amazonaws.com:dddd:/aaaa).
在Liquibase v4.17.0的命令行版本中没有出现这种情况，检测到Redshift驱动程序类，并且连接工作。
当指定驱动程序并
浏览 8提问于2022-10-19得票数 1
回答已采纳
我是maven的新手，在将pom.xml中定义的依赖项下载到本地存储库时遇到了问题。正确下载pom.xml中定义的所有其他依赖项。此外，跨多个项目的其他依赖关系也工作得很好。我使用的是maven 3.5.2和aws sdk 1.11.86
导致问题的依赖项是aws redshift驱动程序，定义为-
<dependency>
<groupId> com.amazon.redshift</groupId>
<artifactId>redshift-jdbc42</artifactId>
<version&g
浏览 0提问于2020-04-01得票数 1
当使用JDBC函数将R连接到amazon (我使用的是windows 10)时，我得到以下错误：
Error in .jfindClass(as.character(driverClass)[1]) : class not found
我正在运行的代码是
install.packages("rJava")
install.packages("RJDBC")
library(rJava)
library(RJDBC)
download.file('http://s3.amazonaws.com/redshift-downloads/drivers/Red
浏览 2提问于2016-04-05得票数 4
回答已采纳
我正在尝试使用HikariCP和AWS Redshift来设置一个JDBC连接池，如下所示：
public class RedshiftConnector {
private static HikariDataSource dataSource;
private static int poolSize = 5;
public static void init() throws SQLException {
dataSource = new HikariDataSource();
dataSource.setDataSource(new com.amazon.redshif
浏览 0提问于2016-07-15得票数 2
回答已采纳
当我尝试使用快照恢复群集时遇到问题。如果有任何建议，我将不胜感激。
使用的代码是：
var con = new AmazonRedshiftClient(acess_key_id, secret_acess_key, Amazon.RegionEndpoint.USWest2);
var restore = new Amazon.Redshift.Model.RestoreFromClusterSnapshotRequest()
{
ClusterIdentifier = clusterIdentifier,
S
浏览 17提问于2016-07-29得票数 2
1回答
你好，我想寻求您的帮助，因为我有困难，我的J仪表连接到我们的红移数据库。您的答复将不胜感激。提前谢谢你。
我做的步骤
本网站上的-Download红移jar文件
与J抄库中的复制
-Open Jmeter和添加JDBC配置
-Input数据库URL、JDBC驱动程序类、用户名和密码
-Add JDBC请求(插入SQL查询)
-Run千兆计
-Error发生
示例参数仅限
数据库网址: jdbc:redshift://redshift-db.company.com/company
JDBC驱动程序类: com.amazon.redshift.jdbc42.Driver
用户名：
密码：
截图：
浏览 4提问于2022-11-09得票数 0
回答已采纳
我正在尝试使用他们网站上提供的JDBC模板将R与redshift连接起来。
我得到了最新版本的redshift jdbc，并调用了JDBC()，但它不起作用。
install.packages("RJDBC",dep=TRUE)
library(RJDBC)
download.file('https://s3.amazonaws.com/redshift-downloads/drivers/RedshiftJDBC42-1.2.10.1009.jar','RedshiftJDBC42-1.2.10.1009.jar')
driver_reds
浏览 0提问于2017-11-15得票数 0
2回答
我尝试在amazon redshift上插入新记录到表中。基本上，我从google电子表格下载行，并尝试将其作为Dataframe推送到表中。 from sqlalchemy import create_engine
engine = create_engine('postgresql://redshift_user:password,GB8@redshift-url:5439/datawarehouse')
connection = engine.raw_connection() 然后我就会兴奋起来 df.to_sql(name='test',con=eng
浏览 229提问于2020-11-06得票数 2
5回答
以下是我如何设置内容的一些要点：
我已经将CSV文件上传到S3，并设置了胶水爬虫来创建表和模式。我有一个Glue作业设置，它使用JDBC连接将数据从Glue表写入我们的Amazon Redshift数据库。Job还负责映射列和创建红移表。通过重新运行作业，我在redshift中得到了重复的行(正如预期的那样)。
但是，有没有办法在插入新数据之前替换或删除行？
书签功能已启用，但不起作用。
如何连接到redshift，在Python中将数据推送到redshift之前，删除作业中的所有数据？
浏览 0提问于2018-09-19得票数 0
我正在尝试在spark应用程序中从红移中提取数据。我包含了一些依赖项，并且我能够在本地计算机上做到这一点。但是当我尝试在Amazon EMR上运行应用程序时，我得到了以下错误。以下是我正在尝试执行的命令：
spark-submit --class classname --packages com.databricks:spark-avro_2.11:3.0.0,com.databricks:spark-redshift_2.11:2.0.1,com.databricks:spark-csv_2.11:1.5.0,com.amazon.redshift:redshift-jdbc41:1.2.1
浏览 1提问于2017-02-13得票数 0
我试图使用PySpark将数据写入Redshift。当我创建会话时，我可以从Redshift和S3读取文件，这正是我想要的。然而，当我试图写回Redshift时，我犯了错误。你知道我应该在剧本里改什么吗？
下面是我如何定义会话的方法：
spark = SparkSession \
.builder \
.config("spark.jars.packages", "org.apache.hadoop:hadoop-aws:2.7.0") \
.config("spark.driver.extraClassPath", &#
浏览 1提问于2021-02-13得票数 1
我正在尝试在Redshift中生成时间序列并将其插入到表中，但没有成功。到目前为止，我尝试了以下几点：
insert into date(dateid,date)
SELECT
to_char(datum, 'YYYYMMDD')::int AS dateid,
datum::date AS date
FROM (
select '1970-01-01'::date + generate_series(0, 20000) as datum
) tbl;
获取以下错误
SQL Error [500310] [0A000]: [Am
浏览 0提问于2019-03-11得票数 2
配置了VPC，秘密在秘密管理器中，并将正确的策略附加到Redshift集群中。
创建外部模式，使用
CREATE EXTERNAL SCHEMA schema_ext
FROM POSTGRES
DATABASE 'db' SCHEMA 'schema'
URI 'rds.some_symbols.eu-west-1.rds.amazonaws.com' PORT 5432
IAM_ROLE 'arn:aws:iam::999999999999:role/redshift-iam-role'
SECRET_ARN 'arn
浏览 21提问于2022-06-29得票数 2
回答已采纳
操作系统: centos
火花:1.6.1
sbt: build.sbt
libraryDependencies ++= {
Seq(
"org.apache.spark" %% "spark-core" % "1.6.1" % "provided",
"com.amazonaws" % "aws-java-sdk" % "1.10.75",
"com.amazonaws" % "amazon-kinesis-client" %
浏览 2提问于2016-05-18得票数 1
回答已采纳
我们希望对存储在Amazon中的数据进行大数据分析(目前为to级，但将随着时间的推移而增长)。
目前，我们的所有分析似乎都可以通过Redshift查询来完成(因此，可能不需要在我们的末尾进行分布式处理)，但我们不确定将来是否还会这样。
为了建立一个能够满足我们未来需求的通用系统，我们希望使用Apache进行数据分析。我知道可以从HDFS、HBase和S3将数据读入Spark，但是是否支持直接从Redshift读取数据?如果没有，我们可以将数据传输到S3中，然后用Spark读取数据。
，我的问题是，我们是应该直接通过Redshift的查询执行数据分析，还是应该使用上面的方法并通过ApacheSp
浏览 3提问于2015-02-16得票数 0
回答已采纳
我正在使用sql server，我们确实有一个while循环，它是我在存储过程中创建的。我正在评估redshift，并在redshift amazon中寻找等价物。以下是我正在尝试做的事情，我如何在amazon redshift中做到这一点：
Declare
@MaxId SmallInt,
@CurrId SmallInt
Set @CurrId = 0
Set @MaxId = 10
While @CurrId <= @MaxId
Select @CurrId
set @CurrId = @CurrId + 1
end
浏览 3提问于2014-03-02得票数 7
我只想知道是否可以使用通过脚本触发的Amazon Redshift 命令获得加载/失败的Amazon Redshift记录的数量？
浏览 6提问于2016-10-10得票数 0
回答已采纳
我正在将Spring Enterprise Java应用程序从Tomcat6迁移到Wildfly 16，但我还无法配置Amazon Redshift连接数据源。我得到了这样的信息： ERROR [org.jboss.as.controller.management-operation] (ServerService Thread Pool -- 42) WFLYCTL0013: Operation ("add") failed - address: ([
("subsystem" => "datasources"),
(&
浏览 78提问于2019-06-21得票数 0
我正在尝试使用java SDK在AWS redshift中创建一个临时表。
// Redshift JDBC 4.1 driver: com.amazon.redshift.jdbc41.Driver
String command = "CREATE TABLE test (FirstName varchar(255));"
Class.forName("com.amazon.redshift.jdbc41.Driver");
conn = DriverManager.getConnection(dbURL, props);
stmt = conn.c
浏览 3提问于2017-12-07得票数 2
我需要将增量数据从Amazon Aurora Postgres移动到Amazon Redshift。这将是一项日常工作。新的数据将被插入到Redshift中，如果现有数据有变化，它将被更新。对此有什么建议吗？
浏览 1提问于2020-06-16得票数 1
我需要在Redshift中构建一个SQL视图： 我有下表： ? 我需要获取以下格式： ? 其思想是，对于每个日期，具有对应于Date -5天的订单，对应于Date -6天的订单，以及对应于Date -7天的订单。 我正在努力寻找解决方案。任何帮助都是非常感谢的。 干杯!
浏览 8提问于2020-09-26得票数 0
回答已采纳
我试图在SQL中本地驱动器上输出从临时表到csv的所有内容(Redshift Amazon )
SELECT *
FROM #IDTable
INTO OUTFILE 'C:\\Users\\MYAN\\Documents\\out.csv'
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
ESCAPED BY '\\'
LINES TERMINATED BY '\n';
然后，我遇到如下错误消息：
亚马逊无效操作:语法错误在或接近“进入”位置: 24；
有人能帮忙
浏览 0提问于2018-11-08得票数 1
正在尝试从Amazon redshift db查找要获取当前年份的SQL查询。 尝试了以下查询，但不起作用： select DATE_PART_YEAR(SYSDATE);
select DATE_PART_YEAR(getdate());
浏览 57提问于2020-09-09得票数 0
回答已采纳
我正在尝试将Java应用程序连接到Redshift数据库。当我运行DriverManager.getConnection()时，它等待了很长时间(几分钟)，最后抛出了一个异常：
Exception in thread "main" java.sql.SQLException:
[Amazon](600001) The server closed the connection.
at com.amazon.support.channels.TLSSocketChannel.readBytes(Unknown Source)
at com.amazon.support.ch
浏览 0提问于2018-05-07得票数 0
我在Amazon上保存SalesForce数据。我想在Redshift上创建一个函数，将SalesForce 15 Char转换为18 Char。
但是这些函数中没有一个在Redshift上工作，我不能使用它\在Amazon上创建一个类似的函数。(不得不说我是新来的。
有人能有一个在Redshift上工作的代码吗？
浏览 2提问于2018-08-22得票数 3
回答已采纳
我希望定期将S3 (或其他字体)中的数据插入Amazon Redshift，即，当数据添加到我的S3存储桶时，我想要一个自动将其添加到Amazon Redshift集群的选项。
浏览 103提问于2021-08-16得票数 0
1回答
我试图在R中创建与Amazon的JDBC连接。按照下的指令，我创建了以下内容：
driver <- JDBC("com.amazon.redshift.jdbc42.Driver", "RedshiftJDBC42-1.2.1.1001.jar", identifier.quote="`")
url <- "jdbc:redshift://xxxxxx.us-east-1.redshift.amazonaws.com
:5439/user=xxx&password=xxx"
conn <- dbCon
浏览 2提问于2017-07-25得票数 0
我试着做一些很简单的事情:-)
驱动程序在ODBC x64中映射。
Imports System.Data.Odbc
Dim odbcconn As New OdbcConnection()
connstr = "Provider=MSDASQL;DSN=Redshift-awsuser;Driver={Amazon Redshift (x64)}; Server=gref-cluster-1.yyy.us-east-1.redshift.amazonaws.com; Database=xxx; UID=yyy; PWD=xxx; Port=1234"
odbc
浏览 10提问于2022-02-09得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
