列名中包含破折号/连字符的PySpark Sql
PySpark SQL是Apache Spark的一个模块，用于处理结构化数据。它提供了一种高级的数据处理接口，可以使用Python编程语言进行数据分析和处理。
在PySpark SQL中，列名中包含破折号/连字符是允许的。破折号可以用作列名中的分隔符，以提高可读性。例如，可以使用以下代码创建一个包含破折号的列名：
from pyspark.sql import SparkSession
# 创建SparkSession
spark = SparkSession.builder.getOrCreate()
# 创建DataFrame
data = [("Alice", 25), ("Bob", 30), ("Charlie", 35)]
df = spark.createDataFrame(data, ["name", "age"])
# 添加包含破折号的列名
df = df.withColumnRenamed("age", "birth-year")
# 显示DataFrame
df.show()输出结果为：
+-------+----------+
| name|birth-year|
+-------+----------+
| Alice| 25|
| Bob| 30|
|Charlie| 35|
+-------+----------+在PySpark SQL中，可以使用各种操作和函数对包含破折号的列进行处理。例如，可以使用select操作选择特定的列：
# 选择包含破折号的列
df.select("birth-year").show()输出结果为：
+----------+
|birth-year|
+----------+
| 25|
| 30|
| 35|
+----------+PySpark SQL还提供了丰富的函数和操作符，用于对列进行计算、过滤、排序等操作。可以根据具体需求选择合适的函数和操作符进行数据处理。
对于PySpark SQL中包含破折号的列名，腾讯云提供了一系列相关产品和服务，如腾讯云的云数据库TDSQL、云数据仓库CDW、云数据湖CDL等。这些产品和服务可以帮助用户在云计算环境中高效地存储、管理和分析结构化数据。
更多关于腾讯云相关产品和服务的信息，可以访问腾讯云官方网站：https://cloud.tencent.com/
相关·内容
这个问题在这里已经有答案了 ： 如何在Spark SQL中使用连字符转义列名 (3个答案) 列名中包含破折号/连字符的PySpark Sql (1个答案) 使用selectExpr选择其中包含特殊字符的spark dataframe列 (1个答案) 如何在SparkContext中</
浏览 70提问于2020-11-30得票数 0
我有PySpark数据帧df data = {'Passenger-Id': {0: 1, 1: 2, 2: 3, 3: 4, 4: 5},'Age': {0: 22, 1: 38, 2: 26, 3df.filter(df.Age == 22).show() 但下面不起作用，因为列名中的- df.filter(df.Passenger-Id == 2).show() Passenger：“DataFrame”对象没有“Passenger”属性 我在spark sql
浏览 13提问于2020-09-15得票数 0
列名可以包含连字符或破折号。我想用连字符替换所有的破折号，这样我就可以用连字符读取列值了。行'abc-def‘。
浏览 0提问于2018-07-10得票数 0
1回答
我是PySpark的新手。我有一个列名中包含连字符的csv文件。我可以成功地将文件读取到数据帧中。然而，当将df写入orc文件时，我得到一个错误，如下所示-当我通过删除连字符来重命名列时，我可以将数据帧写入但是我需要列名有连<
浏览 32提问于2021-02-13得票数 0
好的，我们最近遇到了一个问题经过进一步的调查，我们发现它是连字符。好吧，这是我们首先想到的。在进一步的研究中，我们发现它是一个破折号(或en破折号)。基本上，发生这种情况的原因是人们将粘贴值从word复制到此列中，word会自动将连字符</em
浏览 0提问于2010-05-07得票数 7
回答已采纳
1回答
有些记录中可能有破折号。我想找到那些记录。 select * from part 如何让SSMS搜索破折号而不是<
浏览 1提问于2020-07-07得票数 0
我正在尝试适合一个可以选择包含破折号(-)的长字符串。当它包含破折号时，它应该在这些破折号处连字符。我尝试过word-break: break all;，但它不能在连字符处中断它。有没有办法在纯css中实现我的目标？
一个例子：
浏览 21提问于2019-08-07得票数 2
回答已采纳
1回答
我有带有'State1 - City - 1-1'，'State1 - City - 1-2' ....etc形式的列名的dataframe。当我运行流光代码：st.line_chart(df)时，我得到了错误：
ValueError:指定变量编码字段时没有类型；无法推断该类型，因为它与数据中的任何列不匹配。出于测试目的，如果我将所有列名更改为整数，就会得到所需的图表。
浏览 2提问于2020-12-09得票数 1
回答已采纳
1回答
简单的问题:假设我们那么如何从pyspark.sql.column.Column对象F.col('a')中恢复列名字符串'a‘。例如，如果我们把str(F.col('a'))，我们有而不是原始列名'a‘。
浏览 2提问于2020-05-10得票数 0
回答已采纳
1回答
最近从我的组织发出的一封电子邮件中包含了一个破折号—字符。然而，Gmail似乎将这个字符降级为连字符。连字符似乎也显示得很好。
我还尝试了一系列其他字符，但似乎只有破折号有问题。有没有办法让破折号在Gmail中正确显示？是否还有其他字符不能正确显示？
浏览 3提问于2015-11-25得票数 0
2回答
当我重新启动apache时，会得到以下错误：以下是我的conf文件指令： ServerNamelogs/sites_error_log</VirtualHost>我用@MichaelHampton在连字符上的捕捉来解决错误因此，我逐步完成了指令，1
浏览 0提问于2017-02-01得票数 1
回答已采纳
AAE的"PDF“命令允许您将.pdf拆分为一个，用于选定的页面数或页面范围()(图1)。“带有选定页面的单个文件”字段还允许您输入变量。但是，如何创建包含连字符(-)的变量，而不将其视为呢？图2中的变量AAE将把连字符(-)看作操作符，并减去这两个嵌套变量。我试着把连字符放在括号里，双引号，单引号，我在AAE的文档中找不到任何东西，说
浏览 1提问于2019-05-02得票数 0
回答已采纳
我对MySQL (来自MySQL)有些陌生，最近在尝试向数据库中插入值时遇到了一些让我非常困惑的事情。在我看来，上面的字符串应该是有效的..我甚至尝试在phpMyAdmin唯一能使其正常工作的事情是，如果我在S
浏览 1提问于2011-09-13得票数 6
回答已采纳
1回答
-Z, --selinux-user SEUSER new SELinux user mapping for the user account
它说我们可以使用-c选项，那么为什么它不接受我的命令呢若要再现上述错误，只需运行sudo useradd dtracy以创建具有默认值的用户dtracy，然后尝试通过上面的usermod命令进行修改。
浏览 0提问于2019-09-04得票数 3
回答已采纳
如何在Sublime Text中包含连字符(破折号)的单词上双击2选择整个单词，而不仅仅是由连字符分隔的单词的一部分？
浏览 0提问于2012-11-16得票数 27
回答已采纳
1回答
Golang匹配破折号(连字符)这与-(破折号)字符匹配。regexp.MustCompile(`[^[0-9A-Za-z\-]\s]`)如何匹配非alphanumeric而非-
浏览 1提问于2014-12-30得票数 0
回答已采纳
我正在使用PowerShell备份我们计划从AD中删除的DLs列表。这些名称中有大量的连字符，其中Get-ADGroup "DL – Clinical实验室监督员“查找组并带回属性，但是当我尝试通过变量在foreach循环中提取该名称时，我会得到这个奇怪的错误：
无法找到具有身份的对象它周围有一个钻石形状，有时它是倒过来的？有谁知道为什么这个角色在广告中会这样吗？在作为csv的Excel中，破折号
浏览 2提问于2017-05-10得票数 1
回答已采纳
我希望修改几个列中的字符串(例如，包含“声音”字符串的所有列)，例如将“，”替换为“.”。至于，我知道我必须使用动态SQL。,' + @to_remove + ','+ @to_add + ');'EXEC sp_executesql @sqlEXEC dbo.RemoveStringInColumn'COL_1', '
浏览 1提问于2017-01-03得票数 2
回答已采纳
我有一张我用作科学论文数据库的工作表。我从不同的来源复制期刊文章的标题(一些可能来自电子邮件，其他的可能是网页上的链接，或者只是文章页面上的标题)。我设置了条件格式，如果我添加的是列表中已经存在的标题，它会让我知道。我注意到有一些标题“忽略”了条件格式，而且看起来所有的违规者中都有连字符。如果我删除连字符，则条件格式将起作用。因此，来自相同标题的
浏览 1提问于2021-10-01得票数 0
我在SQL Server2008中添加了一个字段，它将列名放在括号中，如下所示：[column2]。其他列名没有括号。括号是什么意思？
浏览 3提问于2010-08-24得票数 25
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
