首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

在PySpark中如何将两列堆叠成一列?

在PySpark中,可以使用concat函数将两列堆叠成一列。concat函数用于连接多个列,并将它们合并为一个新的列。

以下是使用concat函数将两列堆叠成一列的示例代码:

代码语言:txt
复制
from pyspark.sql import SparkSession
from pyspark.sql.functions import concat

# 创建SparkSession
spark = SparkSession.builder.getOrCreate()

# 创建示例数据
data = [("John", "Doe"), ("Jane", "Smith"), ("Alice", "Brown")]
df = spark.createDataFrame(data, ["first_name", "last_name"])

# 使用concat函数将两列堆叠成一列
df = df.withColumn("full_name", concat(df.first_name, df.last_name))

# 显示结果
df.show()

运行以上代码,将会得到如下输出:

代码语言:txt
复制
+----------+---------+----------+
|first_name|last_name|full_name |
+----------+---------+----------+
|John      |Doe      |JohnDoe   |
|Jane      |Smith    |JaneSmith |
|Alice     |Brown    |AliceBrown|
+----------+---------+----------+

在这个例子中,我们使用concat函数将first_name列和last_name列堆叠成了一个新的full_name列。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

没有搜到相关的合辑

领券