Pyspark :内部连接两个pyspark数据帧，并选择第一个数据帧中的所有列和第二个数据帧中的几个列

from pyspark.sql import SparkSession

# 创建SparkSession对象
spark = SparkSession.builder.getOrCreate()

# 创建第一个数据帧
dataframe1 = spark.createDataFrame([(1, 'John', 25), (2, 'Jane', 30), (3, 'Bob', 35)], ['id', 'name', 'age'])

# 创建第二个数据帧
dataframe2 = spark.createDataFrame([(1, 'Engineer'), (2, 'Doctor'), (3, 'Teacher')], ['id', 'profession'])

# 内部连接两个数据帧
joined_dataframe = dataframe1.join(dataframe2, on='id', how='inner')

# 选择第一个数据帧中的所有列和第二个数据帧中的几个列
selected_columns = ['id', 'name', 'age', 'profession']
result_dataframe = joined_dataframe.select(*selected_columns)

# 打印结果数据帧
result_dataframe.show()