pandas‘外部’合并多个csvs使用太多的内存

import pandas as pd

# 读取第一个CSV文件
df1 = pd.read_csv('file1.csv', dtype={'column1': int, 'column2': float})

# 读取第二个CSV文件
df2 = pd.read_csv('file2.csv', dtype={'column1': int, 'column2': float})

# 读取更多的CSV文件...

# 合并DataFrame对象
merged_df = pd.merge(df1, df2, on='common_column')

# 合并更多的DataFrame对象...

# 合并第一个CSV文件到新文件
merged_df.to_csv('merged.csv', index=False)

# 逐个合并后续的CSV文件到新文件
for i in range(2, num_files + 1):
    df = pd.read_csv(f'file{i}.csv', dtype={'column1': int, 'column2': float})
    merged_df = pd.read_csv('merged.csv')
    merged_df = pd.merge(merged_df, df, on='common_column')
    merged_df.to_csv('merged.csv', index=False)