如何使用docker将参数传递给spark-submit

FROM openjdk:8-jre

# 安装Spark
RUN wget https://downloads.apache.org/spark/spark-3.2.0/spark-3.2.0-bin-hadoop3.2.tgz && \
    tar -xzf spark-3.2.0-bin-hadoop3.2.tgz && \
    mv spark-3.2.0-bin-hadoop3.2 /spark

# 设置环境变量
ENV SPARK_HOME=/spark
ENV PATH=$PATH:$SPARK_HOME/bin

# 设置工作目录
WORKDIR /app

# 复制应用程序代码到容器中
COPY app.py /app

# 设置启动命令
CMD ["spark-submit", "--master", "local[*]", "app.py"]

docker build -t my-spark-app .

docker run -it my-spark-app arg1 arg2 arg3

import argparse

# 创建参数解析器
parser = argparse.ArgumentParser()
parser.add_argument("arg1", help="参数1")
parser.add_argument("arg2", help="参数2")
parser.add_argument("arg3", help="参数3")
args = parser.parse_args()

# 打印参数值
print("参数1:", args.arg1)
print("参数2:", args.arg2)
print("参数3:", args.arg3)

# 在这里编写Spark应用程序的逻辑