首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Spark远程调试

    1.如何使用远程Master Debug 在Master端的spark-env.sh文件中添加如下参数 export SPARK_MASTER_OPTS="-Xdebug -Xrunjdwp:transport...information unavailable 4860 Jps 通过IDE 建立一个remote application Master主机IP 10000 在本地的代码打断点,debug按钮开始调试...---- 2.如何使用远程Worker Debug 在Worker所在节点的配置文件中添加一个环境变量 export SPARK_WORKER_OPTS="-Xdebug -Xrunjdwp:transport...information unavailable 2923 Jps 用一个IDE工具连接 建立一个remote application 172.16.0.12 10001 在本地的代码打断点,debug按钮开始调试...cn.itcast.spark.WordCount的main方法 用一个IDE工具连接 建立一个remote application 172.16.0.13 10002 在本地的代码打断点,debug按钮开始调试

    1.8K70
    领券