前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >专栏 >【Spark Operator】executor解析driver servicename出现unknownhostexception错误

【Spark Operator】executor解析driver servicename出现unknownhostexception错误

原创
作者头像
runzhliu
发布2020-08-05 19:39:41
发布2020-08-05 19:39:41
8090
举报
文章被收录于专栏:容器计算容器计算

Spark Operator 中的 executor 和 driver 是通过 driver 的 service 来通信的,如果 Kubernetes 集群的 dns 组件有问题,那么 executor 就会有可能解析不到 driver 的域名,导致无法注册,最后 driver 被迫退出。

关于 unknownhostexception,有几个地方需要排查一下的。

  1. driver/executor 容器是否有设置 http_proxy 等环节变量
  2. Kubernetes 的 dns 组件是否正常,是否需要扩容

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档