首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >WeData任务异常日志查看

WeData任务异常日志查看

原创
作者头像
用户10546873
修改2025-05-26 10:37:03
修改2025-05-26 10:37:03
1480
举报

场景一:EMR引擎相关任务:Hive SQL、Spark SQL等类型任务运行异常

进入WeData对应项目,在运维中心➡️实例运维➡️周期实例页面,根据任务ID获取异常任务实例,点击查看日志;

根据任务日志排查,详细信息也可以在日志里获取YARN任务ID,登陆EMR获取运行日志

登陆EMR,点击集群服务➡️作业查询,查看对应任务运行情况

获取yarn日志命令:yarn logs -applicationId [appid] > app.log

场景二 DLC引擎相关任务:DLC SQL、DLC Spark等类型任务运行异常

进入WeData对应项目,在运维中心➡️实例运维➡️周期实例页面,根据任务ID获取异常任务实例,点击查看日志;

根据任务日志排查,详细信息也可以跳转到DLC页面,通过DLC任务ID,查看具体报错内容

跳转到DLC页面,点击历史任务实例,根据任务ID查看具体运行日志

场景三 MYSQL、SQL SERVER等其他类型任务运行异常

进入WeData对应项目,在运维中心➡️实例运维➡️周期实例页面,根据对应数据源引擎报错信息进一步排查;

备注:对应突然异常的任务实例,大多是数据源本身异常或有脏数据,可登陆对应数据源查看任务失败时间段服务运行情况;

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 场景一:EMR引擎相关任务:Hive SQL、Spark SQL等类型任务运行异常
  • 场景二 DLC引擎相关任务:DLC SQL、DLC Spark等类型任务运行异常
  • 场景三 MYSQL、SQL SERVER等其他类型任务运行异常
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档