WeData执行资源组过载

问题现象：

调度、集成资源组内存使用率持续高于阈值80%；

项目执行资源组-->调度资源，通过告警资源组名称点进去，查看内存使用率（%）监控

项目执行资源组-->集成资源-->监控，查看内存使用率（%）监控

可能影响：

• 内存资源不足，任务无法下发，产生阻塞
• 资源组pod节点内存过高，容易导致pod重启，任务重新运行，影响产出时间

处理建议：

• 适用于所有资源组，检查资源组监控，若发现以下情况，建议增加资源包

1. 业务高峰期间，内存长时间处于打满状态，且任务无法按要求时间产出。

• 适用于集成资源组

1. 对于写入hive/dlc/iceberg数据源，且数据量较大（百万级以上）场景，建议资源包规格升级为8c32g，资源包数量不小于2个。