不同AWS组件的调度- Glue和EMR
不同AWS组件的调度- Glue和EMR
提问于 2021-05-08 09:09:19
我想知道我会如何在AWS上解决下面的问题？-或者它是否不可能？
- 用于某些散装火花处理的瞬态EMR集群
- 当集群终止时，然后才使用Glue作业来执行一些有限的处理
我不相信AWS Glue触发器会对环境有所帮助。
或者说，继续使用EMR集群，这不是一个好的用例吗？胶水可以写到SAP Hana与适当的连接器和红移频谱是常见的用例加载红移通过Glue作业与红移频谱。
回答 2
Stack Overflow用户
回答已采纳
发布于 2021-05-10 03:17:28
您可以使用AWS Step函数使用“运行作业”服务集成。Step功能支持EMR和Glue集成。详情请参阅链接。
Stack Overflow用户
发布于 2021-05-11 15:57:35
在与亚马逊就这方面进行了交谈后，他们表示，通过MWAA的气流是现在的首选。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/67445877
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号