我有下面的Oozie工作流程，假设我在执行操作"Do_task1“时手动终止了作业，但我仍然想执行操作"Do_task2”，尽管手动终止了oozie作业(当操作"Do_task1“正在运行时)。我该怎么做呢？<workflow-app name="
浏览 24提问于2019-01-31得票数 0
我的Oozie工作流有一个Java操作。例如，如果该操作的Oozie启动器任务由于"Container preempted by scheduler“而终止，则将尝试另一个Oozie启动器任务。所需的行为是:如果Oozie启动器任务被终止或失败，则使该操作失败。我如何在</e
浏览 16提问于2015-07-13得票数 0
1回答
我一直在尝试在oozie中的操作失败时触发操作。我可以使用error to node来完成此操作，如下所示<error to="kill"/>
如果我的需求是在oozie中当前操作失败时进行回滚，那么这将非常好地工作。我</
浏览 0提问于2015-07-21得票数 1
4回答
昨天我启动了一个oozie工作流程。它启动了两个工作，这两个工作停滞了一整天。我今天早上杀了他们，做了一个我现在想要测试的更改。在杀死这两个作业之后，就像是工作流变得松散，现在正在进行中。我想终止工作流，这样它就不会一直启动新的作业来替换我删除的作业。我如何在oozie命令行中</em
浏览 0提问于2012-08-24得票数 6
回答已采纳
1回答
我正在将现有的管道从spark 1.6.0迁移到spark 2.1.0(cdh 5.15.1)。我使用的oozie版本(4.1.0)不支持spark2操作，所以我们使用java操作来运行spark2作业。作业可以通过java action成功执行，但我面临的一个问题是，每当oozie工作流被终止时，spark应用程序都不会被终止，尤其是在运行集群模式时。我可以理解
浏览 1提问于2019-03-30得票数 0
2回答
可以使用oozie子工作流多次执行操作。我不知道该怎么做。
假设我需要调用map-还原操作N次。假设我将map-还原操作封装在子工作流中。我可以手动调用子工作流N次，方法是在我的oozie工作流中有N个动作(如本中所概述的)。但N需要是动态
浏览 3提问于2014-12-01得票数 0
回答已采纳
我在使用oozie的MR动作。并希望使用oozie提供的暂停/恢复功能。但是，当我们在Oozie上调用“暂停”(而不是杀死hadoop作业)时，它只更新oozie状态，而hadoop作业则继续运行到完成。当oozie工作流被挂起时，我希望立即终止hadoop作业。我猜那是不可能的对吧？
所以，我想我可以杀死oozie<
浏览 2提问于2014-12-27得票数 1
当我试图杀死一个从oozie工作中调用的火花作业时，它并没有被杀死。这只是显示工作流作业被杀了。然后，我从以下命令中检查了工作流日志它在日志中显示了这个错误。[0006849-180819131048313-oozie-oozi-W@MysparkApplication]
at o
浏览 0提问于2018-09-03得票数 1
回答已采纳
在hive中有一个表，它的标志值为1或0。在oozie工作流中使用hive操作读取这个蜂窝表，并检索此标志value.If，这个标志为1，如果标志值为0，则调用sqoop操作，然后终止此工作流并退出。如何从蜂箱操作中获取蜂箱查询的输出，并将其用于oozie工作流决策。
浏览 1提问于2016-02-22得票数 1
我已经成功地运行了Hue Oozie工作流编辑器(在Cloudera5.5.1 QuickStart VM中)中提供的示例Spark工作流(“通过启动Spark程序复制文件”)。我现在尝试使用oozie命令行工具手动运行它：
oozie job -oozie http://localhost:11000/oozie -config job.proper
浏览 4提问于2016-05-24得票数 2
回答已采纳
1回答
我有一些复杂的Oozie工作流要从迁移到GCP。工作流由shell脚本、Python脚本、Scala作业、Sqoop作业等组成。我遇到了一些可能的解决方案，其中包含了我的工作流调度需求：请告诉我，在业绩、成本计算和迁移复杂性方面
浏览 4提问于2019-12-02得票数 4
回答已采纳
2回答
我使用在Datalake中导入数据。我需要一个HDFS文件夹为每个表的数据库源。我有300多张桌子。我可以将所有300个Sqoop操作硬编码在一个工作流中，但是对于Oozie配置来说，工作流太大了。，因为它减慢了系统的速度(它保存在数据库中)，而且很难维护。例如：TABLE_TWOTABLE_TEN
在这里，我<
浏览 0提问于2015-11-11得票数 2
2回答
我有以下用例。在oozie工作流中，map-还原操作生成一系列诊断计数器.我希望在map后面有另一个java操作--还原操作。这个想法起作用的关键是，java操作必须能够访问上游映射中的所有计数器--还原操作，就像oozie如何在其工作流xml中使用EL来访问它们一样。
现在我不知道从何说起。因此，任何指针都是
浏览 0提问于2015-07-26得票数 0
回答已采纳
我试图在cloudera集群中使用oozie ssh action运行工作流。我需要的是只从特定节点运行我的脚本。为此，我找到了下一个解决方案-- oozie ssh action。在配置这个工作流时，我遇到了一个问题，在信任中，oozie只使用“用户”和“主机名”，而我还需要为ssh连接使用私有ssh键。
是否可以使用私钥执行
浏览 6提问于2015-08-27得票数 2
回答已采纳
1回答
无法杀死Oozie的工作
、、、
我创建了一个Oozie作业，它在执行时触发一个单元脚本。我创建的工作流出现了一些错误，导致作业陷入了预备役模式。但是，当我试图使用oozie作业http://<oozie-server>:11000/oozie/ -oozie -kill 0000032-160617142637089-oozie-oozie从命
浏览 0提问于2016-06-28得票数 1
1回答
例如：要在MySQL条形表中加载数据，为什么有一个MapReduce进程？sqoop export --connect jdbc:mysql://localhost/hduser --table foo -m 1 --export-dir /foo/bar由于大量数据正被加
浏览 3提问于2014-04-07得票数 1
回答已采纳
1回答
我在Hadoop中有一个使用Sqoop -> Pig+MR -> Hive的复杂工作流。
一旦某些特定的Oracle表使用日志数据更新，即说明以前ETL进程的完成，就应该触发此流。这个主要工作流程由Oozie组成。我还想在必要时使用Oozie来触发进程，因为Oozie是我的组织中最成熟的工作流调度程序。我</
浏览 0提问于2015-03-31得票数 1
我必须运行一些Spark python脚本作为Oozie工作流，我已经在本地使用Spark测试了这些脚本，但当我将它们提交给Oozie时，我不知道为什么不能工作。以下是spark操作的工作流配置：Mode: clientJars/py files: hdfs://localhost:8120/user/c
浏览 1提问于2016-12-29得票数 2
如何将Oozie配置值传递给工作流操作？复制了这些信息，因为Oozie已经知道作业跟踪器的URL。可以从worklow.xml文件中引用Oozie配置吗？我尝试了以下几种方法，但没有成功：这将返回一个错误，指出变量'oozie<
浏览 0提问于2016-03-08得票数 2
有没有办法在Oozie中捕获火花作业的控制台输出？我希望在火花作业之后的下一个操作节点中使用特定的打印值。我在想，我可能已经使用了${wf:actionData("action-id")["Variable"]}，但是看起来oozie不具备捕获火花操作节点输出的能力，与Shell操作不同，您可以只使用ech
浏览 4提问于2017-05-25得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
