在子作业的所有迭代成功完成后，在主作业中运行组件
意味着在一个较大的作业中，子作业是可以被分成多个迭代的。每个子作业可以独立运行并完成任务，当所有子作业的迭代都成功完成后，主作业会调用这些子作业的组件来进行最终的处理。
这种设计模式的优势在于提高了作业的可扩展性和可维护性。通过将主作业和子作业分开，我们可以更容易地对其进行独立开发和调试。同时，由于子作业可以并行运行，整个作业的执行时间也可以得到缩短。
这种设计模式在各种场景中都有广泛的应用。例如，在数据处理领域，可以将大规模的数据分成多个子作业，每个子作业处理其中一部分数据，最后将结果合并。在机器学习领域，可以将模型训练任务拆分成多个子作业，每个子作业训练一部分模型，最后将模型组合起来。
在腾讯云中，可以使用腾讯云的批处理服务来实现这种设计模式。批处理服务提供了灵活的作业定义和管理功能，可以方便地创建、启动、监控和调度作业。您可以使用批处理服务来管理主作业和子作业的执行，并通过定义不同的任务组件来实现功能的分解和组合。
相关腾讯云产品链接： 腾讯云批处理服务（Tencent Batch）：https://cloud.tencent.com/product/batch
相关·内容
我有一个talend父作业，它在Iterate Flow上对子作业运行20次。我正在尝试在子作业的所有迭代完成后运行另一个tjava。在将tjava与组件ok上的子作业连接时，它会在每次迭代中运行。 有没有一种方法可以在所有迭代</
浏览 26提问于2021-08-14得票数 1
回答已采纳
我在jenkins有一个多任务，它会在另一项工作完成后触发。
假设有一个“主”构建作业，而多任务“父”依赖于它。父程序没有任何构建步骤，它有3个子作业-- "child1“、child2、"child3". " child2”是UI测试套件。“主”作业定期运行，如果成功，它将调用调用“父”作业，这将最终触发所有子作业
浏览 0提问于2018-02-01得票数 1
我有一个带有错误处理的talend作业(单tRunjob)，主作业调用一个具有三个"tRunjob“的子作业，每个子作业都必须依次在”onsub作业ok“触发器上执行。为了测试主要的作业错误处理，我给第二个tRunjob上的“tRunjob”组件指定了一个错误的源文件名。当我执行主作业</em
浏览 3提问于2017-05-18得票数 1
回答已采纳
是否可以设置一个作业X来按顺序构建作业A、B和C的序列(B不会在A成功完成之前开始C不会在B之前开始...)没有在B中指定应该在A完成后启动，等等？准确地说，我想设置一个“主”作业，它按顺序执行子作业，而不修改子作业。(或者)有没有一种方法可以指定从列表文件或文本文件按顺序运行哪些所有作业？？
我可以使用一些插件来执行此操作吗？
浏览 4提问于2015-04-03得票数 0
3回答
我有一项Hudson的工作，就是对第三方库进行签出/更新。将此工作称为作业A。如果这是不可能的，有人可以推荐另一种方法来达到同样的效果吗？
浏览 0提问于2010-05-15得票数 2
回答已采纳
我有一个Talend作业，我正在尝试重构以迭代方式运行。原始作业将把一个值放入预作业->tJava中的全局映射中，然后fileInput使用该值在子作业中打开文件(tFileInputDelimited)并执行rowMain。但是，我不能从第一个子作业中触发第二个子作业，并且不知道如何从一个迭代<
浏览 3提问于2014-08-18得票数 0
回答已采纳
我正试着在tLoop里做一个孩子的工作。子作业连接到salesforce，并将"Account“对象下载到本地Server表。与Salesforce的连接存在问题，很少尝试连接。因此，我把连接的东西放在子作业中，现在试图把子作业称为循环。下面是我父母工作的图片。正如您在图像中看到的，由于子作业中的<
浏览 0提问于2018-07-25得票数 1
回答已采纳
我正在使用jenkins多作业插件在同一构建阶段执行多个并行构建，并且我希望在主多作业项目中显示测试结果，因此我选择了一个构建后操作步骤来“聚合下游测试结果”，并选择了“自动聚合所有下游测试”和“在结果中包含失败的构建”这两个选项，但当作业完成后，我进入主多作业项目，它在“最新测试结果”链接下显示“无测试”...我的下游并行运行的</em
浏览 0提问于2014-04-09得票数 9
回答已采纳
我正在测试一个将大量数据从oracle数据库迁移到salesfroce的作业，该作业工作正常，但有时由于数据库的一些临时问题，作业失败。有没有办法在一段时间后自动失败的情况下重新运行作业(例如:当连接失败时，10分钟后重试)？我在互联网上搜索，但我确实找到了任何结构化的解决方案，我真的被这个问题卡住了。这在talend是可以实现的吗？如果是，使用的组件</
浏览 0提问于2017-03-26得票数 0
我必须处理包含路径和状态信息的文件行，并启动行/路径的上载操作。在某些情况下，上传可能会失败，所以我必须保留行，在其他情况下，当上传成功时，行可以被删除。主要的问题是，所有的东西都是在后台运行的，用户可以随时关闭软件。在这种情况下，我设置了一个取消令牌，文件操作就完成了。直到现在，文件总是很小。因此，我将仍然需要的所有行复制到一个新文件中，并替换了旧文件。用户当前收到一条消息，即仍有正在<
浏览 7提问于2021-08-13得票数 0
1回答
尝试对现有的Talend作业进行故障排除，该作业具有许多迭代和子作业，这些作业是由不再在公司工作的开发人员创建的。遇到了子作业的问题，希望这里有人能回答。通过阅读文档，我知道OnSubjobOk10指示作业将在#10完成后执行。但是在一个没有名字的工作流程中，我怎么知道哪一个是Subjob#10呢？我可以假设它
浏览 1提问于2015-09-16得票数 0
我有一个包含数百个作业的HTC condor的dag文件。我想向dag中再添加一个作业/节点，但条件是它应该在所有其他作业/节点完成后运行。我曾尝试将其设置为所有作业的子级，但如果其他作业之一失败，该作业将不会运行。
有没有一种方法可以让这个作业在结束时<
浏览 1提问于2017-04-26得票数 1
在发布这篇文章之前，我做了一些搜索，找不到talend组件，它将执行图像中提到的“任何失败”检查。如有任何意见，我们将不胜感激。我有多个tRunjobs，它必须一个接一个地执行“one”，但是当任何一个tRunjob失败时，作业首先必须捕获故障日志并发送邮件，然后中止，我尝试将其作为图像，我特别寻找组件“任何故障”，它将检查任何tRunjob上的任何故障。哪个组件能做到这一点？
浏览 0提问于2017-05-16得票数 1
回答已采纳
正如标题所提到的，当我启动bigquery上载作业时会发生什么，比如说，在JSON文件中加载了50%的行之后，作业失败了。bigquery是否回滚了加载作业的所有内容，还是只剩下50%的数据被加载？我每天都把数据附加到一个表中，并且保持不重复是非常重要的。我们正在使用
浏览 2提问于2013-09-03得票数 0
回答已采纳
在这种情况下，我需要在不等待的情况下用3次迭代(下面的示例3)触发我的作业，但是在触发所有3个作业之后，这必须等待直到所有3个作业都成功完成，而不管是否失败或通过。我使用的是wait:true，但这将等待每次迭代，这不是我想要的。如果我使用wait:false，循环中的所有迭代都完成后，它就不
浏览 7提问于2021-08-17得票数 1
回答已采纳
我希望在运行一个作业时并行地运行一组Jenkins作业。主作业接受一个参数，我希望在每个作业上传递参数。，在孩子的工作中.但是主作业本身似乎是挂起的，并且显示它的状态仍然在运行第一个子作业，即使所有子作业都完成了。还值得一
浏览 6提问于2022-07-29得票数 2
2回答
我有两个服务器(主服务器和二级服务器)，以及一个使它们保持同步的AG。1.我要求主服务器上的所有作业与辅助服务器上的作业保持同步。2.然而，我只想让这项工作在初级阶段运行，而不是在第二阶段运行。有什么我能做的吗？有sql代码吗？请解释一下我是DBA的新手。
浏览 0提问于2021-05-25得票数 -1
1回答
我在talend有个工作，把一些数据从一个数据库迁移到另一个数据库.在数据迁移结束时，我应该使用SYSDATE更新源数据库中最后一次提取的日期，以便它可以作为下一次提取的标准。UPDATE MIGR_FOLLOWUP SET LAST_EXTR = SYSDATE WHERE SYSTEM = 'TARGET3'
我想在talend中进行更新，我想它应该是由OnSubjobOK触发的一个组件，但是我似乎无法理解如何用简单的方式来实现它……我可能想到的
浏览 2提问于2014-08-14得票数 1
回答已采纳
我有一个调用另一个trunjob的talend Main job (trunjob)，里面有10个子ETL作业。当主作业执行时，在日志(stdout)中，我只看到子作业输出，其中有一个"tlogrow“组件，我没有看到任何其他信息，例如，哪个作业已经启动，哪个作业正在运行，哪个作业已经完成。这将在调试时非常有用，并且在
浏览 6提问于2017-06-21得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
