我们正在从Spring Batch 2.2升级到Spring Batch 4.1。我的配置如下所示：Spring Batch Partition Job Aggregation Problems当我启动服务器时，我看到以下日志消息(我正在尝试使用JMS response运行)。] and [org.springframework.batch.core.StepExecution] 结果是消息聚合不能像预期的那样工作。我看到的<
浏览 53提问于2020-08-27得票数 0
我在三台机器上运行spring batch作业。例如，数据库有30条记录，每台机器上的批处理作业必须提取唯一的10条记录并对其进行处理。
我读了分区和并行处理，有点迷惑，哪一个更合适？感谢你的帮助。
浏览 2提问于2013-10-20得票数 0
我在批处理作业中使用步骤分区，该作业部署在分布式Spring环境中。我想知道TaskExecutorPartitionHandler在我们的例子中是否使用数据传输是兔子MQ？:step id="startLoopStep"> </batch:step>
<batch
浏览 1提问于2015-12-31得票数 0
回答已采纳
我们当前的环境：Spring 5.3.18在较高的层次上，我们的架构意图是将启动线程与执行线程从物理上分离出来，从而在工作节点上跨可用处理器执行繁重的工作负载步骤给出的示例(实际上，我在互联网上找到的所有示例)都是编写的，好像有一个"A“步骤正在远程运行。由于Spring和Java作用域的一些特性，我
浏览 3提问于2022-08-02得票数 0
回答已采纳
我正在尝试使用spring batch分区来处理使用rest服务的大块数据。文档中说PartitionHandler实现可以是自定义的web服务。是否有类似于MessageChannelPartitionHandler的web服务分区处理程序的默认实现？
浏览 0提问于2018-03-15得票数 1
1回答
Spring集成-生产者队列容量限制
我们使用带有MessageChannelPartitionHandler的远程分区来发送分区消息到队列(ActiveMQ)，以便对工作人员进行挑选和处理。作业有大量的数据需要处理，许多分区消息正在发布到队列，来自replyChannnel的响应聚合器由于消息超时而失败，因为所有消息都不能在给定的时间内处理。我们还试图通过使用队列容量<integration:queue ca
浏览 3提问于2021-06-08得票数 0
回答已采纳
我用Spring Batch创建了一个小的概念验证(POC)，它使用了MessageChannelPartitionHandler。我们的想法是在生产环境中的多个节点上部署代码。我的问题是，主节点除了使用像ActiveMQ这样的消息中间件向从节点发送分区消息之外，还能做从节点的工作吗？主节点是否被限制为只能发送消息？public PartitionHandler partitionHandler(M
浏览 35提问于2019-01-03得票数 1
我们已经将大量Spring批处理分区作业从2.2迁移到4.x (分区作业的XML配置)。当我调试分区作业时，我得到这个堆栈跟踪：
2020-05-13 17:03:38,311 ERROR [org.springframework.batch.core.step.AbstractStep]cannot be cast to class java.util.Collection (org.springframework.batc
浏览 9提问于2020-05-14得票数 0
1回答
我正在编写一个远程分区作业，并且能够使用共享数据源(MySql)很好地运行该作业，但是当我想要运行不希望在主服务器和远程从服务器之间共享数据库的作业时，远程从服务器在收到来自主服务器的消息时会失败，并出现以下异常Caused by: org.springframework.batch.core.step.NoSuchStepException: No StepExecution could be locatedStepExecutionRequest: [jobExec
浏览 12提问于2018-01-15得票数 0
回答已采纳
我使用spring批处理分区和使用rabbitmq作为中间程序实现了我的批处理作业。
我研究了文档，并参考了这些单元测试。分区器将输入交换名划分到不同的分区步骤执行上下文中，MessagePartitionHandler将通过rabbitmq队列将stepExecutionRequests作为消息发送到不同的服务器，并在不同的服务器上并发执行步骤我需要担心这个问题还是MessageChannelPartiti
浏览 1提问于2014-06-08得票数 1
回答已采纳
目前，我们正在将一个批处理作业从java迁移到spring batch.This，批处理作业从数据库和web服务获取输入。我们需要在四台服务器上运行此作业，以提高性能，因为此作业正在处理大量数据。上述场景是否可以通过spring batch中的远程分区来实现？请在这方面帮帮我。
浏览 0提问于2014-01-16得票数 2
1回答
要求：-使用spring批处理定义远程分区
queueCapacity = 100 chunkSize = 10
我已经定义了分区类，它返回的executionContext大小与网格大小相同
浏览 0提问于2019-06-13得票数 0
回答已采纳
我希望在后台通过配置为远程分区配置JSR-352批处理作业，而不必在作业定义中显式定义控制器/工作者( JSR-352规范无论如何都不支持)。IBM通过其“多WebSphere”特性提供了此功能，您可以在配置文件(server.xml)中定义远程分区。
我已经看到遗留的Spring Batch能够支持远程分区，但只能通过显式的作业定义。我不想使用遗留的Spring <em
浏览 32提问于2021-03-02得票数 0
我正在将带有XML配置的Spring Batch Partition Job迁移到Spring batch 4.x。我正在尝试利用MessageChannelPartitionHandler的改进，它使用应答通道和数据源轮询来查找远程步骤的完成。channel id="partitioned.jms.reply" />
<bean id="partitioned.jms.handler&qu
浏览 19提问于2019-02-05得票数 0
1回答
我遵循Spring批处理的分区模式。目前，我使用的是10的固定网格大小。以下是主作业配置： <batch:partition step="slave" partitioner="rangePartitioner">
<batch:handler grid-size=&
浏览 11提问于2017-12-06得票数 0
回答已采纳
1回答
我知道spring batch框架是以块为单位处理数据的。然而，我在想，当同样的分块功能可以通过java获得时，为什么我们还需要batch框架。谁能让我知道如果有更多的原因去spring batch框架？
浏览 1提问于2014-11-14得票数 31
回答已采纳
的后续行动这里是我正在尝试构建的架构的草图。今天，我们有一个跨集群运行一个步骤的作业。分区程序正在为源数据库中的"where“子句定义数据范围，并将其放入stepContext中。所有实际工作都发生在stepContext中。将有0到n个作业同时运行，从从VM的
浏览 14提问于2022-08-22得票数 1
回答已采纳
1回答
给定使用分区的Spring批处理作业，是否可能有多个分区步骤<batch:step id="masterStep" <partitionstep="slaveStep1" <batc
浏览 1提问于2019-10-30得票数 1
回答已采纳
这是I need current easy to follow instructions for configuring spring integration kafka from XML的后续问题Spring-integration-kafka在过去的几次迭代中发展了很多，许多旧的例子不再起作用。特别是，这个从spring-batch世界到spring集成世界的bean将不会实例化，因为KafkaTemplate类
浏览 57提问于2019-03-21得票数 0
回答已采纳
有人知道如何将MessageChannelPartitionHandler配置为从数据库轮询分区结果，而不是聚合每个从服务器的jms响应吗？我正在尝试使用它，因为当前聚合器在作业运行一段时间后出现内存不足错误。看起来主节点没有释放内存。
浏览 1提问于2015-09-01得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
