腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Spring
Batch
:
从一
个
源
读取
数据
,
但
将
不同
的
数据
写入
两个
独立
的
文件
、
我已经编写了一
个
spring
批处理程序来
读取
/处理/
写入
单个
文件
中
的
数据
。我有一
个
新
的
业务需求,其中从我正在
读取
的
相同
数据
中,我必须使用
不同
的
数据
构建另一
个
列表,并处理/格式化
数据
并将其
写入
到单独
的
文件
中。我已
浏览 29
提问于2019-04-27
得票数 0
1
回答
使用
Spring
Batch
进行
数据
迁移
、
我正在迁移一
个
已经
写入
Spring
batch
的
java应用程序。此应用程序
将
跨
两个
不同
的
环境进行
数据
迁移。应用程序
的
设计如下 1)根据某个标志从
源
数据
库中
读取
一组用户id。2)为每个用户从
源
环境中
的
3
个
不同
数据
库中
读取
用户特定
数据
浏览 1
提问于2014-01-15
得票数 0
1
回答
为什么
Spring
批处理事务作用域在步骤级而不是作业级
、
已经通过了许多互联网调查结果和其他来源,
但
找不到任何好
的
理由,为什么
spring
batch
transaction在步骤级别上工作,而不是在多步骤作业中
的
工作级别。即使一
个
步骤被认为是一
个
领域,根据文档,它仍然是工作(任务)
的
一部分,但它仍然是需要完成
的
工作
的
独立
单元。 假设一
个
作业需要
读取
一
个
excel
文件
(有2
个<
浏览 1
提问于2016-02-27
得票数 2
1
回答
春季批处理应用程序结构双
源
数据
、
、
、
我是一
个
真正
的
新手春批,所以我试图解决一些问题,并了解它
的
一些东西。然而,我被其中一
个
困住了。 假设来自
不同
供应商
的
两个
数据
源
在CVS中以
不同
的
格式(例如,它们
的
库存)描述相同
的
事情。因此,我使用
两个
不同
的
阅读器来统一公共对象Product中
的
数据
。然后,我必须积累所有的产品
浏览 4
提问于2016-01-25
得票数 1
回答已采纳
1
回答
胶水管道中
的
多个S3输入
、
、
、
我在3
个
独立
的
S3存储桶中有3
个
独立
的
数据
源
(
文件
)。这3
个
源
中
的
模式彼此
不同
,
但
时间戳是相同
的
(以每小时为单位)。以前,我使用Glue
从一
个
存储桶中
读取
数据
,并将转换应用到该存储桶中
的
文件
,然后
写入
结果
浏览 5
提问于2021-08-06
得票数 0
1
回答
用于处理大型处理csv
文件
的
Spring
批处理
我有一
个
5 5gb
的
CSV
文件
,我正在尝试使用
Spring
Batch
处理该
文件
(
读取
、处理
数据
,并将其发布到JMS)。要做到这一点,最好
的
方法是记住不要将
文件
拆分为较小
的
文件
,并且所有记录都必须处理。
Spring
Batch
是否具有处理和
写入
来自
源
的
数据
的
浏览 4
提问于2017-12-08
得票数 0
1
回答
将
Spring
批处理作业重构为使用Apache (解耦
读取
器和作者)
、
、
我目前有一
个
Spring
作业,只需一
个
步骤就可以从Oracle
读取
数据
,通过多个
Spring
处理器(CompositeItemProcessor)传递
数据
,并将
数据
写入
不同
的
目的地,如Oracle (CompositeItemWriter:tasklet>在上面的步骤中,compositeItemWriter配置了
两
浏览 3
提问于2020-09-02
得票数 0
1
回答
spring
batch
:处理大
文件
、
、
我在生产中有10
个
大
文件
,我们需要从
文件
中
读取
每一行,并将逗号分隔值转换为一些值对象,然后将其发送到JMS队列,并将其插入到
数据
库中
的
3
个
不同
的
表中 如果我们有10
个
文件
,我们将有3300万行。我们使用
spring
batch
(MultiResourceItemReader)来
读取
搜索行,并将其
写入
db,然后将其发送到JMS。大
浏览 4
提问于2016-03-14
得票数 0
1
回答
用于
文件
处理
的
Spring
Batch
、
Spring
Batch
适合处理大量
的
单个
文件
吗?
Spring
Batch
似乎面向以
数据
为中心
的
工作。我需要从S3存储桶中拉出数百万
个
文件
,解压缩它们,根据内容执行一些逻辑,然后调用web服务。
Spring
Batch
似乎非常适合这种作业监控,但我不确定用它来做
文件
处理是不是太过分了。
浏览 1
提问于2012-05-15
得票数 1
回答已采纳
1
回答
Spring
Batch
中
的
Itemreader :使用单个ItemReader
读取
2
个
不同
的
文件
是否可以使用
spring
batch
Itemreader
读取
2
个
不同
的
文件
(在单个阅读器中),并比较这2
个
files.Based中存在
的
属性(如ID列),然后使用Itemprocessor比较ID,记录将使用Itemwriter
写入
新
文件
中
浏览 0
提问于2019-02-13
得票数 1
1
回答
从db
读取
时
的
春季批处理事务
我使用
spring
批处理
从一
个
数据
库
读取
数千行,并希望
将
结果
写入
Kafka。
源
DB是,与db JobRepository使用
的
不同
,也就是说,我想要
读取
的
数据
库与
spring
批处理用于作业和步骤管理
的
数据
库
不同
。 在这种情况下,事务管理是如何工作
的
,我有点困惑。我不希望在块处
浏览 3
提问于2022-10-17
得票数 0
回答已采纳
2
回答
java 8并行流与
spring
batch
的
比较
、
、
、
我有一
个
队列,其中
的
消息将由其他应用程序放置,我
的
应用程序所做
的
只是轮询队列,并获取所有消息,然后转换为其他对象并持久存储在
数据
库中。因此,对于这个1,我有两种方法。)使用
spring
调度器,每5秒轮询一次所有消息,然后使用Java8
的
并行流在
数据
库中持久化,因为所有流都是
独立
的
。2.)有人建议使用
spring
batch
,但不幸
的
是,我没有得到关于使用
s
浏览 0
提问于2017-10-14
得票数 2
2
回答
有没有可能在Python中复制一
个
管道,这样它只有一
个
写入
端和
两个
读出端?
、
、
假设我有一
个
生成某些
数据
的
进程,这些
数据
被
两个
相互
独立
的
不同
进程使用。如果我只有一<em
浏览 2
提问于2013-08-10
得票数 2
1
回答
如何使用
spring
batch
从db中
的
多个表中
读取
数据
、
我尝试使用
spring
batch
从一
个
表中
读取
数据
并将
数据
写入
其他表,但现在我
的
要求是从多个表中
读取
数据
并
写入
文件
,因此我们可以通过定义多个作业来实现这一点,但我想使用单个作业来实现,这意味着单个
读取
器、单个
写入
器和单个处理器。请为我提供一些这个场景
的
参考资料。
浏览 1
提问于2015-06-12
得票数 1
1
回答
Spring
Batch
:关于XML到XML
的
转换
、
、
、
我正在考虑使用
Spring
Batch
框架
将
内容从
源
(xml
文件
)迁移到目标(
不同
格式
的
xml
文件
)。我应该构建自己
的
ItemProcessor吗?我正在
从一
个
以xml格式存储文档
的
内容管理中
读取
,我想保存到另一
个
内容管理中,也是以xml格式,
但
格式
不同
,我如何进行xml到xml
的
转换?
浏览 3
提问于2015-01-15
得票数 0
2
回答
关于事务管理
的
问题
、
、
我正在尝试用
Spring
实现一
个
业务需求,但在事务管理方面遇到了一些问题。1)使用某些条件查询
数据
库(#1)。4)作为前3步
的
结果,
将
记录插入另一
个
数据
库(#2)。 我需要这4
个
步骤是传递性
的
。例如,如果第四步失败,则应回滚第二
浏览 2
提问于2011-03-03
得票数 3
1
回答
春季批处理中
的
多个阅读器
我需要在
Spring
中实现,我需要从
文件
和DB中
读取
数据
,
数据
需要被处理并
写入
电子邮件 我已经阅读了春季批处理文档,但是找不到一
个
可以从多个
读取
器
读取
数据
的
CHUNKtasklet。所以从本质上说,我必须从
两个
不同
的
数据
源
(一
个
来自
文件
,另一
个
来自DB,每个
浏览 6
提问于2015-04-26
得票数 4
3
回答
Spring
batch
多线程处理单
文件
到多file
、
、
我
的
问题陈述。
读取
包含1000万
数据
的
csv
文件
,并将其存储在db中。用尽可能少
的
时间。 我使用简单
的
java多线程执行器实现了它,逻辑几乎类似于
spring
batch
的
块。从csv
文件
中
读取
预定数量
的
数据
,然后创建一
个
线程,并将
数据
传递给线程,由线程验证
数据
,然后
写入
多线
浏览 0
提问于2013-09-07
得票数 4
回答已采纳
3
回答
Spring
Batch
-用于
不同
分隔
文件
的
FlatFileItemReader
、
、
、
我有
两个
不同
的
文件
,一
个
用竖线分隔符"|“分隔,另一
个
用逗号",”分隔。 我正在使用
Spring
Batch
通过FlatFileItemReader处理这些
文件
。我不希望
文件
有
两个
读取
器和
两个
写入
器。我能为
两个
文件
都有一
个
通用
的
FlatFileItemRe
浏览 0
提问于2017-07-07
得票数 0
3
回答
正在加载csv
文件
、
、
、
我必须在NetBeans中创建一
个
程序,
将
4
个
.csv
文件
加载到表中,并让您像管理一
个
简单
的
数据
库一样管理它们。但我并不完全确定该如何开始。例如,我如何通过jFileChooser打开
文件
,以便可以开始对它们进行操作?现在我做
的
所有东西都是文本格式
的
,所以我需要一些帮助。
浏览 2
提问于2014-01-19
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Spring Batch 在大型企业中的最佳实践
Spring Batch之批处理实践
Spring Boot Jpa多数据源配置
02-00 Spring和JDBC
作业帮湖仓一体最佳实践
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券