腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
在junit测试
中
嘲笑卡夫卡
的
最佳方法?
、
、
、
我有一个弹簧
引导
应用程序,
使用
卡夫卡
消费者
和生产者。卡夫卡
的
所有
配置
都在application.yml上
kafka
: enable-auto-commit: true:9092,
kafka
-1.
kafka
-headless.dev-
streams
.svc.cluster.local:9092,
kafka
-2.
kafka</e
浏览 1
提问于2020-11-23
得票数 1
1
回答
Kafka
Streams
API
使用
streams
配置
中
的
不同
消费者
引导
服务器
、
我正在学习O‘’Reiley
的
KafkaStreams课程,但是在Java
中
运行KafkaStreams v2.0.0有问题;我
的
代码和属性
配置
如下: KafkaStreams
streams
=,但奇怪
的
是,我收到关于
消费者
客户端尝试连接到不存在<em
浏览 10
提问于2019-08-15
得票数 0
回答已采纳
1
回答
Kafka
Stream -弹性伸缩
的
工作原理
、
我在读关于
Kafka
Stream - Elastic Scaling特性
的
文章。但是没有这样
的
细节给出重新平衡是如何工作
的
?是和Consumer Group
的
工作原理一样,还是因为
Kafka
Stream实例并不完全是consumer Group
中
的
Consume
浏览 0
提问于2019-11-14
得票数 0
2
回答
Kafka
Streams
- java版本依赖关系
我正在
使用
Java1.6运行我
的
应用程序,并计划将一些方面与
Kafka
集成。 我正在探索是否应该
使用
Kafka
Consumer (
使用
poll())或
使用
KafkaStreams
API
。我们需要Java 1.7 / 1.8来
使用
Stream
API
吗?
浏览 3
提问于2018-12-20
得票数 0
2
回答
在
Kafka
Streams
应用程序
中
启动新线程(
使用
编程方式)是否可取?
、
、
我们正在
使用
低级处理器
API
开发一个
Kafka
Streams
应用程序。 根据
Kafka
上
的
文档,所有的线程和并行性都是由Stream线程和流任务处理
的
。
使用
主题上
的
分区,并行性也是可扩展
的
。这意味着
使用
Kafka
Streams
API
主要用于消费主题中
的
数据,而不是用于实际处理。实际处理将在
Kafka
流线程
浏览 15
提问于2019-05-29
得票数 2
1
回答
当消息大小很大时,
Kafka
主题滞后会逐渐增加
、
、
我正在
使用
Kafka
Streams
处理器
API
构造一个
Kafka
Streams
应用程序,以便从
Kafka
主题检索消息。我有两个
使用
相同
Kafka
Streams
配置
的
消费者
应用程序。第一个有2000个字符(3KB)
的
消息,第二个有34000个字符(60KB)
的
消息。现在,在我
的
第二个
消费者
浏览 22
提问于2019-03-22
得票数 2
回答已采纳
2
回答
对于卡夫卡
消费者
静态会员来说,group.instance.id应该是什么?
、
、
每隔一次,容器就会被部署到改进
中
,这样就可以随机地将
消费者
应用程序
的
实例删除。升级
的
终止过程是SIGKILL,同时创建运行实例
的
副本。当实例离开组&加入组时,这会导致重新平衡。我想知道是否应该为
消费者
应用程序
的
每个实例设置唯一
的
group.instance.id (appname-inst-1,appname-instnace-2等)。或者它应该是
消费者
组特有的(类似于
消费者
组id (即整个
消费者</
浏览 5
提问于2021-05-26
得票数 1
2
回答
Kafka
stream vs
kafka
消费者
如何决定
使用
什么
、
、
我做过一些
Kafka
流应用程序和
Kafka
消费者
应用程序。归根结底,
Kafka
流只是
消费者
,它消费来自
Kafka
的
实时事件。所以我不知道什么时候
使用
Kafka
streams
,或者为什么我们应该
使用
Kafka
streams
,因为我们可以在
消费者
端执行所有的转换。我想了解
Kafka
stream和
Kafka
c
浏览 4
提问于2019-12-04
得票数 4
1
回答
获取
Kafka
Stream in process()方法
、
、
、
、
我正在做一个POC来演示一些Spring Cloud
Kafka
功能。我
使用
的
是带有SpringBoot 2.4.1
的
Java11。我
的
build.gradle具有以下库 implementation 'org.springframework.cloud:spring-cloud-stream'
浏览 0
提问于2021-01-30
得票数 0
1
回答
有没有办法从Java
API
中
的
特定偏移量开始消费
kafka
主题?
、
、
、
我
使用
的
是
Kafka
Stream
API
。当我启动我
的
应用程序时,有时会有一个间隙,我想从一个特定
的
偏移量开始消费。最早或最晚
的
不是我想要
的
。streamProperties.put(ConsumerConfig.AUTO_OFFSET_RESET_CONFIG, "earliest"); 我正在寻找
的
是一个场景,比如我在
配置
文件
中
设置了偏移量或以毫秒为单位
的
浏览 25
提问于2020-05-02
得票数 2
回答已采纳
1
回答
Spring和
Kafka
streams
-如何
使用
查询
API
、
、
、
我是第一次接触
kafka
和
kafka
streams
。我有一个与
kafka
生产者、
消费者
、KStream和KTable一起工作
的
基本Spring服务。现在,我想检查一下我
的
KTable记录,所以为了达到这个目的,我尝试
使用
Kafka
Query
API
。来查询..但是我在Spring boot
中
遇到了一些相关
的
问题。在Spring中
使用
kafka
浏览 1
提问于2019-11-19
得票数 1
2
回答
卡夫卡
消费者
/生产者与卡夫卡流
的
设计问题
、
我正在与NodeJs MS合作,到目前为止,他们通过
Kafka
消费者
/制片人进行通信。现在我需要安装一个Loggger MS,它必须记录所有消息并进行一些处理(解析并保存到db),但我不确定是否可以
使用
Kafka
Stream改进当前
的
方法,或者是否应该继续
使用
使用
者
浏览 4
提问于2020-02-11
得票数 0
回答已采纳
3
回答
使用
Spring Boot
的
Kafka
Streams
、
、
、
我想在我
的
spring boot项目中
使用
Kafka
Streams
实时处理。所以我需要
Kafka
Streams
配置
,或者我想
使用
KStreams或KTable,但我在互联网上找不到示例。我做了生产者和
消费者
,现在我想要实时流媒体。
浏览 1
提问于2018-08-08
得票数 17
回答已采纳
1
回答
状态存储changelog主题
的
使用
者是什么
、
我有一个
使用
处理器
api
的
拓扑,它更新了一个状态存储,
配置
了复制因子3,acks=ALL Topologies: Source: products-sourceproducts-source <-- products-processor 我
的
监控显示,源主题(< 100条记录)
的
延迟很小,但是支持存储
浏览 25
提问于2020-11-28
得票数 3
回答已采纳
1
回答
OffsetOutOfRangeException在阅读卡夫卡商店时
的
变化
、
我有一个
Kafka
Streams
应用程序,它正在从一个Store Changelog
中
读取,它偶尔会抛出这个错误: at org.apache.
kafka
.
streams
.processor
浏览 1
提问于2018-06-26
得票数 1
回答已采纳
1
回答
如何正确地外部化属性文件
中
的
spring-boot
kafka
-
streams
配置
?
、
、
我试图将目前用Java代码编写
的
spring应用程序
的
配置
具体化。到目前为止,看来我应该把我所有的
配置
都放到KafkaStreamsConfiguration类型
的
bean
中
,以便
配置
我
的
kafka
-
streams
应用程序。当我将此
配置
具体化时,从ProducerConfig和ConsumerConfig在application.properties文件
中
设置
的
属
浏览 1
提问于2019-06-13
得票数 3
回答已采纳
1
回答
Kafka
流:由于在恢复过程
中
更改日志状态而导致重新平衡失败
需要一些帮助,找出我收到
的
一个卡夫卡流
消费者
的
例外。 我用低级别处理器
API
实现了
Kafka
流。对于从
Kafka
接收到
的
每一次更新,都会将其合并并更新到keystore,从而维护状态。最初,我们只运行了一个
消费者
,过了一段时间,我们尝试提出第二个
消费者
。但第二个
消费者
在再平衡期间抛出了一个例外,称其未能实现再平衡。这是因为更改日志
的
状态发生了更改(下面的异常共享)。我假设,当重新平衡发生时,第一个<
浏览 2
提问于2017-08-30
得票数 1
回答已采纳
4
回答
如何在将消息传递给
消费者
之前对其进行过滤?
、
我正在
使用
Kafka
创建一个销售线索和活动管理系统。问题是我们得到了许多虚假
的
线索(广告)。我们
的
系统
中
也有很多
消费者
。在投放给
消费者
之前,有没有过滤广告
的
方法?我
的
解决方案是将所有内容写入第一个主题,然后由筛选器
使用
者读取它,然后将其写回第二个主题或对其进行筛选。但我不确定它是否有效。有什么想法吗?
浏览 33
提问于2015-06-18
得票数 14
回答已采纳
1
回答
Apache
Kafka
与HTTP
API
我刚接触Apache
Kafka
和它
的
与
API
相关
的
流服务,但想知道是否有任何正式
的
文档来获取摄取所需
的
初始原始数据?从本质上讲,我想尝试构建一个初级
的
密码交易机器人,但我
的
印象是http
API
可能比与
Kafka
Streams
集成
的
API
具有更多
的
延迟。例如,我知道RapidAPI有一个可以访问
的
http库,可以帮助提取数据
浏览 0
提问于2021-06-05
得票数 0
1
回答
使用
我自己
的
Cassandra驱动程序编写聚合结果
我试图创建一个简单
的
应用程序,将我网站上每个网页
的
页面查看情况写入Cassandra。我想从一个逻辑小时开始每5分钟写一次累积页面浏览量。我
的
代码如下所示: .groupByKey我现在
的
问题有两个: 考虑到我有自己
的
Cassandra驱动程序,我如何编写聚合到Cassandra
的
5分钟中间结果?试
浏览 2
提问于2017-09-07
得票数 0
点击加载更多
热门
标签
更多标签
云服务器
对象存储
ICP备案
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券