腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
KafkaConsumer
不能
轮询
消息
,
但是
kafka-console-consumer.sh
可以
,
为什么
?
、
当我使用kafka-clients 2.2.0制作和消费kafka
消息
时,我的producer运行良好,但消费者无法获得任何
消息
。
但是
当我使用shell时,这个命令
不能
获取
消息
: /opt/kafka_2.12-2.2.0/bin/
kafka-console-consumer.sh
--bootstrap-server 10.2.0.242:9092 --topic mytesttopic --from-beginning 此命令
可以</e
浏览 48
提问于2019-05-30
得票数 0
2
回答
kafka消费者应用程序接口consumer.poll()不工作,没有错误,没有异常,只是阻塞
、
、
来生成和消费
消息
,并且成功了。我用producer API编写了一段java代码来生成
消息
,这是
可以
的。通过
kafka-console-consumer.sh
验证。,但消费者代码
不能
工作。示例消费
消息
成功,
消息
由producer制作为topic test:
为什么</e
浏览 9
提问于2017-07-09
得票数 4
1
回答
使用Kafka的
KafkaConsumer
实例读取kafka中最旧的可用
消息
-python kafka客户端
、
我尝试使用以下命令在kafka consumer中读取
消息
:这里我们
可以
读取大约4天的旧
消息
,因为我们在kafka服务器配置文件中设置了保留时间为7天。
但是
,当我们尝试使用kaka-python客户端库的
KafkaConsumer
读取
消息
时,如下所示: cons =
KafkaCo
浏览 2
提问于2015-09-01
得票数 0
1
回答
无法使用``kafka python`
轮询
二进制
消息
、
、
我
可以
使用Kafka CLI工具确认它确实是登陆数据。我每秒都会收到多条
消息
。
kafka-console-consumer.sh
--zookeeper svr:2181 --topic test(Pdb) consumer.poll(
浏览 18
提问于2017-03-15
得票数 2
1
回答
卡夫卡消费者不退货
、
、
但是
,该主题是正确的,我
可以
看到使用控制台使用者将事件发送到主题:当我使用调试器并调用
kafkaConsumer
.listTopics()时,我还在下面的Scala代码示例中看到了这个主题而且,这是从单个单元测试中调用的,因此我只创建这个特性和使用者
浏览 0
提问于2018-12-20
得票数 2
回答已采纳
1
回答
如何让消费者离开卡夫卡进入消费群体
、
、
、
一旦它加入,它将使用来自主题的关于它需要执行什么计算的
消息
,然后开始计算。现在,由于这个使用者正在执行一个计算任务,我想让它退出使用者组,因为它没有执行新计算的任何进一步能力。在卡夫卡能做到这一点吗?
浏览 0
提问于2019-09-05
得票数 0
回答已采纳
2
回答
如何在python中消费kafka的多个brokers的数据?
、
然后我运行这个命令我
可以
使用下面的命令在消费者中获取
消息
bin/
kafka-console-consumer.sh
--zookeeper localhost:2181 --from-beginning --topic replica
但是
我
不能
用pythonreplica', value=dat
浏览 0
提问于2019-05-20
得票数 0
3
回答
从本地docker容器连接到我的本地kafka broker失败
、
我有一个docker容器运行在与--network=host相同的本地机器上,我希望将
消息
从docker容器内部发送到我的本地kafka代理。在docker内部,我
可以
通过运行以下命令连接到zookeeper并查找现有主题:./bin/kafka-topics.sh --zookeeper localhost:2181 --list
但是
我既
不能
用
kafka-console-consumer.sh
也
不能
用kafka-console-producer.sh连接kafka
浏览 10
提问于2019-10-18
得票数 2
1
回答
消费者无法
轮询
来自Kafka的
消息
、
我启动了两个消费者来使用来自Kafka的
消息
,有六个分区,所以每个消费者被分配了三个分区。我发现消费者在消费一段时间后无法
轮询
任何
消息
,我
可以
看到滞后的存在,这意味着仍然有未
轮询
的
消息
。当我终止程序并重新启动它时,消费者
可以
使用剩余的
消息
,但过了一段时间,它再次停止,尽管还有剩余的
消息
。没有任何错误信息,请将我的部分代码如下:
KafkaConsumer
<String, byte[]> consum =
浏览 3
提问于2018-02-22
得票数 0
3
回答
在Kafka中,是否
可以
在
消息
到达某个主题时在消费者端接收
消息
,而不是以一定的间隔
轮询
、
我正在尝试探索
KafkaConsumer
是否
可以
在
消息
到达某个主题时接收
消息
,而不是在特定的时间间隔
轮询
。我知道Kafka是消费者端的一种拉取机制,由于我不确定
消息
何时到达,也不确定
轮询
时间间隔的最佳值,是否
可以
达到上述要求?
浏览 0
提问于2018-08-07
得票数 0
2
回答
为什么
消费者在使用Java客户端API在DC/OS上消费来自Kafka的
消息
时挂起?
、
、
dcos kafka topic create topic1 --partitions 3 --replication 3Producer正在工
浏览 1
提问于2017-02-28
得票数 8
回答已采纳
1
回答
使用卡夫卡主题的所有信息并断开连接
、
、
处理
消息
我期待最多的5k信息的主题。对主题进行分区和复制。是否有更
浏览 2
提问于2017-09-16
得票数 0
2
回答
我
可以
在Akka Actor中安全地创建线程吗?
、
我有一个Akka Actor,我想向它发送“控制”
消息
。这个Actor的核心任务是监听Kafka队列,这是一个循环中的
轮询
过程。我发现以下代码只是简单地锁定了Actor,它不会收到“停止”(或任何其他)
消息
: private var done = falsedef receive = { done = true
浏览 3
提问于2016-07-21
得票数 2
1
回答
卡夫卡远程亚马逊网络服务consumer.poll
、
、
、
您好,我一直在努力学习卡夫卡,并与我的远程
轮询
者/消费者有问题。bin/kafka-console-producer.sh --broker-list localhost:9092 --topictest bin/
kafka-console-consumer.sh
--bootstrap-ser
浏览 3
提问于2017-06-17
得票数 0
2
回答
有没有阅读Kafka主题的Spring Schedule示例?
、
、
、
我们尝试在指定的窗口时间从Kafka读取数据(所以我们有Kafka消费者),这意味着避免在其他时间读取数据。然而,我们不确定在时间段到期后如何关闭消费者。我想知道有没有这样做的例子?非常感谢您的帮助。
浏览 34
提问于2019-12-10
得票数 1
回答已采纳
1
回答
卡夫卡上的有状态无状态消费者
、
为什么
有状态使用者在分配新分区时应该重新构建状态?
浏览 1
提问于2020-09-23
得票数 2
1
回答
在kafka消费者控制台成功连接并获取
消息
后,无法消费来自kafka主题的
消息
(使用Python)
、
、
、
、
我
可以
像文档中描述的那样从kafka控制台消费
消息
。
但是
,当我在本地使用Python创建kafka消费者时,我无法消费
消息
。应该注意的是,kafka控制台工作得很好!我尝试调查此问题,但无法获得类似的环境/情况from kafka import
KafkaConsumer
consumer =
KafkaConsumer
('dbserver1我确信这些
消息
是存在的,因为当我打开一个控制台使用者时,我
可以</e
浏览 1
提问于2019-04-29
得票数 0
1
回答
SQS风格的分布式延迟队列,但在AWS之外?
、
、
、
、
我正在寻找一个支持延迟
消息
传递的分布式排队系统,也就是说,从生产者发送
消息
时起,用户只能在指定的延迟后才接收
消息
。是我最熟悉的系统(特别是特性),但我所处的环境是禁止使用AWS的。有可能使用作业调度程序而不是
消息
队列,但对于我的情况来说,这似乎是一个非常糟糕的阻抗错配。 我
可以
采用以数据库为队列的方法,但我不想这样做有各种各样的原因。
浏览 2
提问于2018-11-06
得票数 1
1
回答
反应卡夫卡-如何正确地执行手动提交?
、
、
、
我试图以以下方式手动偏移提交:val sender: KafkaSender .flatMap { Flux.fromIterable() } sender.send(flux) // sending Flux t
浏览 11
提问于2022-10-26
得票数 0
1
回答
KafkaConsumer
恢复分区
不能
继续接收未提交的
消息
、
我得到了两个不同的结果: 如果我先进行分区,然后生成
消息
并调用方法。
KafkaConsumer
可以
成功地
轮询
未提交的
消息
。
但是
,如果我首先生成
消息
,而没有提交它的偏移量,那么在几秒钟后暂停分区,以调用恢复方法。
KafkaConsumer
将不会接收未提交的
消息
。我需要一些建议,或者有人
可以
告诉我卡夫卡最初的机制。
浏览 0
提问于2018-11-12
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券