腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
Kafka
集群
配置
检查
apache-kafka
、
confluent-platform
Kafka
附带了各种.sh script来在
Kafka
集群
上执行管理活动,如主题创建、分区等。但我追求的是.sh script,它允许我
检查
(发现)构建块的活动(有效)
配置
,如代理、主题、分区等。是否有可用的.sh script在运行时执行此
配置
检查
? 注意:我想一起或理想地分开查看broker/topic/partition的所有
配置
键/值条目(包括默认值和覆盖项(如果有))。 提前谢谢。
浏览 25
提问于2020-07-21
得票数 0
1
回答
Kafka
集群
和Zookeeper
apache-kafka
、
apache-zookeeper
假设我有3个
Kafka
服务器。是否为每台服务器单独维护它们,或者它们的数据是否会在群集
配置
中同步?
浏览 14
提问于2017-06-18
得票数 0
回答已采纳
1
回答
Kafka
数据丢失( LAG超过20000)
elasticsearch
、
apache-kafka
将数据放入Producer -
Kafka
- Logiste - Elastic搜索。此时,如果
Kafka
累积了超过20000个数据(如果消费者拿不走),它会突然变成read。
浏览 0
提问于2018-06-25
得票数 0
1
回答
将数据从单独的
kafka
集群
加载到Samza?
apache-kafka
、
apache-samza
然而,在"WikipediaFeed“对象中,我试图从另一个
Kafka
代理获取数据,而不是从启动Hello-Samza网格时运行的
Kafka
代理获取数据。我是否必须在"WikipediaFeed“对象中创建一个线程安全的
Kafka
消费者来使用来自不同
Kafka
集群
的数据,还是有其他我看不到的方式?谢谢
浏览 6
提问于2017-09-22
得票数 0
1
回答
我如何向我的合流展示不同的卡夫卡?
apache-kafka
、
confluent-platform
我安装合流,它有自己的卡夫卡。我必须更改哪个.properties or whatelse文件以使其看起来不同。
浏览 0
提问于2020-04-15
得票数 0
回答已采纳
1
回答
Kafka
连接-如果我不能直接访问
Kafka
集群
,可以使用吗?
apache-kafka
、
apache-kafka-connect
、
confluent-platform
我们公司的
Kafka
是融合的
Kafka
,它是Kerberized的。我能够通过
Kafka
API编写生产者和消费者,因为我们知道代理和密钥表文件。建议使用
Kafka
-Connect,但由于它是多租户
集群
,Ops团队可能无法提供直接访问,甚至无法运行插件安装命令。我们有自己的托管虚拟机,可以在其中部署应用程序实例。Ques -有没有可能通过在我们的VM上安装连接器插件而不是在Confluent
Kafka
上安装连接器插件来在分布式模式下运行
Kafka
-Connect?更新
浏览 5
提问于2020-06-18
得票数 0
2
回答
如何从vpn外部向
Kafka
集群
发送报文
apache-kafka
我们在一个
集群
中有3个
Kafka
代理在我们的私有VPN中运行。我们的客户端想要向我们的
Kafka
集群
发送消息。我们的管理员仅为3个
Kafka
broker中的一个创建了公共IP。客户端群集能够通过此公共IP与我们的VPN通信(使用Wireshark
检查
),但我们没有收到任何消息。 我们是否需要为剩下的2个
Kafka
brokers也创建公网IP?有没有人能建议我们应该修改哪些
配置
才能正常工作?
浏览 50
提问于2021-04-15
得票数 0
1
回答
spring-
kafka
不能使用
kafka
-cluster
spring-kafka
、
kafka-cluster
我已经
配置
了3个
kafka
集群
,我正在尝试使用spring-
kafka
。但是当我杀死
kafka
时,我不能发送其他消息到队列中。
Kafka
版本2.0.0 spring-
kafka
版本2.0.1
kafka
-topics.sh --describe -zookeeper=zoo1:2181打印
KAFKA
_SWARM_TESTLeader: 2 Replicas: 1,2 Isr: 2,1 spring-
kafka
浏览 21
提问于2019-08-26
得票数 3
1
回答
Kafka
分区领导者-1只在SSL上
ssl
、
apache-kafka
、
apache-zookeeper
、
kcat
我正在通过SSL移动我们所有的
Kafka
流量。我们在每个区域都有两个
集群
。除了一个
集群
之外,所有区域和所有
集群
都可以在SSL上正常工作。当通过明文连接对这个
集群
执行kafkacat -L时,它会列出所有代理、主题和分区,并显示每个分区的领导者: # kafkacat -b
kafka
-cluster1-
kafka
-brokers.domain.cominter.broker.protocol和与动物园管理员
集群
浏览 4
提问于2021-08-09
得票数 1
1
回答
Kafka
静态IP与服务发现
apache-kafka
、
architecture
、
apache-zookeeper
、
distributed-system
、
service-discovery
这个
集群
的
配置
如下所示192.168.1.12
Kafka
端口- 9092Zookeeper端口- 2181#
Kafka
server properties file log.dirs=/tmp=36000 listeners=PLA
浏览 6
提问于2021-05-14
得票数 0
2
回答
和卡夫卡在同一节点上的动物园管理员?
apache-kafka
、
apache-zookeeper
我正在设置一个
kafka
+zookeeper
集群
。假设我想要三个卡夫卡经纪人。我想知道我是否可以在上面安装3台带有
kafka
的机器,然后在相同的节点上运行动物园管理员
集群
。因此,每台机器在
集群
中都有一个
kafka
+zookeeper节点,而不是有3台用于
kafka
的机器和3台用于动物园管理员的机器(总共6台)。 优点和缺点是什么?
浏览 6
提问于2017-06-24
得票数 8
回答已采纳
1
回答
检查
kafka
集群
是否运行正常。
apache-kafka
作为一名帮助Cx进行Apache部署的顾问,我想
检查
一下是否有任何开源自动化脚本可以针对
Kafka
集群
运行,并提取详细的报告,并
检查
集群
是否有任何错误的
配置
或
集群
没有遵循标准的最佳实践?下面是脚本可以
检查
的一些东西
集群
是overloaded?How吗?
集群
中有许多主题和分区吗?基于分配的infrastructure?Is有正确的主题数量吗?通过吞吐量倾斜的主题?是
集群
被超载,过多的客户机conne
浏览 2
提问于2022-07-07
得票数 0
1
回答
Kafka
流程序正在重新处理已经处理的事件
apache-kafka
、
apache-kafka-streams
过了一段时间,我停止了我的
Kafka
流应用程序,并重新启动。观察到我的
Kafka
流程序正在处理已经处理过的以前的事件。请澄清我的疑虑。 请帮我多站一站。
浏览 0
提问于2017-11-22
得票数 1
回答已采纳
1
回答
春启动连接阿里巴巴电子地图演绎卡夫卡
spring-boot
、
apache-kafka
、
spring-kafka
、
alibaba-cloud
我已经尝试将引导属性设置为:获取错误:在身份验证期间终止到节点-1 (/xx.xx:9092)的连接。这可能是由于以下任何原因造成的:(1)身份验证失败是由于代理的凭据无效,代理的年龄超过1.0.0;(2)防火墙阻塞
Kafka
TLS通信量(例如,它可能只允许HTTPS通信);(3)瞬态网络问题。spring.
kafka
.properties.security.protocol=SASL_SSL 引发的抛出: java.lang.Ille
浏览 2
提问于2020-03-02
得票数 1
2
回答
在k8 minikube
集群
外部访问
kafka
broker
apache-kafka
、
kubernetes
我在我的mac上的minikube k8
集群
的Pod上运行了一个landoop
kafka
镜像。我有两个不同的服务来公开用于模式注册的端口8081和用于代理的端口9092。我已经在我的NodePort服务中映射了端口8081 -> 30081和9092 -> 30092,以便我可以从
集群
外部访问它。但是,当我尝试运行控制台消费者或我的消费者应用程序时,
Kafka
从不消费消息。1)不能在k8
集群
之外通过上述方式访问k8
集群
外的
Kafka
吗?如果是这样,我是不是
浏览 86
提问于2018-02-13
得票数 3
3
回答
如何在Minikube运行
Kafka
-Connect?
apache-kafka
、
apache-kafka-connect
、
minikube
要在本地mac中运行cps3连接以使用
kafka
主题,我做了如下操作ML-C02Z605SLVDQ:
kafka
_2.12-2.5.0 e192270$ confluent-hub install confluentinc/
kafka
-connect-s3:latest --component-dir /usr/l
浏览 3
提问于2020-05-23
得票数 1
2
回答
2 hadoop+
kafka
集群
中的动物园服务器
集群
--是否可行?
apache-kafka
、
apache-zookeeper
下面是
Kafka
集群
的详细信息3台动物园管理员服务器我们想做以下更改只有
kafka
机器才会使用这个额外的动物园管理员服务器。 有可能吗?
浏览 1
提问于2019-06-26
得票数 0
回答已采纳
2
回答
连接多个
集群
spring
kafka
java
、
spring-kafka
我想从一个
kafka
集群
消费消息并发布到另一个
kafka
集群
。想知道如何使用spring-
kafka
进行
配置
吗?
浏览 72
提问于2021-01-08
得票数 2
回答已采纳
1
回答
卡夫卡MirrorMaker灾难
apache-kafka
Logstash正在读取这些文件,并将消息推送到两个、三个节点的
Kafka
集群
中,KAF01 & KAF02。Logstash在每个
Kafka
节点上运行,然后将消息推送到相应的Elasticsearch
集群
中。这一切都和预期的一样。对于KAF01
集群
,kaf01-01被设置为将dev01和tst01主题都镜像到KAF02
集群
:
kafka
-mirror-maker.sh
kafka
.tools.MirrorMaker --consumer.co
浏览 13
提问于2018-07-26
得票数 0
回答已采纳
1
回答
动态(向上/向下)
kafka
集群
的监控
apache-kafka
、
monitoring
、
scaling
、
telegraf
、
jmxtrans
我们正在使用
kafka
集群
,我们希望监视这个
集群
。目前我们的做法是: 但是,我们面临着卡夫卡经纪人名单的静态
配置
问题我们只能通过Jmxtrans或Telegraf jolokia plugin
配置
静态列表。我们希望动态列表(例如,只
配置
kafka
集群
、动物园管理员连接,以便在每次收集度量的迭代中获得代理列表)用于<e
浏览 4
提问于2017-04-13
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
kafka入门、使用场景、设计原理、主要配置、zookeeper、kafka集群
Kafka消息队列学习进阶(四)-优化(配置/代码/集群
图文详解使用Docker容器,进行Kafka单点和集群配置
Kafka集群部署
CDP中Kafka配置
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券