kafka - 标签 - 腾讯云开发者社区-腾讯云

文章/答案/技术大牛

发布

首页标签kafka

#kafka

Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。

史上最强之安装Kafka并启动Zookeeper和Kafka

用户1750537 3天前2025-08-29 16:26:58

现在，Kafka和Zookeeper已经启动成功。完美，可以使用Java代码进行Kafka相关的操作。

3610

【消费多实例Kafka千万级数据的案例分析】

用户1750537 4天前2025-08-28 08:30:13

高吞吐量场景下消费Kafka消息需要解决分区分配、负载均衡、并行处理等问题。典型案例如电商秒杀系统：10个消费者实例处理100个分区的订单消息，日均处理量超过2...

10910

HBase + Kafka：构建高可靠实时数据管道的架构设计与实践

用户6320865 5天前2025-08-27 17:38:59

随着数字化转型的深入，企业对数据处理的需求已从传统的批处理模式逐步转向实时化、高并发的场景。无论是金融风控、电商交易、物联网监控还是社交网络分析，毫秒级的响应与...

9410

Kafka 如何实现零停机迁移

深度学习与Python 8天前2025-08-24 10:02:10

文章导读随着越来越多企业将 Kafka 迁移至云原生架构，AutoMQ 正逐渐成为 Kafka 用户的云端优选。💡 作为兼容 Apache Kafka 协议...

9210

Elasticsearch如何零改造对接Kafka、Logstash？

gavin1024 11天前2025-08-21 18:50:53

10510

谁才是Kafka、Pulsar通吃的流计算王者？

gavin1024 11天前2025-08-21 18:12:47

8810

Kafka 消息幂等性实现详解：原理、机制与实践

SmileNicky 19天前2025-08-13 08:32:06

幂等性（Idempotence）是一个数学与计算机学概念，指的是对同一个操作执行多次，其结果与执行一次完全一致。在 Kafka 中，这意味着生产（Produce...

20410

Kafka生产者事务机制原理

SmileNicky 19天前2025-08-13 08:31:24

Kafka 在 0.11.0.0 引入的事务（Transactions）正是为了解决“恰好一次（Exactly-Once）语义”的痛点，同时兼顾跨会话幂等性、跨...

19710

Linux 单机部署 Kafka 详细教程（CentOS 7+）

SmileNicky 19天前2025-08-13 08:30:22

Kafka 可以在多种 Linux 发行版上运行，本文以 CentOS 7 为例，其他发行版步骤类似，只需调整包管理命令。

39210

从 LinkedIn 到 Apache：Kafka 的架构设计与应用场景

SmileNicky 19天前2025-08-13 08:29:44

【博客标题】 Kafka 全景入门：从诞生背景到生产实战，一文讲透核心架构、特性以及与RabbitMQ的对比

14110

KIP-848：Apache Kafka 4.0 的全新消费者重平衡协议-Consumer Rebalance Protocol

崔认知 21天前2025-08-11 11:36:35

翻译：https://www.confluent.io/blog/kip-848-consumer-rebalance-protocol/

11920

Spring Boot + Kafka 实现消息队列

技术文章分析 24天前2025-08-08 10:58:59

在开始编码前，需要先安装并启动 Kafka 服务。Kafka 依赖于 ZooKeeper 进行集群协调，因此需要先启动 ZooKeeper。

16210

Kafka 数据入湖新范式，告别传统 ETL

深度学习与Python 26天前2025-08-06 14:36:34

文章导读在云原生架构逐渐成为主流的今天，越来越多企业开始将 Apache Kafka 与数据湖、Lakehouse 结合，构建实时数据分析能力。然而，Kaf...

12110

Java 事件驱动架构设计与 Kafka 生态系统深度整合实践指南

啦啦啦191 29天前2025-08-03 17:59:40

在这篇文章中，我将先介绍Java事件驱动架构的基本概念与工作机制，再深入讲解Kafka生态的构成及各部分功能，最后通过一个电商系统的实例展示如何在Java中利用...

14110

Java 事件驱动架构实战与 Kafka 生态核心组件实操应用指南

啦啦啦191 29天前2025-08-03 10:14:27

在现代分布式系统中，事件驱动架构凭借其松耦合、高可扩展性的特性被广泛采用。本文将结合最新技术栈，通过实操案例展示如何使用Java和Kafka构建事件驱动系统，包...

14310

Kafka与Flink打造流式数据采集方案：以二手房信息为例

jackcode 2025-07-152025-07-15 11:59:38

近年来，国内多个城市的存量房市场呈现出波动频繁、挂牌量上升但成交周期拉长的结构性特征。特别是在一线与强二线城市中，房源更新节奏加快，用户浏览行为活跃，价格异动更...

14810

搭建 KRaft 模式的 Kafka 集群，看这一篇就够了.....

叫我阿柒啊

腾讯云TDP ｜产品KOL (已认证)

2025-07-142025-07-14 17:57:09

首先是 node.id，这个我理解和 broker.id 差不多，但是zk模式的 kafka 集群中，节点被称为broker，但是在 Kraft 模式下，每个节...

74410

MySQL Binlog 实时同步 Kafka：Debezium 实战笔记

叫我阿柒啊

腾讯云TDP ｜产品KOL (已认证)

2025-07-142025-07-14 09:55:03

最近还没摸鱼几天呢，领导又给安排任务了，让我研究一下 Debezium 做一下数据库的 CDC 采集。Debezium？第一个念头就是好熟悉的名字，这不是两年前...

26410

RabbitMQ-RocketMQ和Kafka有什么区别

运维小路 2025-07-082025-07-08 18:34:42

作者介绍：简历上没有一个精通的运维工程师。下面的思维导图也是预计更新的内容和当前进度(不定时更新)。

13310

【连载 62】Kafka协议性能测试基础

FunTester 2025-07-082025-07-08 14:47:32

Kafka是一个高性能的分布式流处理平台，专为实时数据处理、流数据分发和海量消息处理设计，广泛应用于日志收集、实时分析和事件驱动架构等领域。其核心在于通过生产者...