开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

分布式消息队列有哪些

{"error":{"code":"429","message": "Requests to the Creates a completion for the chat message Operation under Azure OpenAI API version 2023-05-15 have exceeded token rate limit of your current OpenAI S0 pricing tier. Please retry after 6 seconds. Please go here: https://aka.ms/oai/quotaincrease if you would like to further increase the default rate limit."}}

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

Java面试集锦（一）之RabbitMQ

如上图，在不使用消息队列服务器的时候，用户的请求数据直接写入数据库，在高并发的情况下数据库压力剧增，使得响应速度变慢。但是在使用消息队列之后，用户的请求数据发送给消息队列之后立即返回，再由消息队列的消费者进程从消息队列中获取数据，异步写入数据库。由于消息队列服务器处理速度快于数据库（消息队列也比数据库有更好的伸缩性），因此响应速度得到大幅改善。

02

大型网站架构系列：分布式消息队列（一）

精彩早知道消息队列概述消息队列应用场景消息中间件示例 JMS消息服务（见第二篇：大型网站架构系列：分布式消息队列（二））常用消息队列（见第二篇：大型网站架构系列：分布式消息队列（二））参考（推荐）资料（见第二篇：大型网站架构系列：分布式消息队列（二））本次分享总结（见第二篇：大型网站架构系列：分布式消息队列（二））一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。

05

大牛书单 | 消息队列方向的好书

消息队列也通常称为消息中间件，提到消息队列，大部分互联网人或多或少都听过该名词。对于后端工程师而言，更是日常开发中必备的一项技能。消息队列主要解决应用耦合、异步消息、流量削锋等问题，具有高性能、高可用、可伸缩和最终一致性等特点。已经逐渐成为企业应用系统内部通信的核心手段，目前使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMQ 等，此外，利用数据库（如 Redis、MySQL等）也可实现消息队列的部分基本功能。消息队列本身是工程领域内一

03

消息传输模型的思考

在P2P模型中，有几个关键术语：消息队列(Queue)、发送者(Sender)、接收者(Receiver)。每个消息都被发送到一个特定的队列，接收者从队列中获取消息。队列保留着消息，直到它们被消费或超时。

03

架构核心技术之分布式消息队列

先看一下什么是同步调用。所谓的同步调用，就是说从请求的发起一直到最终的处理完成期间，请求的调用方一直在同步阻塞，等待调用的处理完成。下图所示的例子中，客户端代码 ClientCode，需要执行发送邮件 sendEmail 这样一个操作，它会调用 EmailService 进行发送，而 EmailService 会调用 SmtpEmailAdapter 类来进行处理，这个类会调用远程的一个服务，通过 SMTP 和 TCP 协议发送请求。

04

消息队列简介及 RabbitMQ 的使用方法

消息队列是最古老的中间件之一，从系统之间有通信需求开始，就自然产生了消息队列。如果你还没有用过消息队列，那是时候好好学习一下了。本文告诉什么是消息队列，为什么需要消息队列，常见的消息队列有哪些， RabbitMQ 的部署和使用。

02

国内首个分布式消息队列技术标准发布，推动云原生中间件技术应用落地

随着云计算技术的持续发展，特别是近年来云原生技术在各个行业的蓬勃应用，企业的IT基础设施、中间件以及应用开发架构都发生了深刻的变化。

02

浅谈消息队列及常见的分布式消息队列中间件

分布式消息队列中间件是是大型分布式系统不可缺少的中间件，通过消息队列，应用程序可以在不知道彼此位置的情况下独立处理消息，或者在处理消息前不需要等待接收此消息。所以消息队列主要解决应用耦合、异步消息、流量削锋等问题，实现高性能、高可用、可伸缩和最终一致性架构。消息队列已经逐渐成为企业应用系统内部通信的核心手段，当前使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMQ 等，而部分数据库如 Redis、MySQL 以及 PhxSQL 也可实现消息队列的功能。

04

MQ大牛成长课–从0到1手写分布式消息队列中间件（高の青）

分布式消息队列中间件是一种在分布式系统中用于高效、可靠地传递消息的软件技术。它允许不同的应用程序或服务之间进行异步通信，从而提高了系统的可扩展性和灵活性。

01

MQ大牛成长课--从0到1手写分布式消息队列中间件

分布式消息队列中间件是一种在分布式系统中负责消息传递的软件。它允许系统中的不同组件通过发送和接收消息来进行通信。分布式消息队列中间件可以提高系统的可伸缩性、可靠性和解耦性。本文将介绍如何从0到1手写一个简单的分布式消息队列中间件。

01

《大型网站技术架构》读书笔记之七：随需应变之网站的可扩展架构

此篇已收录至《大型网站技术架构》读书笔记系列目录贴，点击访问该目录可获取更多内容。

03

121道分布式面试题和答案

大家好，我是田哥。最近给大家整理了一份分布式面试题，一共有121道，后面会不断增加，争取做到全网最全的分布式面试题。大部分题目都是来自小伙伴们在面试中被问到后，反馈到我这里的。也由此可知，下一个被问到的估计就是你。

01

消息队列概述

MQ全称为Message Queue，消息队列是应用程序和应用程序之间的通信方法。

02

分布式消息队列

‘分布式消息队列’包含两个概念一是‘消息队列’，二是‘分布式’ 那么就先看下消息队列的概念，和为什么需要分布式消息队列的定义 “消息”指进程间传送的数据 “队列”是在消息的传输过程中保存消息的容器消息被发送到队列中，消息队列充当中间人，将消息从源发送给目标当系统中出现“生产“和“消费“的速度或稳定性等因素不一致时，就需要消息队列，作为抽象层，弥合双方的差异例如（1）服务员点菜快，厨师做菜慢，服务员只需要下单给厨师，然后就可以继续去服务顾客，不需要等待厨师把菜做完点菜单就相当于

07

分布式消息中间件RocketMQ学习教程①

消息队列(Message Queue，简称MQ)。消息中间件作为实现分布式消息系统可拓展、可伸缩性的关键组件，具有高吞吐量、高可用等等优点。

02

RocketMQ系列之原理简介和安装部署

消息队列(Message Queue，简称MQ)。消息中间件作为实现分布式消息系统可拓展、可伸缩性的关键组件，具有高吞吐量、高可用等等优点。

03

消息队列性能对比——ActiveMQ、RabbitMQ与ZeroMQ（译文）

Dissecting Message Queues 概述：　　我花了一些时间解剖各种库执行分布式消息。在这个分析中，我看了几个不同的方面，包括API特性，易于部署和维护，以及性能质量.。消息队列已经被分为两组：brokerless和brokered。　　brokerless消息队列是对等的，没有中间商参与信息的传递，而brokered队列有一些服务器端点之间。性能分析的一些系统： Brokerless 　　　　nanomsg 　　　　ZeroMQ 　Brokered 　　　　ActiveMQ

06

分布式消息队列浅析

一个优秀的分布式消息队列，个人分析应该具备以下的能力：高吞吐、低时延（因场景而异），传输透明，伸缩性强，有冗灾能力，一致性顺序投递，同步+异步的发送方式，完善的运维和监控工具，开源。

05

消息中间件RabbitMQ

如某个系统会往数据库写数据，但是数据库只能支撑每秒1000左右的并发写入，并发量再高就容易宕机。

02

分布式消息队列浅析

队列作为一种比较抽象的数据结构，在程序世界中被广泛的应用，而实现方式和形态也各式各样，有使用进程内堆栈实现的，如stl库中的queue;有基于管道、Shmem实现的，如常见的同机进程间通信模型，而随着分布式系统应用越来越广泛，跨机通信的场景需来需多，面临的问题不仅是消息投递问题，分布式系统普适性的挑战也随着应用场景的多样性而越来越多。

03

架构技术之分布式消息队列

消息的生产者将消息送到消息队列以后，由消息的消费者从消息队列中获取消息，然后进行业务逻辑的处理，消息的生产者和消费者是异步处理的，彼此不会等待阻塞，所以叫做异步架构。

02

【金猿技术展】一种松耦合的分布式高性能工作流任务调度系统——数新网络解决大数据统一调度问题

本项目由数新网络投递并参与“数据猿年度金猿策划活动——2022大数据产业创新技术突破榜单及奖项”评选。

02

消息队列如何选择？Kafka、Pulsar、RabbitMQ还是...

消息队列是当代分布式系统架构中非常重要的一部分，在应用解耦、流量削峰、异步通信等方面有非常多的应用场景。目前最为我们所熟知的消息队列有：ActiveMQ、Kafka、RabbitMQ、Pulsar和RocketMQ，他们都有哪些优势和劣势，我们应该如何选择呢？相信这是摆在很多开发者面前的问题。

01

扫盲消息队列 | 消息中间件 | Kafka

分布式微服务系统下，凡是可以“排队”去做的事情，都可以使用消息队列。网上买东西同样也需要“排队付款”，但是有人说，我点确认付款后马上就显示成功了，没感觉到排队呀？其实在后台系统中是排了，只不过排队的时间对于人来说有点短，可能1-2秒就结束了，但是对于计算机来说，这1-2秒的时间很长了。

01

2018年一线互联网公司Java高级面试题总结

1、hashcode相等两个类一定相等吗?equals呢?相反呢? 2、介绍一下集合框架? 3、hashmap hastable 底层实现什么区别?hashtable和concurrenthashta

08

消息队列介绍

消息(Message)是指在应用间传送的数据（比如字符串，json等），消息队列（Message Queue，简称MQ）是一个古老的计算机术语，UNIX进程间通信就用到了消息队列技术：一个进程把数据写入某个特定队列中，其它队列读取特定队列中的数据实现异步通信。而现在我们所说的MQ通常指的是独立的消息队列中间件，利用高效可靠的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系统的集成。

01

2018年一线互联网公司Java高级面试题总结

1、hashcode相等两个类一定相等吗?equals呢?相反呢? 2、介绍一下集合框架? 3、hashmap hastable 底层实现什么区别?hashtable和concurrenthashta

01

【面试精选】关于大型网站系统架构你不得不懂的10个问题

下面这些问题都是一线大厂的真实面试问题，不论是对你面试还是说拓宽知识面应该都很有帮助。

02

消息队列优缺点以及各个产品对比

消息队列是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题实现高性能，高可用，可伸缩和最终一致性

04

2018年一线互联网公司Java高级面试题总结JVM分布式专题架构福利

1、hashcode相等两个类一定相等吗?equals呢?相反呢? 2、介绍一下集合框架? 3、hashmap hastable 底层实现什么区别?hashtable和concurrenthashta

04

MQ大牛成长课–从0到1手写分布式消息队列中间件-官方同步

在IT江湖里，消息队列（MQ）可是个响当当的“神器”。它就像是一个超级邮差，负责在系统间传递信息，确保数据能够准确无误地从一个地方送到另一个地方。今天，我们就来聊聊如何从0到1，亲手打造一个分布式消息队列中间件，让你也能成为MQ领域的大牛！

01

2018“金三”之一线互联网公司Java高级面试题总结

JVM 1、请介绍一下JVM内存模型??用过什么垃圾回收器都说说呗 2、线上发送频繁full gc如何处理? CPU 使用率过高怎么办? 如何定位问题?如何解决说一下解决思路和处理方法 3、知道字节码

02

TDMQ系列学习 - 消息队列里的“新物种”（一）

导语：TDMQ是什么？常见的消息队列有：kafka、ActiveMQ、RabbitMQ、RocketMQ、ZeroMQ、MetaMQ、CMQ等，今天介绍的是TDMQ。

05

系统服务化构建-分布式基本特征

本文给出了分布式系统的初步概念模型，通过介绍分布式消息队列的几种分类以及Redis的分布式高可用哨兵模型，进而引出分布式系统的几个特征，副本，故障总会发生，消息的多样性，异常的分类。

03

如果有人再问你怎么实现分布式延时消息，这篇文章丢给他

上篇文章介绍了RocketMQ整体架构和原理有兴趣的可以阅读一下，在这篇文章中的延时消息部分，我写道开源版的RocketMQ只提供了18个层级的消息队列延时，这个功能在开源版中显得特别鸡肋，但是在阿里云中的RocketMQ却提供了支持40天之内任意秒级延时队列，果然有些功能你只能充钱才能拥有。当然你或许想换一个开源的消息队列，在开源社区中消息队列延时消息很多都没有被支持比如：RabbitMQ,Kafka等，都只能通过一些特殊方法才能完成延时的功能。为什么这么多都没有实现这个功能呢？是因为技术难度比较复杂吗？接下来我们分析一下如何才能实现一个延时消息。

01

如何打造一个高并发，处理海量数据，高性能，易扩展，可伸缩，高可用的网站？

简而言之，采用分布式系统，分布式应用和服务，分布式数据和存储，分布式静态资源，分布式计算，分布式配置和分布式锁。

04

大规模爬虫系统面临的主要挑战及解决思路

在构建大规模爬虫系统时，我们常常面临一系列挑战。这些挑战包括高效爬取、频率限制、分布式处理、存储和数据管理等方面。为了应对这些挑战，我们需要采取一些解决思路和策略。在本文中，我将与大家分享大规模爬虫系统面临的主要挑战以及解决思路，希望对你构建高效稳定的爬虫系统有所帮助。

02

MQ选型，究竟要考虑哪些因素？

成熟系统的构建，最不能缺少的一环就是消息队列。消息队列的概念看似好懂，但落实到复杂问题的解决，则非常考验内功。比如：

04

【简介】大数据技术综述

首先，在学习大数据之前，需要了解什么是大数据？它是如何诞生的？它有哪些应用场景？只有了解了这些，才能窥视大数据的技术全貌。一个技术的诞生，是顺应时代的，是用于解决某些问题的，它的发展也一定是有内在逻辑的。接下来，一起去看看。

03

kafka 消息队列的原理

每个分区日志记录是顺序的, 不可变的串行offset, 追加到结构化的commit log, 每个offset 在分区中唯一标识一条记录

06

Python爬虫分布式架构问题汇总

在使用Python爬虫分布式架构中可能出现以下的问题，我们针对这些问题，列出相应解决方案：

03

centos7搭建kafka集群-第一篇

Kafka初识 1、Kafka使用背景在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题：我们想分析下用户行为（pageviews），以便我们设计出更好的广告位我想对用户的搜索关键词进行统计，分析出当前的流行趋势有些数据，存储数据库浪费，直接存储硬盘效率又低这些场景都有一个共同点：数据是由上游模块产生，上游模块，使用上游模块的数据计算、统计、分析，这个时候就可以使用消息系统，尤其是分布式消息系统！ 2、Kafka的定义 What is Kafka：它是一个分布式消息系统

01

该如何选择消息队列？

在高并发业务场景下，消息队列在流量削峰、解耦上有不可替代的作用。当前使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、Pulsar 等。

05

如何选择消息队列？

在高并发业务场景下，消息队列在流量削峰、解耦上有不可替代的作用。当前使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、Pulsar 等。

03

如何选择消息队列？

在高并发业务场景下，消息队列在流量削峰、解耦上有不可替代的作用。当前使用较多的消息队列有 RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、Pulsar 等。

02

大型网站架构技术-架构模式

将系统再横向维度上切成几个部分，每个部分负责一部分相对单一的职责。就好比平时一份工作比较多的时候，团队中大家各自负责自己擅长的那一部分。大型网站中一般分为三层：

04

TDMQ喜获可信云最高级认证证书！

导语：由中国信息通信研究院、中国通信标准化协会联合主办的“2020可信云大会”于昨天圆满结束，会上发布了2020年可信云上半年最新评估结果。其中腾讯云中间件——分布式消息队列TDMQ凭借其优秀的技术能力，获得了可信云最高级认证证书。

02

重磅发布：Kafka迎来1.0.0版本，正式告别四位数版本号

Kafka 从首次发布之日起，已经走过了七个年头。从最开始的大规模消息系统，发展成为功能完善的分布式流式处理平台，用于发布和订阅、存储及实时地处理大规模流数据。来自世界各地的数千家公司在使用 Kafka，包括三分之一的 500 强公司。Kafka 以稳健的步伐向前迈进，首先加入了复制功能和无边界的键值数据存储，接着推出了用于集成外部存储系统的 Connect API，后又推出了为实时应用和事件驱动应用提供原生流式处理能力的 Streams API，并于今年春季开始支持仅一次处理语义。如此广泛的应用和完备的功

06

Apache RocketMQ在我司的最佳实践--智慧政务场景下的分布式消息与分布式事务

对于Apache RocketMQ的了解，追溯起来，可以说是从开源初始，就认识到了它。那时候的它，还是个幼年，没有成熟的社区，也没有好的机制去运作。本身，也不算是成熟的产品。

00

C# 消息队列之MSMQ

首先说一下，消息队列 (MSMQ Microsoft Message Queuing)是MS提供的服务，也就是Windows操作系统的功能，并不是.Net提供的。

03

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭