广告
返回顶部
首页 > 资讯 > 前端开发 > html >MQ消息队列的概念是什么
  • 150
分享到

MQ消息队列的概念是什么

2024-04-02 19:04:59 150人浏览 独家记忆
摘要

这篇文章主要介绍“MQ消息队列的概念是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“MQ消息队列的概念是什么”文章能帮助大家解决问题。 一、消息队列使用场景

这篇文章主要介绍“MQ消息队列的概念是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“MQ消息队列的概念是什么”文章能帮助大家解决问题。

一、消息队列使用场景

1.1 常见的使用场景

系统解耦

分布式环境下,系统间的相互依赖,最终会会导致整个依赖关系混乱,特别在微服务环境下,会出现相互依赖,甚至是循环依赖的情况,对后期系统的拆分和优化都带来极大负担。那么我们就可以用MQ来进行处理。上游系统将数据投递到MQ,下游系统取MQ的数据进行消费,投递和消费可以用同步的方式处理,因为MQ接收数据的性能是非常高的,不会影响上游系统的性能。

异步处理

如果采用同步的方式,系统的性能(并发量,吞吐量,响应时间)会有瓶颈。如何解决这个问题呢?引入消息队列,将不必要的业务逻辑异步处理。

异步处理也可以引来 并行处理的使用姿势。在工作中,我们基于消息开发了一个简单的分布式任务处理组件。该组件简单分为三块分别是 切分、加载、执行三个阶段

每个阶段都是以作为消费者,然后处理完毕后再作为生产者发送消息。消息消费无状态,可以按需无限拓容。

流量削峰

由于使用消息,我们的链路变成了生产者发送消息,消息中间件存储消息,最后消费者从消息中间件拉取消息的一个过程。而消息中间件的存储能力能够有效的帮助消费者进行缓冲。试想下,正常流量下消费者能够愉快的进行消费,瞬时高峰流量来的时候,消费者消费能力跟不上,刚好阻塞在消息中间件,等峰值过后,消费者又能很快的将阻塞的消息进行消费。

流量削锋也是消息队列中的常用场景,一般在秒杀或团抢活动中使用广泛!

数据分发

大部分开源的MQ中间件基本都支持一对多或者广播的模式,而且都可以根据规则选择分发的对象。这样上游的一份数据,众多下游系统中,可以根据规则选择是否接收这些数据,这样扩展性就很强了。

1.2 消息使用的先决条件

以上四种是MQ中间件最常见的场景,但是我们细想,MQ中间件的引入会带来什么问题呢?那就是实时性。所以MQ中间件使用的先决条件是:能容忍延迟,只要求最终一致性较为合适。

二、消息相关的概念

MQ特点

先进先出

不能先进先出,都不能说是队列了。消息队列的顺序在入队的时候就基本已经确定了,一般是不需人工干预的。而且,最重要的是,数据是只有一条数据在使用中。 这也是MQ在诸多场景被使用的原因。

发布订阅

发布订阅是一种很高效的处理方式,如果不发生阻塞,基本可以当做是同步操作。这种处理方式能非常有效的提升服务器利用率,这样的应用场景非常广泛。

持久化

持久化确保MQ的使用不只是一个部分场景的辅助工具,而是让MQ能像数据库一样存储核心的数据。

分布式

在现在大流量、大数据的使用场景下,只支持单体应用的服务器软件基本是无法使用的,支持分布式的部署,才能被广泛使用。而且,MQ的定位就是一个高性能的中间件。

在JMS标准中,有两种消息模型P2P(Point toPoint)和Publish/Sub(Pub/Sub)。

P2P

点对点,一个发,一个消费。涉及到的角色 发布者(Publisher)、消费者(Consumer)、消息队列(Queue)

特点

一个消息只能被一个消费者消费,消费后会从队列里移除

发布者和消费者无关系,发布者发送消息的行为不会随消费者而改变

消费者消费完成消息,需要向队列Ack,消息队列发现消息消费成功即做消息移除

Pub/Sub

发布订阅模式,一个发布,多方订阅。涉及到的角色有 发布者(Publisher)、主题(Topic)、订阅者(Subscriber)。

特点

每个消息可以有多个消费者

针对某个主题(Topic)的订阅者,必须创建一个订阅者之后,才能消费发布者的消息

为了消费消息,订阅者必须保持运行的状态

三、常见问题及解决方案

消息阻塞

1、消息阻塞一般都是流量激增,超过消费者消费能力;

2、或者消费者出现逻辑问题,导致不断的重试或长时间等待。

第一种可以通过扩容解决

第二种只能紧急修复问题,发布上线,在阻塞的过程中会造成大量的消息积压,这种情况也可以考虑临时扩容

重复消费

重复消费一般发生下消费端,比如消费者处理完毕,在准备进行ack的时候出现了问题,应用重启后,消息中间件以为该消息还未处理又推给了消费者,或者消费者拉取的时候重复。

一般的做法是消费端做幂等。

消息丢失

消息丢失一般分为生产者发送失败、消息中间件丢失、消费丢失。

生产者丢失:可能以为网络问题或者消息中间处理失败导致,消息遗漏。

消息中间的丢失:一般中间件可以设置丢弃策略,大部分MQ中间件产品可以保证数据不丢失,这种情况基本不用考虑。

消费丢失:有的消息中间件支持自动ack,当消费者消费到消息,消息中间件也不管是否消费成功自动ack。这时候一般选择消费者主动ack比较合适。

消息顺序性

消息顺序性一般通过MQ中间件保证,大部分MQ中间件只能做到局部有序,比如kafka,只能保证单个partition队列有序。有些也会做到全局有序,但是成本比较高。笔者目前服务的公司现在是支持全局有序的。

关于“MQ消息队列的概念是什么”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识,可以关注编程网html频道,小编每天都会为大家更新不同的知识点。

--结束END--

本文标题: MQ消息队列的概念是什么

本文链接: https://www.lsjlt.com/news/93651.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • MQ消息队列的概念是什么
    这篇文章主要介绍“MQ消息队列的概念是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“MQ消息队列的概念是什么”文章能帮助大家解决问题。 一、消息队列使用场景 ...
    99+
    2022-10-19
  • MQ消息队列怎么用
    本篇内容介绍了“MQ消息队列怎么用”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!消息生产失败一般来说,从生...
    99+
    2022-10-19
  • java消息队列mq的使用场景是什么
    Java消息队列(MQ)的使用场景主要包括以下几个方面:1. 异步通信:当系统中的不同模块之间需要进行异步通信时,可以使用消息队列来...
    99+
    2023-10-09
    java
  • Kubernetes消息队列的概念有哪些
    这篇文章主要介绍“Kubernetes消息队列的概念有哪些”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Kubernetes消息队列的概念有哪些”文章能帮助大家解决问题。服务质量服务语义服务质量一般...
    99+
    2023-06-05
  • 分布式消息队列RocketMQ概念详解
    目录1.MQ概述1.1 RocketMQ简介1.2 MQ用途1.3 常见MQ产品2.RocketMQ 基本概念2.1 消息2.2 主题2.3 标签2.4 队列2.5 Producer...
    99+
    2023-05-19
    分布式消息队列RocketMQ概念 消息队列RocketMQ RocketMQ概念
  • MQ消息队列中间件RabbitMQ怎么用
    小编给大家分享一下MQ消息队列中间件RabbitMQ怎么用,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!MQ消息队列中间件—RabbitMQ消息中间件主要用于组件...
    99+
    2023-06-04
  • 什么是消息队列
    这期内容当中小编将会给大家带来有关什么是消息队列,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。很多人在做架构设计时往往会“过度设计”,简单问题复杂化,上来就引一堆中间件,...
    99+
    2022-10-19
  • Python中线程的MQ消息队列实现以及消息队列的优点解析
    “消息队列”是在消息的传输过程中保存消息的容器。消息队列管理器在将消息从它的源中继到它的目标时充当中间人。队列的主要目的是提供路由并保证消息的传递;如果发送消息时接收者不可用,消息队列会保留消息,直到可以成...
    99+
    2022-06-04
    队列 消息 线程
  • redis消息队列是什么
    redis消息队列是什么?这个问题可能是我们日常学习或工作经常见到的。希望通过这个问题能让你收获颇深。下面是小编给大家带来的参考内容,让我们一起来看看吧!队列是一种特殊的线性表,特殊之处在于它只允许在表的前...
    99+
    2022-10-18
  • VB.NET消息队列是什么
    这篇文章主要介绍VB.NET消息队列是什么,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!消息队列是 Windows 2000(NT也有MSMQ,WIN95/98/ME/XP不含消息队列服务但是支持客户端的运行)操作系...
    99+
    2023-06-17
  • 消息队列的特点是什么
    本篇内容主要讲解“消息队列的特点是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“消息队列的特点是什么”吧!什么是消息队列?消息队列( Message Queue )是一种...
    99+
    2023-06-04
  • 怎么从0到1设计一个MQ消息队列
    本篇内容主要讲解“怎么从0到1设计一个MQ消息队列”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么从0到1设计一个MQ消息队列”吧!消息队列整体设计思路主要是...
    99+
    2022-10-19
  • java中RabbitMQ消息队列指的是什么
    这篇文章主要介绍了java中RabbitMQ消息队列指的是什么,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。1、说明RabbitMQ是用Erlang实现的一个高并发高可靠AM...
    99+
    2023-06-15
  • Java中消息队列的作用是什么
    这篇文章主要讲解了“Java中消息队列的作用是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Java中消息队列的作用是什么”吧!  这些接口之间耦合比较严重,每新增一个下游功能...
    99+
    2023-06-16
  • WCF消息队列的解决方案是什么
    WCF消息队列的解决方案是什么,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。消息就是信息的来源,在WCF中消息队列分为公共队列、专用队列、管理队列、响应队列四种,下面我们就简单...
    99+
    2023-06-17
  • java消息队列应用场景是什么
    这篇文章主要讲解了“java消息队列应用场景是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“java消息队列应用场景是什么”吧!一、什么是队列队列(Queue)是一种常见的数据结构,其最...
    99+
    2023-06-29
  • SpringBoot整合消息队列RabbitMQ的方法是什么
    本篇内容介绍了“SpringBoot整合消息队列RabbitMQ的方法是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!简介在Spring...
    99+
    2023-07-05
  • 下一代消息队列Pulsar到底是什么
    Pulsar是一种下一代的分布式消息队列系统。它由Apache软件基金会开发和维护,旨在提供高可用性、可扩展性和灵活性的消息传递解决...
    99+
    2023-09-22
    Pulsar
  • redis做消息队列有什么缺点
    redis做消息队列的缺点:基于List的LPUSH+BRPOP的消息队列缺点:做消费确认ACK比较麻烦。不能做广播模式,例如典型的Pub/Discribe模式。不能重复消费,一旦消费就会被删除。不支持分组消费。...
    99+
    2022-10-09
  • Java消息队列什么时候使用
    本篇内容主要讲解“Java消息队列什么时候使用”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Java消息队列什么时候使用”吧!何时需要消息队列当你需要使用消息队列时,首先需要考虑它的必要性。可以...
    99+
    2023-06-04
软考高级职称资格查询
推荐阅读
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作