zoukankan      html  css  js  c++  java
  • 关于消息队列的有趣文章

    此文章是在知乎大神上看到的回答,在下佩服:

    小红是小明的姐姐。

    小红希望小明多读书,常寻找好书给小明看,之前的方式是这样:小红问小明什么时候有空,把书给小明送去,并亲眼监督小明读完书才走。久而久之,两人都觉得麻烦。

    后来的方式改成了:小红对小明说「我放到书架上的书你都要看」,然后小红每次发现不错的书都放到书架上,小明则看到书架上有书就拿下来看。

    书架就是一个消息队列,小红是生产者,小明是消费者。

    这带来的好处有:

    1.小红想给小明书的时候,不必问小明什么时候有空,亲手把书交给他了,小红只把书放到书架上就行了。这样小红小明的时间都更自由。

    2.小红相信小明的读书自觉和读书能力,不必亲眼观察小明的读书过程,小红只要做一个放书的动作,很节省时间。

    3.当明天有另一个爱读书的小伙伴小强加入,小红仍旧只需要把书放到书架上,小明和小强从书架上取书即可(唔,姑且设定成多个人取一本书可以每人取走一本吧,可能是拷贝电子书或复印,暂不考虑版权问题)。

    4.书架上的书放在那里,小明阅读速度快就早点看完,阅读速度慢就晚点看完,没关系,比起小红把书递给小明并监督小明读完的方式,小明的压力会小一些。

    这就是消息队列的四大好处:

    1.解耦

    每个成员不必受其他成员影响,可以更独立自主,只通过一个简单的容器来联系。

    小红甚至可以不知道从书架上取书的是谁,小明也可以不知道往书架上放书的人是谁,在他们眼里,都只有书架,没有对方。

    毫无疑问,与一个简单的容器打交道,比与复杂的人打交道容易一万倍,小红小明可以自由自在地追求各自的人生。

    2.提速

    小红选择相信「把书放到书架上,别的我不问」,为自己节省了大量时间。

    小红很忙,只能抽出五分钟时间,但这时间足够把书放到书架上了。

    3.广播

    小红只需要劳动一次,就可以让多个小伙伴有书可读,这大大地节省了她的时间,也让新的小伙伴的加入成本很低。

    4.削峰

    假设小明读书很慢,如果采用小红每给一本书都监督小明读完的方式,小明有压力,小红也不耐烦。

    反正小红给书的频率也不稳定,如果今明两天连给了五本,之后隔三个月才又给一本,那小明只要在三个月内从书架上陆续取走五本书读完就行了,压力就不那么大了。

     

    当然,使用消息队列也有其成本:

    1.引入复杂度

    毫无疑问,「书架」这东西是多出来的,需要地方放它,还需要防盗。

    2.暂时的不一致性

    假如妈妈问小红「小明最近读了什么书」,在以前的方式里,小红因为亲眼监督小明读完书了,可以底气十足地告诉妈妈,但新的方式里,小红回答妈妈之后会心想「小明应该会很快看完吧……」

    这中间存在着一段「妈妈认为小明看了某书,而小明其实还没看」的时期,当然,小明最终的阅读状态与妈妈的认知会是一致的,这就是所谓的「最终一致性」。

    那么,该使用消息队列的情况需要满足什么条件呢?

    1.生产者不需要从消费者处获得反馈

    引入消息队列之前的直接调用,其接口的返回值应该为空,这才让明明下层的动作还没做,上层却当成动作做完了继续往后走——即所谓异步——成为了可能。

    小红放完书之后小明到底看了没有,小红根本不问,她默认他是看了,否则就只能用原来的方法监督到看完了。

    2.容许短暂的不一致性

    妈妈可能会发现「有时候据说小明看了某书,但事实上他还没看」,只要妈妈满意于「反正他最后看了就行」,异步处理就没问题。

    如果妈妈对这情况不能容忍,对小红大发雷霆,小红也就不敢用书架方式了。

    3.确实是用了有效果

    即解耦、提速、广播、削峰这些方面的收益,超过放置书架、监控书架这些成本。

    否则如果是盲目照搬,「听说老赵家买了书架,咱们家也买一个」,买回来却没什么用,只是让步骤变多了,还不如直接把书递给对方呢,那就不对了。

    消息队列的一些应用场景:

    • 异步处理:
      • 非核心流程异步化,提高系统响应性能
    • 应用解耦:
      • 系统不是强耦合,消息接受者可以随意增加,而不需要修改消息发送者的代码。消息发送者的成功不依赖消息接受者(比如有些银行接口不稳定,但调用方并不需要依赖这些接口)
      • 不强依赖于非本系统的核心流程,对于非核心流程,可以放到消息队列中让消息消费者去按需消费,而不影响核心主流程
    • 最终一致性:最终一致性不是消息队列的必备特性,但确实可以依靠消息队列来做最终一致性的事情。
      • 先写消息再操作,确保操作完成后再修改消息状态。定时任务补偿机制实现消息可靠发送接收、业务操作的可靠执行,要注意消息重复与幂等设计
      • 所有不保证100%不丢消息的消息队列,理论上无法实现最终一致性。
    • 广播:
      • 只需要关心消息是否送达了队列,至于谁希望订阅,是下游的事情
    • 流量削峰与流控:
      • 当上下游系统处理能力存在差距的时候,利用消息队列做一个通用的“漏斗”。在下游有能力处理的时候,再进行分发。
    • 日志处理:
      • 将消息队列用在日志处理中,比如Kafka的应用,解决大量日志传输的问题
    • 消息通讯:
      • 消息队列一般都内置了高效的通信机制,因此也可以用于单纯的消息通讯,比如实现点对点消息队列或者聊天室等。
  • 相关阅读:
    数据结构与算法 -- 动态规划算法
    数据结构与算法 -- 回溯算法
    数据结构与算法 -- 图
    数据结构与算法无用随笔
    算法集锦
    基于Zookeeper实现多进程分布式锁
    自己动手写线程池
    maven配置国内阿里云镜像
    自己动手写java锁
    使用jconsole监控JVM内存
  • 原文地址:https://www.cnblogs.com/burningc/p/8919625.html
Copyright © 2011-2022 走看看