RabbitMQ
1. RabbitMQ的使用场景有哪些?
抢购活动,削峰填谷,防止系统崩塌。
延迟信息处理,比如10分钟之后给下单未付款的用户发送邮件提醒。解耦系统,对于新增的功能可以单独写模块扩展,比如用户确认评价之后,新增了给用户返积分的功能,这个时候不用在业务代码里添加新增积分的功能,只需要把新增积分的接口订阅确认评价的消息队列即可,后面再添加任何功能只需要订阅对应的消息队列即可。
2. RabbitMQ有哪些重要的角色?
RabbitMQ中重要的角色有:生产者、消费者和代理:
生产者:消息的创建者,负责创建和推送数据到消息服务器;
消费者:消息的接收方,用于处理数据和确认消息;
代理:就是RabbitMQ本身,用于扮演“快递”的角色,本身不生产消息,只是扮演“快递”的角色。
3. RabbitMQ有哪些重要的组件?
ConnectionFactory(连接管理器):应用程序与Rabbit之间建立连接的管理器,程序代码中使用。
Channel(信道):消息推送使用的通道。
Exchange(交换器):用于接受、分配消息。
Queue(队列):用于存储生产者的消息。
RoutingKey(路由键):用于把生成者的数据分配到交换器上。
BindingKey(绑定键):用于把交换器的消息绑定到队列上。
4. RabbitMQ中vhost的作用是什么?
vhost:每个RabbitMQ都能创建很多vhost,我们称之为虚拟主机,每个虚拟主机其实都是mini版的RabbitMQ,它拥有自己的队列,交换器和绑定,拥有自己的权限机制。
5. RabbitMQ的消息是怎么发送的?
首先客户端必须连接到RabbitMQ服务器才能发布和消费消息,客户端和rabbit server之间会创建一个tcp连接,一旦tcp打开并通过了认证(认证就是你发送给rabbit服务器的用户名和密码),你的客户端和RabbitMQ就创建了一条amqp信道(channel),信道是创建在“真实”tcp上的虚拟连接,amqp命令都是通过信道发送出去的,每个信道都会有一个唯一的id,不论是发布消息,订阅队列都是通过这个信道完成的。
6. RabbitMQ怎么保证消息的稳定性?
提供了事务的功能。
通过将channel设置为confirm(确认)模式。
7. RabbitMQ怎么避免消息丢失?
把消息持久化磁盘,保证服务器重启消息不丢失。
8.要保证消息持久化成功的条件有哪些?
声明队列必须设置持久化durable设置为true.
消息推送投递模式必须设置持久化,deliveryMode设置为2(持久)。
以上四个条件都满足才能保证消息持久化成功。
9. RabbitMQ持久化有什么缺点?
持久化的缺地就是降低了服务器的吞吐量,因为使用的是磁盘而非内存存储,从而降低了吞吐量。可尽量使用ssd硬盘来缓解吞吐量的问题。
10. RabbitMQ有几种广播类型?
direct(默认方式):最基础最简单的模式,发送方把消息发送给订阅方,如果有多个订阅者,默认采取轮询的方式进行消息发送。
headers:与direct类似,只是性能很差,此类型几乎用不到。
fanout:分发模式,把消费分发给所有订阅者。
topic:匹配订阅模式,使用正则匹配到消息队列,能匹配到的都能接收到。
11. RabbitMQ怎么实现延迟消息队列?
延迟队列的实现有两种方式:
使用RabbitMQ-delayed-message-exchange插件实现延迟功能。
12. RabbitMQ集群有什么用?
集群主要有以下两个用途:
13. RabbitMQ节点的类型有哪些?
14. RabbitMQ集群搭建需要注意哪些问题?
各节点使用的erlang cookie值必须相同,此值相当于“秘钥”的功能,用于各节点的认证。整个集群中必须包含一个磁盘节点。
15. RabbitMQ每个节点是其他节点的完整拷贝吗?为什么?
不是,原因有以下两个:
存储空间的考虑:如果每个节点都拥有所有队列的完全拷贝,这样新增节点不但没有新增存储空间,反而增加了更多的冗余数据;
性能的考虑:如果每条消息都需要完整拷贝到每一个集群节点,那新增节点并没有提升处理消息的能力,最多是保持和单节点相同的性能甚至是更糟。
16. RabbitMQ集群中唯一一个磁盘节点崩溃了会发生什么情况?
如果唯一磁盘的磁盘节点崩溃了,不能进行以下操作:
不能创建队列
不能创建绑定
不能添加用户
不能添加和删除集群节点
17. RabbitMQ对集群节点停止顺序有要求吗?
RabbitMQ对集群的停止的顺序是有要求的,应该先关闭内存节点,最后再关闭磁盘节点。如果顺序恰好相反的话,可能会造成消息的丢失。
Kafka
1. kafka可以脱离zookeeper单独使用吗?为什么?
kafka不能脱离zookeeper单独使用,因为kafka使用zookeeper管理和协调kafka的节点服务器。
2. kafka有几种数据保留的策略?
kafka有两种数据保存策略:按照过期时间保留和按照存储的消息大小保留。
3. kafka同时设置了7天和10G清除数据,到第五天的时候消息达到了10G,这个时候kafka将如何处理?
4.什么情况会导致kafka运行变慢?
cpu性能瓶颈磁盘读写瓶颈网络瓶颈
5.使用kafka集群需要注意什么?
集群数量最好是单数,因为超过一半故障集群就不能用了,设置为单数容错率更高。
ZooKeeper
1. zookeeper是什么?
zookeeper是一个分布式的,开放源码的分布式应用程序协调服务,是google chubby的开源实现,是hadoop和hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。
2. zookeeper都有哪些功能?
分布式锁:zookeeper提供两种锁:独占锁、共享锁。独占锁即一次只能有一个线程使用资源,共享锁是读锁共享,读写互斥,即可以有多线线程同时读同一个资源,如果要使用写锁也只能有一个线程使用。zookeeper可以对分布式锁进行控制。
3. zookeeper有几种部署模式?
zookeeper有三种部署模式:
集群部署:多台集群运行;
伪集群部署:一台集群启动多个zookeeper实例运行。
4. zookeeper怎么保证主从节点的状态同步?
zookeeper的核心是原子广播,这个机制保证了各个server之间的同步。实现这个机制的协议叫做zab协议。
zab协议有两种模式,分别是恢复模式(选主)和广播模式(同步)。当服务启动或者在领导者崩溃后,zab就进入了恢复模式,当领导者被选举出来,且大多数server完成了和leader的状态同步以后,恢复模式就结束了。状态同步保证了leader和server具有相同的系统状态。
5.集群中为什么要有主节点?
6.集群中有3台服务器,其中一个节点宕机,这个时候zookeeper还可以使用吗?
可以继续使用,单数服务器只要没超过一半的服务器宕机就可以继续使用。
7.说一下zookeeper的通知机制?
客户端端会对某个znode建立一个watcher事件,当该znode发生变化时,这些客户端会收到zookeeper的通知,然后客户端可以根据znode变化来做出业务上的改变。
总结
关注公众号:程序员追风,回复【009】获取上述资料。