项目技术栈-解决方案-消息队列

优选Kafka

消息队列“四大天王”：Rabbit、Rocket、Kafka、Pulsar

​

RabbitMQ

RocketMQ

Kafka

https://downloads.apache.org/kafka/3.5.1/kafka_2.12-3.5.1.tgz
创建对应的日志logs目录，如： kafka_2.12-3.5.1\logs
修改配置 kafka_2.12-3.5.1\config\server.properties

log.dirs=/tmp/kafka-logs
改为
log.dirs=E:\kafka_2.12-3.5.1\logs


#listeners=PLAINTEXT://localhost:9092
改为
listeners=PLAINTEXT://localhost:9092

启动服务
.\bin\windows\kafka-server-start.bat .\config\server.properties


创建主题
#创建主题
kafka-topics.bat --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 5 --topic Hiacik_test

#查询主题
kafka-topics.bat --bootstrap-server localhost:9092 --list

启动kafka服务端前记得先启动zookeeper服务端

Pulsar

概念
应用场景

1. 异步处理
   参考文章
   消息队列(Message Queue)
   概念
   “消息”是在两台计算机间传送的数据单位。
   消息可以非常简单，例如只包含文本字符串；
   也可以更复杂 ，包括对象等。

队列是一种数据结构，先进先出，保证了顺序性。

生产者：发送消息的一端。用于把消息写入到队列中

消费者：从消息队列中，依次读取每条消息的一端。

消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。

实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。

目前在生产环境，使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ等。

应用场景

1. 异步处理
   场景说明：
   用户注册后，需要发注册邮件和注册短信。传统的做法有两种

1.串行的方式；2.并行方式

(1)串行方式：将注册信息写入数据库成功后，发送注册邮件，再发送注册短信。以上三个任务全部完成后，返回给客户端

​​
(2)并行方式：将注册信息写入数据库成功后，发送注册邮件的同时，发送注册短信。以上三个任务完成后，返回给客户端。与串行的差别是，并行的方式可以提高处理的时间

假设三个业务节点每个使用50毫秒钟，不考虑网络等其他开销，则串行方式的时间是150毫秒，并行的时间可能是100毫秒。

因为CPU在单位时间内处理的请求数是一定的，假设CPU1秒内吞吐量是100次。则串行方式1秒内CPU可处理的请求量是7次(1000/150)。并行方式处理的请求量是10次(1000/100)

引入消息队列，将不是必须的业务逻辑，异步处理。