使用 Redis 作为消息队列 - Pub/Sub, List, SortedSet

最新推荐文章于 2025-08-17 06:01:22 发布
最新推荐文章于 2025-08-17 06:01:22 发布
阅读量607 收藏 2
点赞数 4
CC 4.0 BY-SA版权
文章标签： redis 数据库 缓存
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kypfos/article/details/143790927

有好长一段时间没使用 Redis 了，之前用的都是 AWS 上的 Elastic Cache 的 Redis, 那时候还是用的版本还是 4 和 5。在新的项目由于觉得 Elastic Cache Redis 太贵而未曾使用，在去年的 AWS re:Invent 2023 上发布了 Elastic Cache Serverless，对于非长时间大数据的缓存可以考虑使用。而且还可以使用 Redis 的功能对服务进行解耦合，或作为一致性的协调中心。

此文是作为正式研究使用 Redis Stream (Redis 5.0 新特性)  的一个铺垫，探索在 Redis Stream 之前，可以何种方式把 Redis 当成一个消息队列，后面将会具体讲到如何用 Redis Stream 作为一个支持消费者组，能确认消息的更为完备的消息队列。

如以下几种方式

  1. Pub/Sub 订阅模式
  2. 基于 List 的 LPUSH + BRPOP 的实现
  3. SortedSet, 使用消息 Score 排序功能进行消费

Pub/Sub 订阅模式

它就像 AWS 的 SNS 一样，只有在线的订阅者才能收到消息，每个消费者会收到相同的消息。相关的 Redis 命令是 *sub*, *pub*, 参考 Redis Command group Pub/Sub。订阅的时候可以直接指定 Channel 名称，或用模式匹配，还可关注某些 Key 的事件。 阅读全文 >>

Yanbin_Q
关注
使用Redis做消息队列
qq_33867986的博客
05-18 281
基于List的 LPUSH+BRPOP 的实现 使用rpush和lpush操作入队列，lpop和rpop操作出队列。List支持多个生产者和消费者并发进出消息，每个消费者拿到都是不同的列表元素。但是当队列为空时，lpop和rpop会一直空轮训，消耗资源；所以引入阻塞读blpop和brpop（b代表blocking），阻塞读在队列没有数据的时候进入休眠状态， 一旦数据到来则立刻醒过来，消息延迟几乎为零。 PUB/SUB，订阅/发布模式 SUBSCRIBE，用于订阅信道 PUBLISH，向信道发送消息 UNSU
redis延迟队列 如何确保成功消费_Redis实现消息队列的4种方案
weixin_29099217的博客
01-06 1377
Redis作为内存中的数据结构存储，常用作数据库、缓存和消息代理。它支持数据结构，如 字符串，散列，列表，集合，带有范围查询的排序集(sorted sets)，位图(bitmaps)，超级日志(hyperloglogs)，具有半径查询和流的地理空间索引。Redis具有内置复制，Lua脚本，LRU驱逐，事务和不同级别的磁盘持久性，并通过Redis Sentinel和Redis Cluste...
基于Redis的Stream类型的完美消息队列解决方案
cabbage233的博客
11-25 686
1 概述 2 追加新消息，XADD，生产消息 3 从消息队列中获取消息，XREAD，消费消息 4 消息ID说明 5 消费者组模式，consumer group6 Pending 等待列表 7 消息转移 8 坏消息问题，Dead Letter，死信问题 9 信息监控，XINFO 10 命令一览 11 Stream数据结构，RadixTree，基数树 12 相关产品 1 概述 Redis5.0带来了Stream类型。从字面上看是流类型，但其实从功能上看，应该是Redis对消息队列（MQ，Message Qu
使用 Redis 作为消息队列 - Redis Stream
一叶不知秋
11-26 336
如果以 Serverless 方式使用 AWS 的 Redis, 那么既然用到高级消息队列的功能，还能省去使用 AmazonMQ(ActiveMQ 或 RabbitMQ) 或 MSK(Kafka) 的高成本。Redis Stream 的每条消息会有一个唯一 ID, 支持消费组, Redis 用以支持 Stream 的一系列命令是 X 为前缀的,Redis stream 数据结构像是一个 append-only 日志，但又添加了 O(1) 的随机访问和复杂的消费策略，如消息分组。
Redis 实现消息队列解决服务数据一致性问题
dom_jun的博客
07-15 758
摘要 本文提出利用Redis实现消息队列，解决服务A（公共系统）与服务B（业务子系统）间的数据一致性问题。对比定时任务全量更新（时效性差、负载高）与Redis消息队列增量更新后，推荐采用Redis Stream（支持持久化、消费者组、消息确认）作为核心方案。通过Redisson实现生产者（服务A）与消费者（服务B）的交互，确保消息可靠传递与处理：生产者通过LPUSH发送消息，消费者使用阻塞式读取及ack机制保障消息不丢失。方案支持多消费者、失败重试及延迟消息（结合SortedSet），并强调Redis St
Redis实现消息队列的4种方案
YHJ
05-10 9267
原文链接：Redis实现消息队列的方案 Redis作为内存中的数据结构存储，常用作数据库、缓存和消息代理。它支持数据结构，如 字符串，散列，列表，集合，带有范围查询的排序集（sorted sets），位图（bitmaps），超级日志（hyperloglogs），具有半径查询和流的地理空间索引。Redis具有内置复制，Lua脚本，LRU驱逐，事务和不同级别的磁盘持久性，并通过Redis Sentinel和Redis Cluster自动分区。 为了实现其出色的性能，Redis使用内存数据集（in-memor
Redis队列详解（springboot实战）
qq_63815371的博客
03-23 9179
MQ应用有很多，比如ActiveMQ,RabbitMQ,Kafka等，但是也可以基于redis来实现，可以降低系统的维护成本和实现复杂度，本篇介绍redis中实现消息队列的几种方案，并通过springboot实战使其更易懂。 1. 基于List的 LPUSH+BRPOP 的实现 2. 基于Sorted-Set的实现 3. PUB/SUB，订阅/发布模式 4. 基于Stream类型的实现
Redis实现消息队列的架构设计与电商场景实践
lingding_cn的专栏
04-13 423
本文详细分析了Redis作为消息队列的三种实现方式(List/PubSub/Stream)，包括架构设计、代码示例和电商场景应用。通过对比不同方案的优缺点，帮助开发者根据业务需求选择合适的技术方案。
基于Redis实现消息队列的典型方案
红牛编程
03-27 893
文章目录1 概述2 基于List的 LPUSH+BRPOP 的实现3 PUB/SUB，订阅/发布模式4 基于SortedSet有序集合的实现5 基于 Stream 类型的实现6 其他实现 1 概述 消息队列，Message Queue，常用于解决并发系统中的资源一致性问题，提升峰值的处理能力，同时保证消息的顺序性、可恢复性、必送达性，对应用进行解耦，或者实现异步通讯等。市面上的 MQ应用有很多（例...
Redis怎么用？5种数据结构详解+高并发场景应用（附Linux安装命令）
GYY20210200107的博客
08-14 1295
Redis作为高性能内存数据库，能有效解决高并发系统"卡顿"问题。其核心优势在于：1）内存存储实现纳秒级响应；2）单线程模型避免锁竞争；3）I/O多路复用处理高并发。提供五种数据结构：String（基础存储）、Hash（对象存储）、List（消息队列）、Set（去重）、ZSet（排行榜）。具备三大高可用机制：RDB/AOF持久化、键过期自动清理、主从哨兵集群架构。典型应用场景包括商品缓存、秒杀队列、用户会话管理等，可使系统响应从500ms降至5ms，降低数据库压力90%。安装支持Linu
Redis 如何保证数据安全？
BUG糕手的博客
08-14 683
本文系统介绍了Redis在生产环境中的核心实践，围绕数据安全、高并发、常见问题和管理工具四大维度展开。在数据安全方面，详细讲解了RDB和AOF持久化机制、主从复制、哨兵模式和Redis集群的部署方案。针对高并发场景，提出了单机优化、读写分离和分布式集群的解决方案。针对缓存穿透、雪崩、击穿三大经典问题，给出了缓存空值、布隆过滤器、随机过期时间、互斥锁等实用对策。最后推荐了RedisInsight、Another Redis Desktop Manager等管理监控工具，帮助构建稳定高效的Redis服务体系。文
Redis GEO
最新发布
csbysj2020
08-17 241
Redis GEO 是 Redis 的一个模块，用于存储地理位置信息。它允许用户将地理位置信息（经纬度）存储在 Redis 中，并能够基于这些地理位置信息进行查询和计算。Redis GEO 是 Redis 中一个非常有用的功能，可以帮助开发者存储地理位置信息，并基于这些信息进行查询和计算。通过本文的介绍，相信大家对 Redis GEO 有了一定的了解。在实际应用中，可以根据具体需求选择合适的 Redis GEO 功能，发挥其强大的作用。
Redis 持久化（RDB & AOF）
puppy_1mo的博客
08-16 1102
Redis支持RDB和AOF两种持久化机制，将内存数据存储在硬盘上避免进程退出导致数据丢失。RDB通过定期生成数据快照实现备份，支持手动和自动触发，但存在数据实时性不足的问题；AOF通过记录每个写命令保证数据实时性，但文件体积较大。Redis采用fork子进程方式执行持久化操作，同时通过内存缓冲区减少IO操作频率。AOF还支持文件重写来压缩体积。两种机制各有优劣：RDB恢复速度快但实时性差，AOF实时性好但恢复较慢。实际应用中，当AOF开启时优先使用AOF进行数据恢复。
【Redis】集群
2301_80224556的博客
08-15 597
哨兵模式显著提升了 Redis 系统的可用性。然而，其核心数据存储仍然依赖于单个 Master 节点及其 Slave 副本。这意味着所有数据都需要完整地存储在这组主从节点上。当数据量极其庞大，接近甚至超出 Master/Slave 节点所在服务器的物理内存容量时，系统就可能面临严重问题。虽然硬件成本持续下降，大中型互联网公司的服务器内存容量已普遍达到 TB 级别，但在当今的“大数据”时代，1TB 内存也常常显得捉襟见肘。
Redis核心应用场景及代码案例
Runing_WoNiu的博客
08-15 713
本文介绍了Redis在16个典型应用场景中的实现方式，通过代码示例展示了具体用法。主要内容包括：高频数据缓存、分布式会话存储、计数器、限流器、分布式锁等基础功能实现；消息队列、排行榜、热点数据存储等常见业务场景应用；以及布隆过滤器、BitMap、HyperLogLog等高级数据结构的实际应用。每个示例都提供了完整的Go语言实现代码，涵盖了Redis的字符串、哈希、列表、集合、有序集合等主要数据结构。这些案例展示了Redis在分布式系统中的核心作用，包括数据缓存、状态共享、并发控制等方面，为开发者提供了可直接
redis-sentinel基础概念及部署
专注深耕linux、容器云原生、运维自动化等方向
08-15 399
 Redis Sentinel 是 redis 官方提供的高可用解决方案，主要用于监控 Redis 主从集群，在主节点故障时自动完成故障转移，确保服务持续可用。
Redis面试精讲 Day 22：Redis布隆过滤器应用场景
在未来等你的专栏
08-15 964
布隆过滤器（Bloom Filter）是一种基于概率的数据结构，用于快速判断一个元素是否可能存在于集合中或一定不存在。它由 Burton Howard Bloom 在1970年提出，核心思想是使用多个哈希函数将元素映射到位数组中的多个位置。如果所有对应位都为1 → 元素可能存在如果任一位为0 → 元素一定不存在空间效率极高：相比HashSet，内存占用可降低90%以上查询速度快：O(k)，k为哈希函数个数存在误判率（False Positive）：可能将不存在的元素误判为存在（但不会漏判）
Redis 启动时出现 “Bad file format reading the append only file“ 错误
cuiwin的专栏
08-15 204
当 Redis 启动时出现 “Bad file format reading the append only file” 错误，通常意味着 AOF（Append-Only File）文件存在格式损坏或数据错误。这可能是由于意外关机、磁盘故障或文件写入中断导致的。
redis中分布式锁的应用
m0_74939967的博客
08-14 196
注*线程1和线程2的userID相同，所以创建的redis锁key值相同，但是value不相同，释放锁时如果不进行验证value值，很有可能会出现场景1的情况。我们之前讲了秒杀模块的实现，使用了sychronized互斥锁，但是在集群模式下因为不同服务器有不同jvm，所以synchronized互斥锁失效了。在redis缓存击穿中，使用逻辑过期就用过互斥锁，这里原理一摸一样，只不过这里存储的value为。redis中的setNX充当互斥锁，来控制秒杀的一人一单。所以当线程检查锁不为自己的锁时，应该。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值