Redis Streaming
首页
快速开始
  • 核心 API
  • Runtime
  • Config
  • State
  • Checkpoint
  • Watermark
  • Window
  • Source & Sink
  • Reliability
  • Registry
  • MQ
  • 架构设计
  • Exactly-Once
  • MQ 设计
  • Registry 设计
  • 部署指南
  • 性能调优
  • 故障排查
GitHub
首页
快速开始
  • 核心 API
  • Runtime
  • Config
  • State
  • Checkpoint
  • Watermark
  • Window
  • Source & Sink
  • Reliability
  • Registry
  • MQ
  • 架构设计
  • Exactly-Once
  • MQ 设计
  • Registry 设计
  • 部署指南
  • 性能调优
  • 故障排查
GitHub
  • 快速开始

    • 5分钟上手
    • Spring Boot 集成
  • 核心概念

    • 架构概述
    • 核心 API
    • 运行时环境
  • 基础设施模块

    • Config 配置中心
    • Registry 服务注册
    • MQ 消息队列
  • 流处理核心

    • State 状态管理
    • Checkpoint 检查点
    • Watermark 水位线
    • Window 窗口
  • 数据集成

    • Source & Sink
    • CDC 变更捕获
    • Aggregation 聚合
    • Table 表操作
    • Join 流连接
  • 可靠性

    • Reliability 组件
    • Metrics 监控
  • 设计文档

    • Exactly-Once 语义
    • MQ 设计
    • Registry 设计
  • 运维

    • 部署指南
    • 性能调优
    • 故障排查
    • CI/CD
  • 开发

    • 开发指南
    • 测试指南
    • 发布流程

Message Queue (MQ)

Module: mq/

Redis Streams based MQ with partitioning, retry/DLQ, admin ops and metrics.

1. 架构与键空间(概要)

  • 分区流:stream:topic:{topic}:p:{partition}
  • 组消费:XGROUP, XREADGROUP >, XPENDING, XAUTOCLAIM
  • DLQ:stream:topic:{topic}:dlq

2. 快速上手(占位)

2.1 生产者

Message m = Message.builder().topic("orders").data(Map.of("id", 1)).build();
producer.sendAsync(m);

2.2 消费者

consumer.subscribe("orders", "group-A", msg -> {
  // return true to ack; false to retry/DLQ
  return handle(msg);
});
consumer.start();

3. 重试与 DLQ(占位)

  • 最大重试后进入 DLQ:stream:topic:{topic}:dlq
  • 回放路径:Admin/Service 触发回放到原分区;或由治理进程批量回放

4. 管理与治理(占位)

  • Admin 能力:列举 topic、统计 size、回放 replayAll、删除 delete、清空 clear

5. 指标(占位)

  • 生产/消费/ack/retry/dead counters,处理时延 timers;topic/partition 标签

6. FAQ(占位)

  • > (neverDelivered) 只拉取组创建后写入的消息;组创建顺序与首条可见性
  • 推荐使用治理线程扫描 XPENDING 与 XAUTOCLAIM 接管孤儿 pending

References

  • MQ-Design.md
  • docs/redis-mq-broker-interaction.md
  • docs/redis-mq-partitioning.md
Edit this page
最近更新: 2026/1/1 13:26
Contributors: cuihairu
Prev
Registry 服务注册