mysql模拟消息队列本质是用关系型数据库替代专业MQ实现异步解耦,适合中小项目;核心为message_queue表,含qid、topic、status、data等字段,配合索引与事务保障基本可靠性。

用 MySQL 模拟消息队列,本质是用关系型数据库替代专业 MQ(如 kafka、rocketmq)来实现“生产-存储-消费”的异步解耦。它不追求高吞吐或强一致性,但胜在简单、可控、无需额外运维,适合中小项目、内部工具、低频事件通知或教学演示。
核心表结构设计
一张轻量、可扩展的 message_queue 表即可承载基本能力:
- qid:主键,自增,唯一标识每条消息
- topic:tinyint 或 varchar(32),标记业务类别(如 ‘order’, ‘log’, ‘notify’)
- status:tinyint,默认 0(未消费),1(已消费),支持幂等重试
- data:text 或 json 类型,存序列化后的消息体(推荐 jsON 格式,便于解析)
- priority:tinyint,可选字段,用于简单优先级调度(如 1=高,3=低)
- create_time:datetime,精确到毫秒,用于超时判断和顺序参考
- retry_count:tinyint,默认 0,失败后递增,防死循环
- next_retry_at:datetime,可选,支持延迟重试(如失败后 5 分钟再试)
索引建议:PRIMARY KEY(qid) + INDEX idx_topic_status (topic, status) + INDEX idx_next_retry (next_retry_at)。避免全表扫描,尤其在定时轮询场景下。
生产者写入逻辑
写入就是普通 INSERT,关键在于轻量和可靠:
- 业务代码组装好消息对象,json 序列化后写入 data 字段
- 显式指定 topic 和初始 status=0
- 建议用事务包裹:INSERT + 相关业务状态更新(如“订单创建成功”后发通知),保证原子性
- 避免大字段直塞:若消息体超 1MB,建议只存 ID 或 URL,实际内容落对象存储或另一张 detail 表
消费者拉取与处理流程
消费者不是长连接监听,而是周期性查询+乐观锁更新,模拟“拉模式”:
- select … for UPDATE SKIP LOCKED(MySQL 8.0+)查出一条待处理消息,加行锁防并发重复消费
- 处理业务逻辑;成功则 UPDATE status=1;失败则 UPDATE status=0, retry_count+1, next_retry_at=NOW()+INTERVAL 5 MINUTE
- 为防卡死,加超时机制:WHERE status=0 AND (next_retry_at IS NULL OR next_retry_at
- 建议用独立 worker 进程,每秒最多拉 1–5 条,避免 DB 压力过大
注意事项与边界提醒
这不是替代 Kafka 的方案,而是务实妥协:
- 不支持广播、主题订阅、死信队列等高级语义,需业务层补足
- 无原生消息确认机制,靠 status + retry_count + 时间戳模拟
- 大量消息堆积时,表体积增长快,建议按月分表或定期归档(如 status=1 且 create_time
- 若需顺序性,仅靠 create_time 不够可靠;应在 data 中带序号,业务层校验
- 高并发写入下,AUTO_INCREMENT 可能成瓶颈;可考虑 UUID_SHORT() 或雪花 ID 替代 qid
基本上就这些。够用、易懂、易维护,是它的核心价值。