事务性发件箱模式:解决数据库事务和消息的一致性
admin
2024-03-25 02:31:44
0

参考:https://microservices.io/patterns/data/transactional-outbox.html

这是2022年10月28日创建的草稿,最终的文字内容和代码通过 ChatGPT 生成。

事务性发件箱模式是一种解决数据库事务和消息的一致性问题的方法。它的基本思想是,将消息的发送操作与数据库的更新操作绑定在一起,保证这两个操作是原子性的,要么都成功,要么都失败。

在传统的数据库应用中,数据库事务与消息的发送是独立的两个操作,如果数据库事务因为某种原因失败了,消息可能已经被发送出去了,这就导致了数据的不一致性。事务性发件箱模式的目的就是解决这个问题。

事务性发件箱模式的实现方式有多种,其中一种是将消息的发送操作与数据库事务放在同一个线程中进行。当数据库事务提交之前,将消息放入一个临时的发件箱中,如果数据库事务成功提交,则消息也会被发送出去;如果数据库事务失败,则消息也不会被发送。

另一种实现方式是在数据库事务提交之后,通过发布/订阅模式将消息发送给消息队列,然后由消息队列负责将消息发送出去。这种方式的优点是能够支持分布式系统,数据库事务和消息发送可以在不同的机器上进行。

无论哪种实现方式,事务性发件箱模式都能够保证数据库事务和消息的一致性。这对于需要处理大量数据和消息的应用来说,是非常有用的。它能够防止数据的不一致性,避免出现因消息发送失败而导致的数据错误。

架构图

       +----------------+|  ORDER SERVICE +-----------INSERT------++-----+----------+                       ||                                  |INSERT                               |
+------------+----------------------------------+-----------------+
| Transaction|                                  |                 |
|       ORDER|TABLE                       OUTBOX|TABLE            |
|     +------>--------+------+        +------+--v------+-----+    |
|     |      |        |      |        |      |         |     |    |
|     +------+--------+------+        +------+--^------+-----+    |
|                                               |                 |
+-----------------------------------------------+-----------------+|READ|+-------------+---------+|JOB          |         ||   +---------+------+  ||   |  Send Message  |  ||   +----------------+  ||                       |+-----------------------+

示例

  1. 在数据库中建立一张临时发件箱表,包含消息的 ID、内容和状态字段。比如:
    create table outbox (id int auto_increment primary key,message varchar(255),status tinyint
    );
    
  2. 在数据库事务处理类中,在更新数据库之后,将消息写入发件箱表。比如:
    public class UserDao {private Connection conn;private MessageSender sender;public UserDao(Connection conn, MessageSender sender) {this.conn = conn;this.sender = sender;}public void updateUser(int userId, String username) throws SQLException {// 开启事务conn.setAutoCommit(false);try {// 更新数据库中的用户信息String sql = "update user set username = ? where id = ?";PreparedStatement stmt = conn.prepareStatement(sql);stmt.setString(1, username);stmt.setInt(2, userId);stmt.executeUpdate();// 将消息写入发件箱表sql = "insert into outbox (message, status) values (?, 0)";stmt = conn.prepareStatement(sql);stmt.setString(1, "用户 " + userId + " 的用户名已经更新为 " + username);stmt.executeUpdate();// 提交事务conn.commit();} catch (SQLException e) {// 回滚事务conn.rollback();throw e;} finally {// 关闭数据库连接conn.close();}}
    }
    
  3. 在发送消息的过程中,从发件箱表中取出,发送成功后删除
    public class OutboxProcessor implements Runnable {private Connection conn;private MessageSender sender;public OutboxProcessor(Connection conn, MessageSender sender) {this.conn = conn;this.sender = sender;}public void run() {while (true) {try {// 使用独占锁锁定发件箱表中的消息String sql = "select * from outbox where status = 0 for update";PreparedStatement stmt = conn.prepareStatement(sql);ResultSet rs = stmt.executeQuery();// 遍历结果集,发送消息并删除发件箱表中的消息while (rs.next()) {// 发送消息到消息sender.send(rs.getString("message"));// 删除发件箱表中的消息sql = "delete from outbox where id = ?";PreparedStatement stmt2 = conn.prepareStatement(sql);stmt2.setInt(1, rs.getInt("id"));stmt2.executeUpdate();}// 休眠一段时间,避免频繁查询发件箱表Thread.sleep(1000);} catch (SQLException | InterruptedException e) {e.printStackTrace();}}}
    }
    
  4. 在主程序中,创建一个 OutboxProcessor 线程,并启动它。比如:
    public class Main {public static void main(String[] args) {// 创建消息发送器MessageSender sender = new RabbitMQSender();// 创建数据库连接Connection conn = DriverManager.getConnection(...);// 创建 OutboxProcessor 线程OutboxProcessor processor = new OutboxProcessor(conn, sender);// 启动 OutboxProcessor 线程new Thread(processor).start();}
    }
    

相关内容

热门资讯

贷款也“拼团” 银行抢单忙 购物能“拼团”,贷款也能! 近日,一场“拼团融资”的银企对接活动在省工业和信息化厅拉开帷幕。 “贷款...
逛花展、赶市集、嗨直播!202... 5月23日 “2026北京直播电商购物月” 在丰台区丽泽金融商务区·2026北京国际花展 正式拉开帷...
2026中关村毕业季|AI“吃... “上帝会掷骰子吗?” 在联想未来中心的“与智者同场”展区,一位海淀学子对着屏幕问道。 爱因斯坦微微前...
原创 今... 今日为5月23日,国际现货黄金价格在4500美元/盎司整数关口附近徘徊不前,日内最低触及4480美元...
三连亏后变为“无主”状态,农尚... 从吴亮手中接盘农尚环境(300536)不足三年后,林峰如今让出了公司控制权,上市公司进入“无主”状态...
55岁湖南女首富出手!豪掷13... 快科技5月24日消息,与马斯克、库克并肩而坐,刚参加完国宴的湖南女首富周群飞就买了家上市企业。 近日...
外资加仓A股,岂是跟风这么简单... 熬过忙碌的交易日,在周末安静时段,理清接下来布局方向。本篇为大家准备了5条要闻,涵盖市场动态、行业变...
原创 俄... 在全球能源的残酷牌桌上,手里攥着石油,腰杆子才能硬气。长期以来,中东的沙漠、俄罗斯的冰原、美国的页岩...
喜力啤酒有产品将涨价,华润啤酒... 来源:红星新闻 红星资本局5月22日消息,今日,红星资本局从雪花啤酒(厦门)有限公司、华润啤酒方面获...
原创 金... 心理预期调整刻不容缓,五月二十二日,黄金价格或将重现十五年前的历史性低迷。 近期若您密切关注着黄金市...
原创 马... 埃隆·马斯克如果能让SpaceX实现“科幻小说”级别的目标,他可能获得1万亿美元的收入。 埃隆·马斯...
涨涨涨!放开限制、可加杠杆!这... 韩国股市站在风口上! 据最新消息,为吸引更多海外资金进入股市,韩国政府计划放开限制,允许境外投资者直...
下周9家上会丨科创板首单IPO... IPO及再融资上会预告 据交易所官网审核动态信息,下周(5.25-5.29)IPO上会审核6家企业,...
富途、老虎市值蒸发1/4!或被... 来源:金融时报 5月22日,中国证监会宣布依法对Tiger Brokers (NZ) Limited...
马爸爸的好兄弟钱多多搞了杀猪盘... *此图由AI生成 作者| 史大郎&猫哥 来源| 是史大郎&大猫财经Pro 上周四,港股经纬天地大崩盘...
原创 壳... 编辑:XL 国际能源圈最近炸开了锅,壳牌这家百年石油巨头在2026年3月与委内瑞拉政府正式签署多项油...
存储热潮愈演愈烈!奖金拿到手软... 财联社5月24日讯(编辑 卞纯)在席卷全球的存储芯片热潮中,韩国“存储芯片双雄”SK海力士和三星无疑...
揽牌、合作、生态,跨境支付头部... 近日,国内头部跨境支付机构密集落地海外重要布局,一方面,连连数字、PingPong两家公司相继在中东...
原创 帮... 老铁们,周末好!我是帮主郑重。刚扫了一眼下周的财经日历,好家伙,事件一个接一个,堪称“消息面轰炸周”...
海南省住建厅与中国石化海南石油... 5月22日,中国石化海南石油分公司代表、党委书记李新强、总经理蔡文东一行赴海南省住建厅拜访交流。省住...