当前位置：首页 > news >正文

outbox架构解说

news 来源：原创 2025/8/8 20:27:57

Outbox 模式是一种用于实现数据一致性的架构模式，特别是在微服务架构中。

它确保在处理事务时，数据的原子性和最终一致性。

Outbox 模式的详细解说：

1. 概念与背景

背景：在微服务架构中，一个操作可能涉及多个服务，每个服务都有自己的数据库。
为了保证数据的一致性，通常需要使用分布式事务。
然而，传统的两阶段提交（2PC）等分布式事务机制在微服务环境中实现复杂且性能较低。
概念：Outbox 模式通过将事件或消息的发布与数据库事务绑定在一起，确保在事务提交后，事件或消息能够被可靠地发布。

2. 工作原理

Outbox 模式的核心思想是将事件或消息存储在数据库的同一个事务中，然后通过一个单独的进程或服务将这些事件或消息发布出去。

具体步骤如下：

1.事务开始：应用程序开始一个数据库事务，包含对业务数据的修改和事件或消息的插入。

2.插入事件：在同一个事务中，将事件或消息插入到一个专门的 "outbox" 表中。

3.事务提交：提交事务。如果事务成功，事件或消息也被持久化到数据库中。

4.事件发布：一个单独的进程或服务（通常称为 "outbox processor" 或 "message relay"）定期轮询 "outbox" 表，将新事件或消息发布到消息代理（如 Kafka、RabbitMQ 等）。

5.事件删除：发布成功后，事件或消息从 "outbox" 表中删除。

3. 优点

原子性：确保业务数据和事件或消息的原子性，避免数据不一致。
可靠性：通过数据库事务保证事件的持久化，避免消息丢失。
解耦：将事件发布与业务逻辑解耦，简化系统架构。
可扩展性：适用于高并发和大规模分布式系统。

4. 缺点

复杂性：引入了额外的组件和流程，增加了系统复杂性。
延迟：事件发布可能会有一定的延迟，因为需要等待 outbox processor 处理。
数据库负载：额外的插入和查询操作可能会增加数据库的负载。

5. 实现方式

数据库表：使用一个专门的 "outbox" 表来存储事件或消息。
轮询机制：outbox processor 定期轮询 "outbox" 表，发布新事件或消息。
事务日志：另一种实现方式是使用数据库的事务日志（如 MySQL 的 binlog）来捕获事件，然后通过 CDC（Change Data Capture）工具发布事件。

6. 示例

假设有一个订单服务，当创建订单时，需要同时更新订单表并发送一个 "订单创建" 事件到消息代理。

用Outbox 模式的具体步骤如下：

1.开始事务：

BEGIN TRANSACTION;

2.插入订单：

INSERT INTO orders (id, customer_id, amount, status) VALUES (1, 100, 250, 'pending');

3.插入事件：

INSERT INTO outbox (id, event_type, payload, created_at) VALUES (1, 'OrderCreated', '{"orderId":1,"customerId":100,"amount":250}', NOW());

4.提交事务：

COMMIT;

5.事件发布：outbox processor 定期查询 outbox 表，发布事件到消息代理，然后删除已发布的事件。

7. 与其他模式的比较

Transactional Outbox vs. Transactional Messaging：
- Transactional Outbox：使用数据库表存储事件，然后通过轮询或 CDC 发布事件。
- Transactional Messaging：直接在事务中发送消息到消息代理，可能需要两阶段提交。

8. 总结

Outbox 模式是一种有效的数据一致性解决方案，特别适用于微服务架构。

它通过将事件或消息的发布与数据库事务绑定在一起，确保了数据的原子性和最终一致性。

虽然引入了额外的复杂性和延迟，但提供了更高的可靠性和可扩展性。

联系方式:https://t.me/XMOhost26

交流技术群:https://t.me/owolai007

outbox架构解说

Outbox 模式是一种用于实现数据一致性的架构模式，特别是在微服务架构中。它确保在处理事务时，数据的原子性和最终一致性。 Outbox 模式的详细解说： 1. 概念与背景背景：在微服务架构中，一个操作可能涉及多个服务&…...

编程日记 2025/8/8 20:27:57

PT2020 20触控I2C输出IC

1．产品概述 ● PT2020是一款电容式触摸控制ASIC，支持20通道触摸输入，I2C键值输出。可通过I2C调节灵敏度以及功能设置。算法带有走线自补偿功能，具有高抗干扰、宽工作电压范围的突出优势。适用于小家电，智能门锁等消费类…...

编程日记 2025/8/8 18:05:43

【GAN网络入门系列】一，手写字MINST图片生成

🍨 本文为🔗365天深度学习训练营中的学习记录博客🍖 原作者：K同学啊博主简介：努力学习的22级本科生一枚 🌟；探索AI算法，C，go语言的世界；在迷茫中寻找光芒…...

编程日记 2025/8/8 7:14:56

数据备份与恢复方案

数据备份与恢复方案一．背景为确保公司信息安全，防止关键数据丢失，应对突发事件，特制定全面的数据备份与恢复方案。该方案将对公司的各类文件资料进行分级管理，并针对不同级别的数据设定相应的备份策略和恢复流程。二…...

编程日记 2025/8/9 19:22:03

安装gomock： go get github.com/golang/mock/gomockgo get github.com/golang/mock/mockgen 使用 mockgen 生成 mock 代码: 参考 mockgen -sourceservice/user.go -destinationservice/mocks/mock_user_service.go -packagemocks go test -coverprofilecoverage.out…...

编程日记 2025/8/4 1:42:12

淘宝商家层级存在流量上限怎么办，如何突破流量上限？

在淘宝平台运营中，许多商家都会遇到一个共同难题：随着店铺层级的提升，流量增长却逐渐触及天花板。这种现象背后隐藏着平台复杂的流量分配机制，但并非无法破解。一、流量上限的底层逻辑淘宝根据商家层级（1-7层&…...

编程日记 2025/8/1 20:46:55

【linux】Web服务—搭建nginx+ssl的加密认证web服务器

准备工作步骤： 一、新建存储网站数据文件的目录二、创建一个该目录下的默认页面，index.html 三、使用算法进行加密四、制作证书五、编辑配置文件，可以选择修改主配置文件，但是不建议原因如下： 自定义一个配置文…...

编程日记 2025/8/8 18:33:01

MySQL MCP 使用案例

## 概述 MySQL MCP（MySQL Multi-Channel Protocol）是MySQL的多通道协议实现，提供了高效的数据库连接池和负载均衡功能。本文档将介绍MySQL MCP的基本使用方法和常见案例。 ## 环境准备 ### 安装MySQL MCP bash pip install mysql-mcp ### 基…...

编程日记 2025/8/9 19:20:13

C#中UI线程的切换与后台线程的使用

文章速览 UI线程切换示例后台线程使用示例两者对比适用场景Application.Current.Dispatcher.InvokeTask.Factory.StartNew 执行同步性Application.Current.Dispatcher.InvokeTask.Factory.StartNew 一个赞，专属于你的足迹！ UI线程切换在WPF应用程序…...

编程日记 2025/8/9 1:06:10

实验-实现向量点积-RISC-V（计算机组成原理）

目录一、实验内容二、实验步骤三、源代码四、实现效果五、实验环境六、实验小结与思考一、实验内容首先，我们用一个简单的“向量点积”运算作为热身。你将拿到一个不完整的汇编代码“task2-向量点积”，我们的目标是按照C语言描述的功能&a…...

编程日记 2025/8/6 17:42:12

【软考霍夫曼编码的文档压缩比】

霍夫曼编码的文档压缩比计算基于字符频率的最优编码分配，以下是详细步骤及相关案例： 一、压缩比计算公式 [ \text{压缩比} \frac{\text{压缩前总比特数}}{\text{压缩后总比特数编码表存储开销}} ] 通常以比率（如 3:1） 或百分…...

编程日记 2025/8/4 10:03:24

skywalking使用教程

skywalking使用教程一、介绍 skywalking 1.1 概念 skywalking是分布式系统的应用程序性能监视工具，专为微服务、云原生架构和基于容器（Docker、K8s、Mesos）架构而设计。SkyWalking 是观察性分析平台和应用性能管理系统，提供分布…...

编程日记 2025/8/8 8:31:33

Tor推出Oniux新工具：为Linux应用提供网络流量匿名化

Tor项目近日发布了名为Oniux的新型命令行工具，该工具可将任何Linux应用程序的网络流量安全地路由至Tor网络，实现匿名化连接。基于Linux命名空间的隔离技术与依赖用户空间技巧的torsocks等传统方法不同，Oniux利用Linux命名空间&#xff08…...

编程日记 2025/8/7 23:06:05

LLaMA-Factory微调大模型Qwen2.5

1、开始ModelScope社区GPU环境训练或微调模型都是非常耗费算力的。如果电脑的配置不高，可使用一些云服务器来做这项工作。如ModelScope(魔搭)社区的GPU环境，目前提供36小时免费运算，足够微调一个大模型了。注册ModelScope(魔搭)社区账号（可能还要注册或认证阿里云账号）…...

编程日记 2025/8/6 11:55:16

docker（四）使用篇二：docker 镜像

在上一章中，我们介绍了 docker 镜像仓库，本文就来介绍 docker 镜像。一、什么是镜像 docker 镜像本质上是一个 read-only 只读文件， 这个文件包含了文件系统、源码、库文件、依赖、工具等一些运行 application 所必须的文件。我们可以把…...

编程日记 2025/8/6 19:14:02

算法练习：19.JZ29 顺时针打印矩阵

错误原因总体思路有，但不够清晰，一直在边调试边完善。这方面就养成更好的构思习惯，以及涨涨经验吧。分析： 思路：找规律两个坑： 一次循环的后半段是倒着遍历的是矩阵不是方阵，要考虑行列…...

编程日记 2025/8/4 20:02:03

如何使用 Solana Yellowstone gRPC 重新连接和重放插槽

Yellowstone gRPC 是一个功能强大、可用于生产环境且经过实战检验的工具，用于流式传输实时的 Solana 数据。但在实际条件下，网络中断或服务器重启可能导致连接中断。如果没有适当的重连策略，你的应用程序可能会错过区块链的关键更新。为了防…...

编程日记 2025/8/8 20:07:33

踩坑：uiautomatorviewer.bat 打不开

错误信息运行 sdk\tools\bin\uiautomatorviewer.bat 报错 -Djava.ext.dirs..\lib\x86_64;..\lib is not supported. Use -classpath instead. Error: Could not create the Java Virtual Machine. Error: A fatal exception has occurred. Program will exit. 原因 java版…...

编程日记 2025/8/7 15:16:15

天能股份SAP系统整合实战：如何用8个月实现零业务中断的集团化管理升级

目录天能股份SAP系统整合案例：技术驱动集团化管理的破局之路一、企业背景：新能源巨头的数字化挑战二、项目难点：制造业的特殊攻坚战 1. 生产连续性刚性需求 2. 数据整合三重障碍 3. 资源限制下的技术突围三、解决方案：S…...

编程日记 2025/8/7 7:26:55

oracle主备切换参考

主备正常切换操作参考：RAC两节点->单机 （rac和单机的操作区别：就是关闭其它节点，剩一个节点操作即可） 1.主库准备检查状态 SQL> select inst_id,database_role,OPEN_MODE from gv$database; INST_ID DATA…...

编程日记 2025/8/5 1:11:13

PHP 与面向对象编程（OOP）

PHP 是一种支持面向对象编程（OOP）的多范式语言，但其面向对象特性是逐步演进而非原生设计。以下是关键分析： 1. PHP 对面向对象编程的支持核心 OOP 特性： 类和对象： PHP 支持通过 class 关键字定义类&…...

编程日记 2025/8/5 15:21:50

预测模型开发与评估：基于机器学习的数据分析实践

在当今数据驱动的时代，预测模型已成为各行各业决策制定的核心工具。本文将分享我在COMP5310课程项目中开发预测模型的经验，探讨从数据清洗到模型优化的完整过程，并提供详细的技术实现代码。 ## 研究问题与数据集 ### 研究问题我们的研究聚焦…...

编程日记 2025/8/9 1:28:56

2026《数据结构》考研复习笔记四（绪论）

绪论前言时间复杂度分析前言由于先前笔者花费约一周时间将王道《数据结构》知识点大致过了一遍，圈画下来疑难知识点，有了大致的知识框架，现在的任务就是将知识点逐个理解透彻，并将leetcode刷题与课后刷题相结合。因此此后的过…...

编程日记 2025/8/7 20:32:24

2025-5-16Vue3快速上手

1、reactive创建对象类型的响应式数据 （1） (2)reactive包裹的对象类型数据是Proxy对象类型 2、ref 创建对象类型的响应式数据 （1）使用js修改ref的数据时依然要加.value (2)ref的底层是用reactive做响应式数据的，因为…...

编程日记 2025/8/3 21:10:21

Lua中使用module时踩过的坑

在lua中设置某个全局对象(假如对象名为LDataUser)为nil时, LDataUser并不会变成nil, 但在有些情况下设置LDataUser nil时却真变成了nil，然后会导致后续再使用LDataUser时会抛nil异常, 后来发现是使用module搞的鬼，下面看看豆包AI给的解释，还…...

编程日记 2025/8/6 4:53:04

WinSCP用户管理FTP详解

1、下载winscp 官方下载地址：https://winscp.net/eng/index.php 2、登录ftp 3、桌面快捷键 4、首页介绍 5、文件搜索模糊查询，关键字两边必须加’ * ‘号 6、编码报错报错原因：使用’936（ANS/OEM-简体中尉GBK）’编…...

编程日记 2025/8/6 16:09:12

python基础语法（三-中）

基础语法3： 2.列表与元组： <1>.列表、元组是什么？ 都用来存储数据，但是两者有区别，列表可变，元组不可变。 <2>.创建列表： 创建列表有两种方式： [1].a 【】&#x…...

编程日记 2025/8/1 1:30:21

NLP双雄争霸：GPT与BERT的生成-理解博弈——从技术分野到产业融合的深度解码

NLP双雄争霸：GPT与BERT的生成-理解博弈——从技术分野到产业融合的深度解码前言： 在自然语言处理（NLP）的版图上，GPT与BERT如双子星般照亮了智能时代的语言星空。一个是凭借千亿参数横扫生成任务的“文本造物主”&…...

编程日记 2025/8/9 16:55:17

JS手写代码篇---手写 instanceof 方法

2、手写 instanceof 方法 instancecof用于检测一个对象是否是某个构造函数的实例。它通常用于检查对象的类型，尤其是在处理继承关系时。 eg: const arr [1,2,3,4,5]console.log(arr instanceof Array); // trueconsole.log(arr instanceof Object); // true那这是…...

编程日记 2025/8/4 8:25:58

浮点数截断法：四舍五入的精确模拟

理论解释： 1. 目标假设 a 3.14159，我们想四舍五入到小数点后两位（即 3.14 或 3.15）。 2. 步骤拆解 (1) a * 100 把 a 放大 100 倍，让小数点后两位变成整数部分： 3.14159 * 100 314.159 (2) 0.5 关…...

编程日记 2025/8/6 17:12:55

c++ 类的语法3

测试下默认构造函数。demo1： void testClass3() {class Demo { // 没显示提供默认构造函数，会有默认构造函数。public:int x; // 普通成员变量，可默认构造};Demo demo1;//cout << "demo1.x: " << demo1.x << en…...

编程日记 2025/8/7 14:17:26

EasyExcel导出excel再转PDF转图片详解

封装EasyExcel导出工具类相关的依赖自己网上搜索加上，这里不在阐述 Slf4j Service public class AgentExcelUtils {public String syncDynamicHeadWrite(String fileName,String sheetName,List<List<String>> headList,List<?> data) throws…...

编程日记 2025/8/8 1:31:37

【知识产权出版社-注册安全分析报告-无验证方式导致安全隐患】

前言由于网站注册入口容易被黑客攻击，存在如下安全问题： 1. 暴力破解密码，造成用户信息泄露 2. 短信盗刷的安全问题，影响业务及导致用户投诉 3. 带来经济损失，尤其是后付费客户，风险巨大，造…...

编程日记 2025/8/5 16:48:13

Oc语言学习 —— 重点内容总结与拓展（上）

隐藏和封装有四种访问控制符：private(当前类访问权限)，package(与映像访问权限相同)，protect(子类访问权限)，public(公共访问权限)。访问控制符 1.private（当前类访问权限） 成员变量只能在当前类的内部…...

编程日记 2025/8/9 1:20:22

全面且深度学习c++类和对象(上)

文章目录过程和对象类的引入，类的定义类的访问限定符及封装类的访问限定符封装类的实例化类大小内存对齐规则： this指针this特性过程和对象 C语言面向过程设计，c面向对象设计， 举例：洗衣服 C语言：放衣服…...

编程日记 2025/8/6 12:22:08

QML元素 - RectangularGlow

QML 的 RectangularGlow 是 Qt Quick Effects 模块中专门为矩形元素设计的外发光效果，适用于为卡片、按钮、面板等矩形或圆角矩形添加柔和的边缘光晕，相比通用 Glow 更高效且支持圆角匹配。以下是详细使用技巧和优化指南： 1. 基本用法 impor…...

编程日记 2025/8/8 21:11:58

GraphPad Prism项目的管理

《2025新书现货 GraphPad Prism图表可视化与统计数据分析（视频教学版）雍杨康巧昆清华大学出版社教材书籍 9787302686460 GraphPadPrism图表可视化无规格》【摘要书评试读】- 京东图书 GraphPad Prism统计数据分析_夏天又到了的博客-CSDN博客项目…...

编程日记 2025/8/9 15:19:48

uniapp自定义日历计划写法（vue2）

文章目录 uniapp自定义日历计划写法（vue2）1、效果2、实现源码前言：我们有时候需要实现的日历找不到相应的插件的时候，往往需要手动去写一个日历，以下就是我遇到这样的问题时，手搓出来的一个解决方案，希望可以帮助到更多的人。创作不易，请多多支持uniapp自定义日历计划写…...

编程日记 2025/8/9 17:41:45

差分探头为什么要选择使用屏蔽双绞线

市面上很多各种品牌的差分探头，其使用的线缆都使用了屏蔽双绞线（STP），这主要是因为在测试过程中因高压线路周围强电场或磁场在信号线与地线间感应出共模电压而产生的电磁耦合效应会对测试结果产生干扰，而屏蔽双绞线可以…...

编程日记 2025/8/6 1:02:41

Qt—用SQLite实现简单的注册登录界面

1.实现目标本次实现通过SQLite制作一个简易的登录窗口，当点击注册按钮时，登录窗口会消失，会出现一个新的注册界面；完成注册或退出注册时，注册窗口会消失，重新出现登录窗口。注册过的用户信息会出现在SQLi…...

编程日记 2025/8/4 1:24:43

Visual Studio旧版直链

[Visual Studio 2019 社区版]（https://aka.ms/vs/16/release/vs_community.exe） [Visual Studio 2019 专业版]（https://aka.ms/vs/16/release/vs_professional.exe） [Visual Studio 2019 企业版]（https://aka.ms/vs/16…...

编程日记 2025/8/5 3:47:46

elementUI源码学习

学习笔记。最近在看element的table表格优化，又去看了一下element源码框架。element 的架构是很优秀，通过大量的脚本实现工程化，让组件库的开发者专注于事情本身，比如新加组件，一键生成组件所有文件，并完成…...

编程日记 2025/8/7 1:30:03

【LeetCode 热题 100】搜索插入位置 / 搜索旋转排序数组 / 寻找旋转排序数组中的最小值

⭐️个人主页：小羊 ⭐️所属专栏：LeetCode 热题 100 很荣幸您能阅读我的文章，诚请评论指点，欢迎欢迎 ~ 目录搜索插入位置搜索二维矩阵在排序数组中查找元素的第一个和最后一个位置搜索旋转排序数组寻找旋转排序数组中的最小值…...

编程日记 2025/8/9 4:02:57

捌拾伍- 量子傅里叶变换 (3)

前期的内容在捌拾叁- 量子傅里叶变换前期的内容在捌拾肆- 量子傅里叶变换 (2) 9. 之前的之前的公式写错了！ Markdown 的 KaTeX 真难用！！！ 而且之前的公式是从 j1 – jn ，但量子计算都是从 0 开始的&#xff0c…...

编程日记 2025/8/8 4:21:37

探索ISBN查询接口：为图书管理系统赋能

在开发图书管理应用时，ISBN（国际标准书号）查询接口是获取图书元数据的核心工具。通过扫描图书条形码得到ISBN，再调用API即可轻松获取书名、作者、出版社、封面等信息。本文详细介绍几种主流ISBN查询API，包括国际和国内…...

编程日记 2025/8/5 4:50:18

Linux 内核中 inet_accept 的实现与自定义传输协议优化

在 Linux 内核中，网络协议栈的核心功能由一系列精心设计的函数实现，其中 inet_accept 是 TCP 协议接受新连接的关键入口。本文将深入分析该函数的实现逻辑，并探讨在实现自定义传输协议时如何权衡性能优化与代码简化。一、inet_accept 函数解析 1. 功能概述 inet_accept 是…...

编程日记 2025/8/7 8:11:47