当前位置：首页 > news >正文

在 MySQL 的 InnoDB 存储引擎中，脏页（Dirty Page）的刷盘（Flush）时机

news 来源：原创 2025/9/16 5:46:38

1. 后台线程周期性刷盘

触发机制：

InnoDB 的 Page Cleaner 线程会周期性地将脏页刷入磁盘，防止内存中脏页堆积。
触发条件：
- 脏页比例阈值：当 Buffer Pool 中脏页占比超过 innodb_max_dirty_pages_pct（默认 90%）时，触发异步刷盘。
- 空闲时主动刷盘：系统空闲时，后台线程主动刷盘以减少突发 I/O 压力。
相关参数：
- innodb_io_capacity：定义每秒可执行的 I/O 操作次数（影响刷盘速度）。
- innodb_max_dirty_pages_pct_lwm：低水位线阈值（默认 10%），脏页比例低于此值时减少刷盘频率。

2. Redo Log 空间循环利用

触发机制：

InnoDB 的 Redo Log 文件是循环写入的，当 Redo Log 空间即将耗尽时，必须推进 Checkpoint LSN，强制刷盘对应的脏页以释放可重用空间。
触发条件：
- Redo Log 剩余空间不足，无法写入新日志。
相关参数：
- innodb_log_files_in_group 和 innodb_log_file_size：控制 Redo Log 文件数量和大小。

3. Buffer Pool 空间不足

触发机制：

当 Buffer Pool 需要加载新页但空闲页不足时，会触发 LRU（最近最少使用）淘汰机制。如果淘汰的页是脏页，需先刷盘。
场景示例：
- 执行大查询时，需加载大量新页到 Buffer Pool，触发脏页刷盘。

4. 事务提交时的隐式刷盘

触发机制：

事务提交时，若开启 innodb_flush_log_at_trx_commit=1，Redo Log 会强制刷盘，但脏页可能仍留在 Buffer Pool 中异步刷盘。
例外情况：
- 若使用非持久性设置（如 innodb_flush_log_at_trx_commit=0/2），Redo Log 可能延迟刷盘，脏页刷盘仍由后台线程控制。

5. 数据库关闭或重启

触发机制：

MySQL 正常关闭时，会强制将所有脏页刷盘，确保数据持久化。
异常关闭恢复：

若崩溃或异常关闭，重启时通过 Redo Log 重放未刷盘的脏页修改。

6. 手动触发刷盘

命令操作：
- FLUSH TABLES ... FOR EXPORT：强制刷盘指定表的脏页。
- SET GLOBAL innodb_max_dirty_pages_pct=0：临时将脏页比例阈值设为 0，触发立即刷盘。

脏页刷盘流程

以事务 UPDATE t SET c1=10 WHERE id=1 为例：

修改数据页：
- Buffer Pool 中的页被修改为 c1=10，标记为脏页。
Redo Log 记录：
- 生成 Redo Log 条目（物理修改），提交时根据配置刷盘。
异步刷盘触发：
- 后台线程将脏页副本写入双写缓冲区（Double Write Buffer），再写入数据文件。
更新 Checkpoint LSN：
- 脏页刷盘完成后，推进 Checkpoint LSN，释放 Redo Log 空间。

总结

触发场景	核心逻辑	性能影响
后台线程周期性刷盘	控制脏页比例，避免内存堆积	平滑 I/O，减少高峰压力
Redo Log 空间不足	强制刷盘以推进 Checkpoint，释放日志空间	可能引起短暂 I/O 高峰
Buffer Pool 空间不足	淘汰脏页前先刷盘，确保数据持久化	影响查询响应时间
事务提交与关闭	保证持久性，强制或异步刷盘	提交延迟或关闭时间延长

优化建议：

根据负载调整 innodb_io_capacity 和 innodb_max_dirty_pages_pct，平衡刷盘速度和内存使用。
监控 Innodb_buffer_pool_pages_dirty 状态，避免脏页堆积影响性能。
全 SSD 环境可关闭双写缓冲区（innodb_doublewrite=OFF），提升刷盘效率。

在 MySQL 的 InnoDB 存储引擎中，脏页（Dirty Page）的刷盘（Flush）时机

1. 后台线程周期性刷盘触发机制： InnoDB 的 Page Cleaner 线程会周期性地将脏页刷入磁盘，防止内存中脏页堆积。触发条件： 脏页比例阈值：当 Buffer Pool 中脏页占比超过 innodb_max_dirty_pages_pct（默认 90%&#…...

编程日记 2025/9/16 5:46:38

Vscode编辑器获取更新远程最新分支

解决：打开当前项目的终端，输入 git remote update origin --prune # 查看远程分支 git branch -r --prune --prune 参数告诉 Git 清理那些远程仓库中已经删除但本地仍然存在的跟踪分支。命令作用更新远程仓库引用： git remote update …...

编程日记 2025/9/15 11:05:17

`AdminAdminDTO` 和 `userSession` 对象中的字段对应起来的表格

以下是将更正后的表格放在最前面的回答，表格包含序号列，合并了后端 AdminAdminDTO 和前端 userSession 的所有字段，并标注对方没有的字段。token 字段值用省略号（...）表示： 序号字段名AdminAdminDTO (后端…...

编程日记 2025/9/15 10:49:37

存储引擎、索引(MySQL笔记第四期)

p.s.这是萌新自己自学总结的笔记，如果想学习得更透彻的话还是请去看大佬的讲解目录存储引擎概念InnoDB存储引擎MyISAM存储引擎Memory存储引擎存储引擎的选择索引三种索引索引分类语法(创建/查看/删除)性能分析工具SQL执行频率慢查询日志profile详情explain执行计…...

编程日记 2025/9/10 21:24:26

全面汇总windows进程通信（二）

在Windows操作系统下，实现进程间通信（IPC, Inter-Process Communication）有几种常见的方法，包括使用管道（Pipe）、共享内存（Shared Memory）、消息队列（Message Queue）、命名管道（Named Pipe）、套接字（Socket）等。本文介绍如下几种：信号量（Semaphore）和互斥量（…...

编程日记 2025/9/13 10:22:04

【大模型】蓝耘智算云平台快速部署DeepSeek R1/R3大模型详解

目录一、前言二、蓝耘智算平台介绍 2.1 蓝耘智算平台是什么 2.2 平台优势 2.3 应用场景 2.4 对DeepSeek 的支持 2.4.1 DeepSeek 简介 2.4.2 DeepSeek 优势三、蓝耘智算平台部署DeepSeek-R1操作过程 3.1 注册账号 3.1.1 余额检查 3.2 部署DeepSeek-R1 3.2.1 获取…...

编程日记 2025/9/15 0:53:06

心理咨询小程序的未来发展

还在眼巴巴看着心理咨询行业的巨大蛋糕却无从下口？今天就来聊聊心理咨询小程序的无限潜力据统计，全球超 10 亿人受精神心理问题困扰，国内心理健康问题也日益突出，心理咨询需求猛增。可传统心理咨询预约难，费用高&…...

编程日记 2025/9/16 4:35:19

硬件工程师入门教程

1.欧姆定律测电压并联使用万用表测电流串联使用万用表，红入黑出 2.电阻的阻值识别直插电阻贴片电阻 3.电阻的功率 4.电阻的限流作用限流电阻阻值的计算单位换算关系 5.电阻的分流功能 6.电阻的分压功能 7.电容电容简单来说是两块不连通的导体加上中间的绝…...

编程日记 2025/9/9 7:14:11

大模型本地部署硬件资源学习（包含模型微调所需资源）

大模型本地部署硬件配置学习前言1.大模型应用需求分析扩展框架2.华为昇腾算力3.显卡信息汇总对比表4.大模型微调显卡资源指南（Qwen系列与DeepSeek蒸馏模型）一、Qwen系列模型微调显存需求二、DeepSeek-R1蒸馏模型微调显存需求三、显存优化策略与硬件选型…...

编程日记 2025/9/11 16:26:34

【DeepSeek系列】05 DeepSeek核心算法改进点总结

文章目录一、DeepSeek概要二、4个重要改进点2.1 多头潜在注意力2.2 混合专家模型MoE2.3 多Token预测3.4 GRPO强化学习策略三、2个重要思考3.1 大规模强化学习3.2 蒸馏方法：小模型也可以很强大一、DeepSeek概要 2024年～2025年初，DeepSeek …...

编程日记 2025/9/13 21:10:27

Java基础常见的面试题（易错！！）

面试题一：为什么 Java 不支持多继承 Java 不支持多继承主要是为避免 “菱形继承问题”（又称 “钻石问题”），即一个子类从多个父类继承到同名方法或属性时，编译器无法确定该调用哪个父类的成员。同时，多继承…...

编程日记 2025/9/11 5:55:30

山东大学软件学院nosql实验四

实验题目： 使用Java做简单数据插入实验内容用API方式，做数据插入。使用Java语言实现数据插入界面，为实验一建立的学生、教师、课程表插入数据，可以在前端界面中录入数据之后保存，也可以导入Excel中的数据。实…...

编程日记 2025/9/13 8:37:00

Linux | man 手册使用详解

注：本文为 “Linux man 手册” 相关文章合辑。略作重排。 man 手册常用命令 1. 查看和搜索手册页查看特定软件包的手册页，并使用 grep 命令过滤出包含特定关键字的行： man <package> | grep <keyword>在整个系统的手册页中…...

编程日记 2025/9/15 16:01:32

初阶数据结构（C语言实现）——1数据结构前言

1. 什么是数据结构数据结构(Data Structure)是计算机存储、组织数据的方式，指相互之间存在一种或多种特定关系的数据元素的集合。 2.什么是算法？ 算法(Algorithm):就是定义良好的计算过程，他取一个或一组的值为输入，并产生出一…...

编程日记 2025/9/16 1:38:06

Windows - 通过ssh打开带有图形界面的程序 - 一种通过计划任务的曲折实现方式

Windows(奇思妙想) - 通过ssh打开带有图形界面的程序 - 一种通过计划任务的曲折实现方式前言 Windows启用OpenSSH客户端后就可以通过SSH的方式访问Windows了。但是通过SSH启动的程序： 无法显示图形界面会随着SSH进程的结束而结束于是想到了一种通过执行“计划…...

编程日记 2025/9/10 6:53:47

基于 SpringBoot 的 “电影交流平台小程序” 系统的设计与实现

大家好，今天要和大家聊的是一款基于 SpringBoot 的 “电影交流平台小程序” 系统的设计与实现。项目源码以及部署相关事宜请联系我，文末附上联系方式。项目简介基于 SpringBoot 的 “电影交流平台小程序” 系统设计与实现的主要使用者分为管理员和…...

编程日记 2025/9/12 21:25:35

工具方法 - 合规性矩阵

Compliance matrix （合规性矩阵）是产品需求管理中的一个重要工具，它是用来识别、跟踪、监控和组织所有客户和利益相关方需求是否被满足的工具。具体来说，Compliance matrix需要用一行一行的证据来证明被设计的产品针对每个需求的实…...

编程日记 2025/9/15 22:46:21

2.2 STM32F103C8T6最小系统板的四种有关固件的开发方式

2.2.1 四种有关固件的开发方式四种有关于固件的开发方式从时间线由远及近分别是：寄存器开发、标准外设驱动库开发、硬件抽象层库开发、底层库开发。四种开发方式各有优缺点，可以参考ST官方的测试与说明。 1.寄存器开发寄存器编程对于从51等等芯片过渡…...

编程日记 2025/9/9 21:34:18

go 环境准备

配置路径： GOROOT：D:\GoGOPATH：go的工作目录 D:\workspacego 验证版本：go version 配置第三方仓库： GO111MODULE：开启mod模式GOPROXY：go语言三方库地址GOSUMDB：go语言软件包的M…...

编程日记 2025/9/15 13:01:03

VMware安装Centos 9虚拟机+设置共享文件夹+远程登录

一、安装背景工作需要安装一台CentOS-Stream-9的机器环境，所以一开始的安装准备工作有： vmware版本：VMware Workstation 16 镜像版本：CentOS-Stream-9-latest-x86_64-dvd1.iso （kernel-5.14.0） …...

编程日记 2025/8/22 17:01:39

高中数学基础-平面向量

文章目录 1、平面向量2、复数高中数学-平面向量、复数 1、平面向量向量：具有大小和方向的量称为向量；物理学中向量也称矢量，只有大小没有方向的量称为标量；向量的大小称为模，大小为1的是单位向量，长度为0…...

编程日记 2025/9/15 17:57:27

v4l2子系统学习（三）编写虚拟摄像头驱动

文章目录 1、声明2、前言3、虚拟摄像头驱动编写3.1、编写硬件相关代码3.2、程序示例 1、声明本文是在学习韦东山《驱动大全》V4L2子系统时，为梳理知识点和自己回看而记录，全部内容高度复制粘贴。韦老师的《驱动大全》：商品详情其对应的…...

编程日记 2025/9/14 15:32:38

堆排序（详解）c++

堆排序 （可以⽤ ppt 演⽰流程） 堆排序(Heap Sort)是指利⽤堆这种数据结构所设计的⼀种排序算法。本质上是优化了选择排序算法，选择排序的思想是在堆排序元素中拿出最大值或最小值，然后把这个位置的值放在它该放的位置上就可以了&a…...

编程日记 2025/9/14 16:17:39

API测试工具：Swagger vs Postman 2025最新全面对比

随着微服务架构的普及和云原生应用的激增，高效的 API 开发、测试和文档管理工具变得越来越重要。在众多 API 工具中，Swagger 和 Postman 各自以不同的方式解决着 API 开发生命周期中的关键问题，本文将从多个维度深入对比这两款工具&#xff0…...

编程日记 2025/9/15 1:14:50

算法-图-数据结构（邻接矩阵）-BFS广度优先遍历

邻接矩阵广度优先遍历（BFS）是一种用于遍历或搜索图的算法，以下是具体介绍： 1. 基本概念图是一种非线性的数据结构，由顶点和边组成，可分为无向图、有向图、加权图、无权图等。邻接矩阵是表示图的一种数…...

编程日记 2025/9/9 14:40:16

List的模拟实现（2）

前言上一节我们讲解了list的基本功能，那么本节我们就结合底层代码来分析list是怎么实现的，那么废话不多说，我们正式进入今天的学习：） List的底层结构我们先来看一下list的底层基本结构： 这里比较奇怪的…...

编程日记 2025/9/13 19:12:40

【C++设计模式】观察者模式（1/2）：从基础到优化实现

1. 引言在 C 软件与设计系列课程中，观察者模式是一个重要的设计模式。本系列课程旨在深入探讨该模式的实现与优化。在之前的课程里，我们已对观察者模式有了初步认识，本次将在前两次课程的基础上，进一步深入研究，着重…...

编程日记 2025/9/13 19:26:02

可狱可囚的爬虫系列课程 13：Requests使用代理IP

一、什么是代理 IP 代理 IP（Proxy IP）是一个充当“中间人”的服务器IP地址，用于代替用户设备（如电脑、手机等）直接与目标网站或服务通信。用户通过代理IP访问互联网时，目标网站看到的是代理服务器的IP地址&…...

编程日记 2025/9/14 13:18:08

冒险岛079 V8 整合版源码搭建教程+IDEA启动

今天教大家来部署下一款超级怀旧游戏冒险岛，冒险岛源码是开源的，但是开源的代码会有各种，本人进行了加工整合，并且用idea进行了启动测试，经过修改后没有任何问题。启动截图后端控制台前端游戏界面声明冒险岛源码…...

编程日记 2025/9/15 12:25:58

Web刷题之PolarDN（中等）

1.到底给不给flag呢代码审计一道典型的php变量覆盖漏洞相关知识什么是变量覆盖漏洞自定义的参数值替换原有变量值的情况称为变量覆盖漏洞经常导致变量覆盖漏洞场景有：$$使用不当，extract()函数使用不当，parse_str()函数使用不当&…...

编程日记 2025/9/15 19:27:50

[250224] Yaak 2.0：Git集成、WebSocket支持、OAuth认证等 | Zstandard v1.5.7 发布

目录 Yaak 2.0 发布：Git 集成、WebSocket 支持、OAuth 认证等众多功能！Zstandard v1.5.7 发布：性能提升，稳定性增强 Yaak 2.0 发布：Git 集成、WebSocket 支持、OAuth 认证等众多功能！ Yaak，一款…...

编程日记 2025/9/15 20:02:36

插入排序：一种简单而直观的排序算法

大家好！今天我们来聊聊一个简单却非常经典的排序算法——插入排序（Insertion Sort）。在所有的排序算法中，插入排序是最直观的一个。一、插入排序的基本思想插入排序的核心思想是：将一个待排序的元素，插…...

编程日记 2025/9/9 1:50:28

vue2响应式数据原理

1. 核心原理 Vue 2 的响应式系统基于 Object.defineProperty，通过依赖收集和派发更新来实现数据的响应式依赖收集：在读取数据时，记录哪些函数（或组件）依赖了该数据。派发更新：在修改数据时&#xff…...

编程日记 2025/9/13 22:25:32

对免认证服务提供apikey验证

一些服务不带认证，凡是可以访问到服务端口，都可以正常使用该服务，方便是方便，但是不够安全。比如ollama默认安装后就是这样。现在据说网上扫一下端口11434，免apikey的ollama服务一大堆。。。那我们怎样将本机安装的o…...

编程日记 2025/9/13 16:54:24

算法——Trie 树

Trie 树（前缀树或字典树）是一种高效处理字符串集合的树形数据结构，核心思想是通过共享公共前缀来优化存储和查询。以下是 Trie 树的详细介绍： 1. Trie 树的基本概念结构特点： 每个节点表示一个字符。从根节点到某一节…...

编程日记 2025/9/15 17:31:58

python中的JSON数据格式

文章目录什么是json主要功能Python数据和Json数据的相互转化什么是json JSON是一种轻量级的数据交互格式。可以按照JSON指定的格式去组织和封装数据。JSON本质上是一个带有特定格式的字符串。主要功能 json就是一种在各个编程语言中流通的数据格式，负责不同编…...

编程日记 2025/9/12 5:22:14

服务器能否拒绝非浏览器发起的HTTP请求？

互联网各领域资料分享专区(不定期更新)： Sheet 前言服务器可以采取多种方法来拒绝非浏览器发起的HTTP请求，但需要明确的是：HTTP协议本身并不限制客户端类型，任何符合协议规范的请求都会被处理。因此，拒绝非浏览器请求需依赖额外策略。正文一、基于请求头过滤 1、Us…...

编程日记 2025/9/15 16:40:01

深度学习之图像分类（二）

前言文章主要是通过实战项目——食品分类来理解分类项目的整体流程。除此之外，还需要对半监督学习，迁移学习，数据增广，Adam和AdamW进行了解。数据增广图片增广（Image Data Augmentation）是深度学习中一种…...

编程日记 2025/9/13 22:58:11

数据库高安全—openGauss安全整体架构安全认证

openGauss作为新一代自治安全数据库，提供了丰富的数据库基础安全能力，并逐步完善各类高阶安全能力。这些安全能力涵盖了访问登录认证、用户权限管理、审计与追溯及数据安全隐私保护等。本章节将围绕openGauss安全机制进行源码解读，以帮助数据…...

编程日记 2025/9/15 20:02:48

利用开源小智AI制作桌宠机器狗

本文主要介绍如何利用开源小智AI制作桌宠机器狗 1 源码下载首先下载小智源码，下载地址, 下载源码后，使用vsCode打开，需要在vscode上安装esp-idf，安装方式请自己解决 2 源码修改 2.1添加机器狗控制代码在目录main/iot/things下添加dog.cc文件，内容如下； #include…...

编程日记 2025/9/11 10:22:21

uniapp在app下使用mqtt协议！！！支持vue3

什么？打包空白？分享一下我的解决方法！ 第一步找大师算过了，装4.1版本运气好！ 所以根目录执行命令… npm install mqtt4.1.0第二步自己封装一个mqtt文件方便后期开坛做法！ // utils/mqtt.js import mqt…...

编程日记 2025/9/15 13:28:55

Orange 开源项目 - 集成阿里云大模型

1 阿里云的大模型服务平台百炼阿里云的大模型服务平台百炼是一站式的大模型开发及应用构建平台。不论是开发者还是业务人员，都能深入参与大模型应用的设计和构建。您可以通过简单的界面操作，在5分钟内开发出一款大模型应用，或在几小时内训练…...

编程日记 2025/9/11 21:40:22

DSP芯片C6678的SRIO及其中断跳转的配置

C6678SRIO读写测试门铃中断跳转测试 SRIO简述代码前言SRIO配置原始代码1.使能电源2.初始化SRIO回环修改 3.SRIO测试 Doorbell门铃中断1.初始化中断函数2.中断向量表建立3.中断向量表的链接本博客基于创龙“678ZH产品线”的SRIO代码，部分参考于网友们的博客&#xf…...

编程日记 2025/9/15 22:20:53

批量插入数据脚本 const oneDayAgo new Date(Date.now() - 1 * 24 * 60 * 60 * 1000);const documents []; for (let i 1; i < 100; i) {documents.push({id: i, // 递增的 idcreateTime: oneDayAgo, // 1天前的日期data: Sample data ${i} // 其他字段（可选…...

编程日记 2025/9/12 4:25:14

MySQL 主从集群同步延迟问题分析与解决方案

MySQL 主从复制（Replication）是构建高可用架构的核心技术，但在实际应用中，主从同步延迟（Replication Lag）是常见且棘手的问题。延迟会导致从库数据不一致、读请求返回旧数据，甚至引发业务逻辑错…...

编程日记 2025/9/13 19:30:10

论文笔记（七十二）Reward Centering（五）

Reward Centering（五） 文章概括摘要附录B 理论细节C 实验细节D 相关方法的联系文章概括引用： article{naik2024reward,title{Reward Centering},author{Naik, Abhishek and Wan, Yi and Tomar, Manan and Sutton, Richard S},journal{arX…...

编程日记 2025/9/15 1:56:16

FFmpeg 是什么？为什么？怎么用？

摘要：本文介绍了 FFmpeg，一个功能强大的开源多媒体处理工具，广泛应用于视频和音频文件的处理。FFmpeg 支持多种多媒体格式，能够实现视频编码/解码、格式转换、裁剪、合并、音频提取、流媒体处理等功能。本文详细阐述了 FFmpeg 的主…...

编程日记 2025/9/8 1:12:56

雷池WAF动态防护技术实测

作者； Hacker / 0xh4ck3r 介绍长亭雷池（SafeLine）是由北京长亭科技有限公司耗时近10年研发并推出的Web应用防火墙（WAF），其核心检测能力由智能语义分析算法驱动。雷池旨在为用户提供高质量的Web攻击防护、…...

编程日记 2025/9/14 16:11:18

BUU40 [CSCCTF 2019 Qual]FlaskLight1【SSTI】

模板： {{.__class__.__base__.__subclasses__()[80].__init__.__globals__[__builtins__].eval("__import__(os).popen(type flag.txt).read()")}} 是个空字符串，.__class__代表这个空字符串的类是什么（这里是单引号双引号都行&a…...

编程日记 2025/9/10 18:54:43

【每日八股】Redis篇（二）：数据结构

Redis 数据类型？ 主要有 STRING、LIST、ZSET、SET 和 HASH。 STRING String 类型底层的数据结构实现主要是 SDS（简单动态字符串），其主要应用场景包括： 缓存对象：可以用 STRING 缓存整个对象的 JSON&…...

编程日记 2025/9/16 1:38:08