当前位置：首页 > news >正文

【性能优化点滴】odygrd/quill 中一个简单的标记位作用--降低 IO 次数

news 来源：原创 2025/7/28 12:31:23

在 StreamSink 类中，成员变量 _write_occurred 的作用是 跟踪自上次刷新（Flush）以来是否有写入操作发生，其核心目的是 优化 I/O 性能。以下是详细解析：

`_write_occurred` 的作用

1. 避免不必要的刷新（Flush）

机制：
当 write_log 方法（日志写入）被调用时，_write_occurred 会被设为 true；
当 flush_sink 方法（主动刷新）被调用时，仅在 _write_occurred 为 true 时执行实际的 fflush 操作，随后将其重置为 false。
优化意义：
避免在无新日志写入时频繁调用 fflush（系统调用），减少 I/O 开销。

2. 状态跟踪

写入标记：
记录自上次刷新后是否有新数据写入缓冲区。若未写入，跳过刷新操作。
示例场景：
若连续多次调用 flush_sink 但无新日志写入，只有第一次会真正执行 fflush。

代码流程解析

写入日志时

void write_log(..., std::string_view log_statement) override {// ... 写入日志到文件safe_fwrite(...); // 实际写入操作_write_occurred = true; // 标记有写入发生
}

写入后必标记：无论日志内容是否为空，只要调用 write_log 即标记为 true。

主动刷新时

void flush_sink() override {if (!_write_occurred || !_file) { return; // 无写入或文件未打开时直接返回}flush(); // 执行实际刷新
}void flush() {_write_occurred = false; // 重置标记fflush(_file); // 系统调用刷新缓冲区
}

条件刷新：仅在确实有写入时调用 fflush，避免无意义刷新。

设计必要性

性能优化

场景	无 `_write_occurred`	有 `_write_occurred`
高频写入	每次 `flush` 触发 `fflush`，I/O 压力大	仅在必要时触发 `fflush`，减少系统调用
低频写入	多余的 `fflush` 浪费 CPU 周期	无写入时跳过 `fflush`，节省资源

资源保护

文件句柄有效性：
若文件被意外关闭（如 _file 变为 nullptr），flush_sink 会直接返回，避免操作无效指针。

典型应用场景

1. 日志批量写入

// 连续写入多条日志
sink.write_log(...); // _write_occurred = true
sink.write_log(...); // _write_occurred = true
sink.flush_sink();   // 实际刷新，重置 _write_occurred = false
sink.flush_sink();   // 直接返回（无新写入）

2. 定时刷新策略

// 定时器每 1 秒触发刷新
void on_timer() {sink.flush_sink(); // 仅当 1 秒内有新写入时刷新
}

扩展：`fflush` 的成本

系统调用开销：
fflush 会触发用户态到内核态的上下文切换，频繁调用可能成为性能瓶颈。
磁盘 I/O 延迟：
强制将缓冲区数据写入磁盘，涉及物理写操作，延迟较高。
优化平衡：
通过 _write_occurred 减少 fflush 次数，在 数据安全性（及时持久化）和性能之间取得平衡。

总结

_write_occurred 是一个轻量级的状态标志，通过简单的布尔值跟踪写入状态，实现了：

减少冗余 I/O 操作：避免无数据时的无效刷新。
降低系统调用开销：提升高吞吐场景下的性能。
保护资源：防止操作无效文件指针。

它是高性能日志库中常见的优化手段之一，尤其适用于需要平衡实时性和吞吐量的场景。

感触：对于一些好的三方库，还是有很多值得我们学习借鉴的知识点的，需要我们多想多思考多问一个为什么

【技术人的鼓励】❤️ 如果这篇文章对您有帮助，欢迎点击打赏按钮支持博主！您的鼓励是我持续输出优质技术内容的动力，哪怕只是1元也足以让我感受到这份珍贵的认可。💰

【性能优化点滴】odygrd/quill 中一个简单的标记位作用--降低 IO 次数

在 StreamSink 类中，成员变量 _write_occurred 的作用是跟踪自上次刷新（Flush）以来是否有写入操作发生，其核心目的是优化 I/O 性能。以下是详细解析： _write_occurred 的作用 1. 避免不必要的刷新（Flush…...

编程日记 2025/7/28 12:31:23

Unity2022发布Webgl2微信小游戏部分真机黑屏

复现规律： Unity PlayerSetting中取消勾选ShowSplashScreen 分析： 在Unity中，Splash Screen（启动画面） 不仅是视觉上的加载动画，还承担了关键的引擎初始化、资源预加载和渲染环境准备等底层逻辑。禁用后导…...

编程日记 2025/7/26 12:59:16

TDengine 3.3.2.0 集群报错 Post “http://buildkitsandbox:6041/rest/sql“

原因： 初始化时处于内网环境下，Post “http://buildkitsandbox:6041/rest/sql“ 无法访问修复： vi /etc/hosts将buildkitsandbox映射为本机节点外网环境下初始化时没有该问题...

编程日记 2025/6/28 2:04:27

基于yolov11的中空圆柱形缺陷检测系统python源码+pytorch模型+评估指标曲线+精美GUI界面

【背景介绍】中空圆柱形缺陷检测在多个领域具有深远意义。在石油、天然气及化工行业，缺陷检测可预防泄漏事故，避免火灾、爆炸及环境污染，保障人员与财产安全。建筑、桥梁及航空航天领域则依赖此技术确保中空圆柱形结构的稳定性，…...

编程日记 2025/7/24 8:00:43

Python爬虫-爬取AliExpress商品搜索词排名数据

前言本文是该专栏的第49篇，后面会持续分享python爬虫干货知识，记得关注。本文，笔者以AliExpress平台为例。基于Python爬虫，通过某个指定的“搜索关键词”，批量获取该“搜索关键词”的商品排名数据。具体实现思路和详细逻辑，笔者将在正文结合完整代码进行详细介绍。废…...

编程日记 2025/7/27 8:56:50

20250321在荣品的PRO-RK3566开发板的buildroot系统下使用ll命令【直接编译进IMG】

./buildroot/system/skeleton/etc/profile # some more ls aliases alias llls -alF alias lals -A alias lls -CF 20250321在荣品的PRO-RK3566开发板的buildroot系统下使用ll命令【直接编译进IMG】 2025/3/21 16:53 cd /etc/ echo "" >> # some more ls ali…...

编程日记 2025/7/25 7:58:51

Flink 自定义数据源：从理论到实践的全方位指南

目录第一章：自定义数据源的基础概念数据源是什么？它在 Flink 中扮演什么角色？ Flink 的内置数据源：开箱即用的 “标配” 为什么需要自定义数据源？它的杀手锏在哪？第二章：自定义数据源的实现之道接口选择：从简单到高级，选对工具事半功倍 SourceFunction：入门…...

编程日记 2025/7/28 10:24:08

如何在 Java 中查找 PDF 页面大小（教程）

PDF 文件并未被 Java 直接支持。本教程将向您展示如何使用 JPedal Java PDF 库以简单的步骤提取 PDF 文件的页面大小（高度和宽度）。页面大小可以以厘米、英寸或像素为单位获取。为什么要使用第三方库处理 PDF 文件？ PDF 文件是一种复杂…...

编程日记 2025/7/25 9:13:47

java版嘎嘎快充玉阳软件互联互通中电联云快充协议充电桩铁塔协议汽车单车一体充电系统源码uniapp

演示： 微信小程序：嘎嘎快充 http://server.s34.cn:1888/ 系统管理员 admin/123456 运营管理员 yyadmin/Yyadmin2024 运营商 operator/operator2024 系统特色： 多商户、汽车单车一体、互联互通、移动管理端（开发中） 另…...

编程日记 2025/7/25 19:23:12

使用Mastra.ai构建AI智能体：一次动手实践

Mastra框架提供了一种简洁高效的AI智能体构建方式。本文将分享我使用Mastra.ai的实践经历。我们将逐步完成环境搭建、探索框架核心功能，并构建一个能与工具交互的基础智能体。过程中我会总结成功经验、遇到的问题以及收获的启示。如果你对AI开发感兴趣，或正在寻找一个…...

编程日记 2025/7/20 5:01:13

Redis之大key问题

BigKey 常见面试题目你会么？ MoreKey 案例大批量往redis里面插入2000W测试数据key Linux Bash下面执行，批量插入100W for((i1;i<100*10000;i)); do echo "set k$i v$i" >> /tmp/redisTest.txt ;done;生成100W条redis批量设置kv的…...

编程日记 2025/7/28 12:31:23

Excel第41套全国人口普查

2. 导入网页中的表格：数据-现有链接-考生文件夹：网页-找到表格-点击→变为√-导入删除外部链接关系：数据-点击链接-选中连接-删除-确定（套用表格格式-也会是删除外部链接）数值缩小10000倍（除以10000即可&am…...

编程日记 2025/7/26 14:07:50

深度学习驱动的车牌识别：技术演进与未来挑战

一、引言 1.1 研究背景在当今社会，智能交通系统的发展日益重要，而车牌识别作为其关键组成部分，发挥着至关重要的作用。车牌识别技术广泛应用于交通管理、停车场管理、安防监控等领域。在交通管理中，它可以用于车辆识别、交通违…...

编程日记 2025/7/25 12:15:08

PageHiOffice网页组件(WebOffice文档控件)开发集成技巧专题一

PageHiOffice网页组件作为最新一代的WebOffice文档控件，这是目前市场上唯一能做到在Chrome等最新版浏览器中实现内嵌网页运行的商用文档控件，是OA及ERP等系统处理各种文档的福音。从发布到完善已经超过3年，不管是功能性还是稳定性都已经有了长…...

编程日记 2025/7/26 9:37:54

A2 最佳学习方法

记录自己想法的最好理由是发现自己的想法，并将其组织成可传播的形式 (The best reason for recording what one thinks is to discover what one thinks and to organize it in transmittable form.) Prof Ackoff 经验之谈： 做培训或者写文章&#xff…...

编程日记 2025/7/24 4:24:44

从JVM底层揭开Java方法重载与重写的面纱：原理、区别与高频面试题突破

🌟引言：一场由方法调用引发的"血案" 2018年，某电商平台在"双十一"大促期间遭遇严重系统故障。技术团队排查发现，问题根源竟是一个继承体系中的方法重写未被正确处理，导致订单金额计算出现指数级…...

编程日记 2025/7/27 13:17:42

线程控制与线程操作

目录线程的创建 tid pthread_self() 线程的退出 pthread_join 传参问题和返回值问题 pthread_exit 线程取消线程分离我们来学习线程的控制与线程操作线程的创建我们之前在线程的概念中就讲过了，我们可以通过pthread_create来创建一个或者多个子线程…...

编程日记 2025/7/28 12:30:28

Spring相关API

1是相对路径 2 是绝对路径 3 在注解时使用...

编程日记 2025/6/28 21:41:51

【GoLang】调用llm时提示词prompt的介绍以及使用方式

介绍提示词是一种与大模型交互的对话格式，它以 JSON 格式定义了一个消息列表（messages），包含了系统消息和用户消息。我们向AI提问时，其实发给AI的都是提示词，别看我们只是简单输入了一句话，…...

编程日记 2025/7/25 5:01:51

[杂学笔记]锁为什么影响效率、I/O多路复用、三种I/O多路复用模型的区别、atomic原子操作类、MySQL的持久性是如何实现的

目录 1.锁为什么影响效率 2.I./O多路复用 3.三种I/O多路复用模型的区别 4.atomic原子操作类介绍常用函数内存顺序含义 5.MySQL持久性的实现 1.锁为什么影响效率线程阻塞与上下文切换：在多线程并发访问的场景下，只有一个线程能够进入临界区…...

编程日记 2025/7/27 1:48:03

AI Agent开发大全第八课-Stable Diffusion 3的本地安装全步骤

前言就像我们前面几课所述，本系列是一门体系化的教学，它不像网上很多个别存在的单篇博客走“吃快餐”模式，而是从扎实的基础来带领大家一步步迈向AI开发高手。所以我们的AI课程设置是相当全面的，除了有牢固的基础知识外还有外面互联网上也搜不到的生产级实战。前面讲过…...

编程日记 2025/7/28 7:21:17

Leetcode 刷题笔记图论part05

卡码网 107 寻找存在的路径初识并查集并查集功能： 寻找根节点，函数: find(int u)，也就是判断这个节点的祖先节点是哪个将两个节点接入到同一个集合，函数: join(int u, int v)，将两个节点连在同一个根节点上判断两…...

编程日记 2025/7/15 18:15:04

NSSRound(持续更新)

了解过PHP特性吗这个题相当于是php特性大杂烩先看源代码 <?php error_reporting(0); highlight_file(__FILE__); include("rce.php"); $checker_1 FALSE; $checker_2 FALSE; $checker_3 FALSE; $checker_4 FALSE; $num $_GET[num]; if (preg_match(&qu…...

编程日记 2025/7/28 0:27:36

Python虚拟环境：从入门到实战指南

目录一、为什么需要Python虚拟环境？ 二、如何创建Python虚拟环境？ 1. 使用venv（Python 3.3内置） 2. 使用virtualenv（第三方工具） 3. 使用conda（适合数据科学项目） 三、虚拟环…...

编程日记 2025/7/22 6:35:01

Python实现小红书app版爬虫

简介：由于数据需求的日益增大，小红书网页版已经不能满足我们日常工作的需求，为此，小编特地开发了小红书手机版算法，方便大家获取更多的数据，提升工作效率。手机版接口主要包括：搜素&#xff0…...

编程日记 2025/7/28 4:15:09

注册中心之Nacos相较Eureka的提升分析

1. 传统拉取模式的缺陷（如Eureka） 在类似Eureka的注册中心中，消费者需要定时（如每30秒）主动拉取服务列表（Pull模式）。如果此时某个服务突然宕机，消费者可能无法立即感知&#xff0c…...

编程日记 2025/7/23 10:23:14

高数下---8.1平面与直线

目录平面的确定直线的确定若要求某一直线或平面就根据要素来求。例题平面中的特殊情况平面中的解题思路直线的解题思路平面的确定两要素一一点二倾斜角即法向量点法式可化为一般式 Ax By Cz D 0; (A,B,C) 即法向量； 改变D 即…...

编程日记 2025/7/27 22:12:00

【AI速读】30分钟搭建持续集成：用Jenkins拯救你的项目

每个开发者都踩过的坑你有没有这样的经历？花了一周时间改代码，自信满满准备提交，结果合并同事的更新后，项目突然编译失败，测试跑不通。你焦头烂额地排查问题，老板还在催进度……但明明不是你的错！这种“集成地狱”几乎每个团队都遇到过。传统的手动集成方式（比如每周…...

编程日记 2025/7/27 1:48:05

centos 9 编译安装 rtpengine (快方式)-使用 debian12 系统自带

1：更新系统包 dnf update 2：启用EPEL仓库（提供额外软件包) # 安装EPEL仓库 sudo dnf install epel-release -y# 检查EPEL仓库是否启用（输出应包含epel） dnf repolist# 启用CRB仓库 sudo dnf config-manager --set-e…...

编程日记 2025/7/28 1:20:50

Android第六次面试总结（okhttp篇）

OkHttp 是一个高效的 HTTP 客户端，它的工作流程包含多个步骤，从请求的创建、发送，到服务器响应的接收和处理，每个环节都有特定的逻辑和组件参与。以下是对 OkHttp 工作流程的详细说明： 1. 请求构建在使用 OkHttp 发…...

编程日记 2025/7/24 17:33:12

ngx_http_escape_location_name

定义在 src\http\ngx_http.c static ngx_int_t ngx_http_escape_location_name(ngx_conf_t *cf, ngx_http_core_loc_conf_t *clcf) {u_char *p;size_t len;uintptr_t escape;escape 2 * ngx_escape_uri(NULL, clcf->name.data, clcf->name.len,NGX_ESCAPE_U…...

编程日记 2025/7/26 10:06:27

QT网络通信的接口与使用

文章目录前言1.服务端实现流程1.1步骤 1：创建 QTcpServer 并监听端口1.2步骤 2：处理新连接请求1.3步骤 3：接收客户端数据1.4步骤 4：处理客户端断开 2.客户端实现流程2.1步骤 1：创建 QTcpSocket 并连接服务器2.2步骤 2…...

编程日记 2025/7/18 20:32:17

基于生成对抗网络（GAN）的图像超分辨率重建：技术与应用

图像超分辨率重建（Super-Resolution, SR）是计算机视觉领域的重要任务，旨在从低分辨率图像中恢复出高分辨率图像。这一技术在医学影像、卫星图像、视频增强等领域具有广泛的应用价值。传统的超分辨率方法依赖于插值或基于模型的重建，效果有限。近年来，生成对抗网络（GAN）通…...

编程日记 2025/7/27 15:35:55

【spring对bean Request和Session的管理流程】

在 Spring 框架中，除了常见的单例（Singleton） 和原型（Prototype） 作用域外，还支持 Request 和 Session 作用域。这两种作用域主要用于 Web 应用程序中，分别表示 Bean 的生命周期与 HTTP 请求或…...

编程日记 2025/7/16 17:50:53

FastGPT原理分析-数据集创建第二步：处理任务的执行

概述文章《FastGPT原理分析-数据集创建第一步》已经分析了数据集创建的第一步：文件上传和预处理的实现逻辑。本文介绍文件上传后，数据处理任务的具体实现逻辑。数据集创建总体实现步骤从上文可知数据集创建总体上来说分为两大步骤： &a…...

编程日记 2025/7/24 14:04:45

AI重构SEO关键词优化路径

内容概要人工智能技术的深度应用正在推动SEO优化进入全新阶段。传统关键词优化依赖人工经验与静态规则，存在效率瓶颈与策略滞后性缺陷。AI技术通过智能语义分析系统，能够穿透表层词汇限制，精准捕捉用户搜索意图的语义关联网络，结…...

编程日记 2025/7/28 4:17:44

VMWare Ubuntu 详细安装教程

VMWare Ubuntu 详细安装教程一、下载安装VMware二、下载 Ubuntu 镜像文件三、安装 Ubuntu四、开启虚拟机一、下载安装VMware 官网下载地址https://www.vmware.com/products/desktop-hypervisor/workstation-and-fusion知乎大佬的博客原文，含下载地址https://zhua…...

编程日记 2025/7/25 6:54:10

SystemVerilog 数据类型

1、内建数据类型 verilog有两种基本的数据类型：变量和线网，他们各自都可以有四种取值：0 1 z x； RTL代码使用变量来存放组合和时序值；变量可以是单bit或者是多bit的无符号数 reg [7:0] m， 32bit的有符号…...

编程日记 2025/7/25 13:07:28

C语言：扫雷

在编程的世界里，扫雷游戏是一个经典的实践项目。它不仅能帮助我们巩固编程知识，还能锻炼逻辑思维和解决问题的能力。今天，就让我们一起用 C 语言来实现这个有趣的游戏，并且通过图文并茂的方式，让每一步都清晰易懂 1. 游…...

编程日记 2025/7/27 17:09:02

特殊行车记录仪DAT视频丢失的恢复方法

行车记录仪是一种常见的车载记录仪，和常见的“小巧玲珑”的行车记录仪不同，一些特种车辆使用的记录仪的外观可以用“笨重”来形容。下边我们来看看特种车载行车记录仪删除文件后的恢复方法。故障存储: 120GB存储设备/文件系统:exFAT /簇大小:128KB 故…...

编程日记 2025/7/15 13:41:06

_DISPATCHER_HEADER结构中的WaitListHead和_KWAIT_BLOCK的关系

第一部分： // // Wait block // // begin_ntddk begin_wdm begin_nthal begin_ntifs begin_ntosp typedef struct _KWAIT_BLOCK { LIST_ENTRY WaitListEntry; struct _KTHREAD *RESTRICTED_POINTER Thread; PVOID Object; struct _KWAIT_BLOCK *R…...

编程日记 2025/7/22 9:05:04

智能汽车图像及视频处理方案，支持视频实时拍摄特效能力

在智能汽车日新月异的今天，美摄科技作为智能汽车图像及视频处理领域的先行者，凭借其卓越的技术实力和前瞻性的设计理念，为全球智能汽车制造商带来了一场视觉盛宴的革新。美摄科技推出智能汽车图像及视频处理方案，一个集高效性、智…...

编程日记 2025/7/22 12:53:16

Rust + 时序数据库 TDengine：打造高性能时序数据处理利器

引言：为什么选择 TDengine 与 Rust？ TDengine 是一款专为物联网、车联网、工业互联网等时序数据场景优化设计的开源时序数据库，支持高并发写入、高效查询及流式计算，通过“一个数据采集点一张表”与“超级表”的概念显著提升性能…...

编程日记 2025/7/24 19:14:50

Android Audio基础(13)——audiomixer

在 Android 平台上，音频混合器 AudioMixer 主要用在 AudioFlinger 里，将多路音频源数据混音（包括混音、音量处理、重采样及处理声道等）。位于 framework 的音频处理模库 libaudioprocessing（frameworks/av/media/libau…...

编程日记 2025/7/20 22:08:53

vivo 湖仓架构的性能提升之旅

作者：郭小龙 vivo互联网大数据高级研发工程师导读：本文整理自 vivo互联网大数据高级研发工程师郭小龙在 StarRocks 年度峰会上的分享，聚焦 vivo 大数据多维分析面临的挑战、StarRocks 落地方案及应用收益。在即席分析场景&#xff0c…...

编程日记 2025/7/28 1:12:52

常见中间件漏洞攻略-Tomcat篇

一、 CVE-2017-12615-Tomcat put方法任意文件写入漏洞第一步：开启靶场第二步：在首页抓取数据包，并发送到重放器第三步：先上传尝试一个1.txt进行测试第四步：上传后门程序第五步：使用哥斯拉连接二、后…...

编程日记 2025/7/25 10:56:27

基于linuxC结合epoll + TCP 服务器客户端 + 数据库实现一个注册登录功能

1. 整体功能概述实现了一个简单的用户注册和登录系统，采用客户端 - 服务器（C/S）架构。客户端可以选择注册或登录操作，将用户名和密码发送给服务器，服务器接收请求后处理并返回相应的结果给客户端。服务器使用 SQLit…...

编程日记 2025/7/23 1:26:54

redis7.4.2单机配置

解压源码包将从官网下载的redis源码压缩包上传到服务器的相关目录下。 [roothcss-ecs-2851 ~]# cd /opt/soft/redis/ [roothcss-ecs-2851 redis]# ls redis-stable.tar.gz解压并进入解压后的目录中。 [roothcss-ecs-2851 redis]# tar -zxvf redis-stable.tar.gz [roothcss-…...

编程日记 2025/7/28 4:11:36

Unity代码热更新和资源热更新

知识点来源：人间自有韬哥在，hybridclr,豆包目录一、代码热更新1.代码热更新概述2.HybridCLR 二、资源热更新1.资源热更新概述2.AB包2.1.AB包的加载2.2.卸载AB包2.3.加载AB包依赖包2.4.获取MD52.5.生成对比文件2.6.更新AB包 3.Addressable3.1.AssetRef…...

编程日记 2025/7/26 3:37:00

【MySQL篇】DEPENDENT SUBQUERY(依赖性子查询)优化：从百秒到秒级响应的四种优化办法

💫《博主介绍》：✨又是一天没白过，我是奈斯，从事IT领域✨ 💫《擅长领域》：✌️擅长阿里云AnalyticDB for MySQL(分布式数据仓库)、Oracle、MySQL、Linux、prometheus监控；并对SQLserver、NoSQL(…...

编程日记 2025/7/26 4:44:39

_write_occurred 的作用