当前位置：首页 > news >正文

基于异步IO的io_uring

news 来源：原创 2025/6/19 5:24:06

基于异步IO的io_uring

1. io_uring的实现原理

io_uring使用了一种异步IO机制，它通过一对环形缓冲区(ring buffer)实现用户态于内核态之间的高效通信，用户只需将IO请求放入提交队列，当内核完成IO请求时，会将结果放入完成队列，然后用户从完成队列中提取结果并进行后序处理。

io_uring中的两个队列是映射到用户态的共享内存区域，用户态和内核态可以直接通过这个区域交换数据，减少了系统调用上下文切换。用户也可以一次性提交多个IO请求，减少了系统调用次数。

io_uring在内核中有专门的work线程来处理用户请求，完成IO操作，并且worker线程数量也是内核根据cpu核心数和负载情况自己调节的。

io_uring的优点：

高并发，通过异步IO机制，一个线程能够同时进行大量的IO处理，不会产生阻塞。
高性能低延迟，读写操作在内核态完成，并且IO请求和IO结果都是通过共享内存来传递的，减少了系统调用和上下文切换次数。

2. liburing的使用流程

2.1 多线程设计

每个线程一个io_uring–> 不用考虑同步，但是浪费资源
一个io_uring线程加一个线程池处理任务 --> 需要考虑同步问题
多个线程使用一个io_uring，同样需要考虑同步问题

2.2 流程

创建 io_uring 实例

int ret = io_uring_queue_init(32, &ring, 0);  // 初始化 io_uring 实例，队列深度为 32

填充IO请求

sqe = io_uring_get_sqe(&ring);  // 获取一个提交队列入口io_uring_prep_write(sqe, fd, buf, strlen(buf), 0);  // 写入文件
io_uring_prep_read(sqe, fd, buf, sizeof(buf), 0);  // 异步读取文件

提交IO请求

int submitted = io_uring_submit(&ring);  // 提交请求到内核

等待IO请求完成

int ret = io_uring_wait_cqe(&ring, &cqe);  // 等待完成队列中的一个请求完成
io_uring_cqe_seen(&ring, cqe);  // 告诉 io_uring 已经处理完该完成队列入口

清理资源

io_uring_cqe_seen(&ring, cqe);  // 告诉 io_uring 已经处理完该完成队列入口

3. proactor网络模型

proactor网络模型是一种异步IO事件驱动的模型，它向内核提交IO请求，然后等待内核完成IO操作后，再提取结果。它与reactor一样都是高性能、高并发的网络模型，与reactor的区别在于，IO事件的处理是在内核态完成的，用户直接获取IO操作的结果。

Proactor 模式的关键思想是将 I/O 操作的处理责任交给操作系统，应用程序只负责发起请求和处理回调。

proactor的优点

高性能的异步IO，IO操作在内核态完成，内核完成后将结果通知用户，因此能够减少系统调用和上下文切换，提高性能。
高并发，和reactor一样，都能够用一个线程同时处理大量连接的IO请求，只不过reactor依靠的是IO多路复用机制，而proactor依赖的异步IO。
线程复用性，和reactor一样，proactor也可以减少线程的切换、创建、销毁的开销，节约线程资源，程序的局部性更好，对缓存更友好。

4. proactor模式的使用场景

高性能、高并发、内核5.1以上

4.1 reactor对比proactor

IO事件处理上：reactor在用户态处理IO操作，用户需要注册事件、等待事件发生，然后在用户态调用IO操作；而proactor模式在内核处理IO操作，用户只需提交异步IO请求，然后等待和获取IO操作的结果，内核态的worker线程会进行实际的IO操作。
性能上：由于proactor模式由内核来负责处理IO操作，减少了系统调用和上下文切换次数，性能较强。经过实测，在echo回声应用上测试16、64、512、1024长度消息，proactor的性能平均要比epoll高10%左右。

基于异步IO的io_uring

基于异步IO的io_uring 1. io_uring的实现原理 io_uring使用了一种异步IO机制，它通过一对环形缓冲区(ring buffer)实现用户态于内核态之间的高效通信，用户只需将IO请求放入提交队列，当内核完成IO请求时，会将结果放入完成队列&…...

编程日记 2025/6/1 10:36:00

【redis】centos7下安装redis7

在CentOS 7下安装Redis7可以通过以下两种方法实现：手动编译安装和使用YUM进行安装。 CentOS 7系统的环境和版本： $ cat /etc/centos-release CentOS Linux release 7.9.2009 (Core)手动编译安装参考官方文档：https://redis.io/docs/lates…...

编程日记 2025/6/4 4:10:07

信息系统项目管理-采购管理-采购清单示例

序号类别产品/服务名称规格/功能描述数量备注1硬件服务器高性能处理器，大容量存储10HP、DELL2网络设备高速路由器和交换机10华为3工作站多核处理器，高分辨率显示器25国产设备4移动检查设备手持式移动检查仪，可连接云平台30国产设备5打印机和扫…...

编程日记 2025/6/2 21:19:00

python 代码使用 DeepXDE 库实现了一个求解二维非线性偏微分方程（PDE）的功能

import deepxde as dde import numpy as np import matplotlib.pyplot as plt import tensorflow as tf# 设置时空计算域 Lx 1 # x 范围从 0 到 1 Ly 1 # y 范围从 0 到 1 Lt 0.05 # t 范围从 0 到 0.05 geom dde.geometry.Rectangle([0, 0], [Lx, Ly]) # 空间域 timed…...

编程日记 2025/5/30 10:54:19

后端技术选型 sa-token校验学习下结合项目学习后端鉴权

目录后端注册拦截器实现对 WebMvcConfigurer 接口的类实现静态变量方法重写注册 Spring Framework拦截器 Sa-Token中SaServletFilter拦截器思考为什么使用两个拦截器 1. Spring Framework 拦截器 2. SaServletFilter 为什么要注册两个拦截器？ 总结 …...

编程日记 2025/6/1 11:07:51

继承（8）

大家好，今天我们来学习一下继承方式相关的知识，有助于我们对java的继承有更深的了解，话不多说，来看。 1.10 继承方式在现实生活中,事物之间的关系是非常复杂,灵活多样。 Java中支持以下几种继承方式: 单继承： 多层…...

编程日记 2025/6/3 20:22:40

深度学习-图神经网络-超图概念及在Hyper-YOLO的应用（小白也看懂）

为什么需要超图？ 在一个复杂系统中，某些节点（实体）之间的互动可能不是仅限于两个节点之间的关系，而是多个节点同时参与的更复杂的关系（超边）。简单说就是为了更好的描述事物之间的关系&#xf…...

编程日记 2025/6/3 6:48:58

django基于Python的校园个人闲置物品换购平台

Django 基于 Python 的校园个人闲置物品换购平台一、平台概述 Django 基于 Python 的校园个人闲置物品换购平台是专为校园师生打造的一个便捷、环保且充满活力的线上交易场所。它借助 Django 这一强大的 Python Web 开发框架，整合了校园内丰富的闲置物品资源&…...

编程日记 2025/6/3 2:40:15

opencv的NLM去噪算法

NLM（Non-Local Means）去噪算法是一种基于图像块（patch）相似性的去噪方法。其基本原理是： 图像块相似性：算法首先定义了一个搜索窗口（search window），然后在该窗口内寻找…...

编程日记 2025/6/1 15:59:07

嵌入式系统中的 OpenCV 与 OpenGLES 协同应用

🎬 秋野酱：《个人主页》 🔥 个人专栏:《Java专栏》《Python专栏》 ⛺️心若有所向往,何惧道阻且长文章目录一、OpenCV 在嵌入式中的基石地位二、OpenGLES 为嵌入式图形渲染赋能三、二者协同的精妙之处四、面临的挑战与应对策略在嵌入式开…...

编程日记 2025/6/2 1:22:05

第三十六章 Spring之假如让你来写MVC——拦截器篇

Spring源码阅读目录第一部分——IOC篇第一章 Spring之最熟悉的陌生人——IOC 第二章 Spring之假如让你来写IOC容器——加载资源篇第三章 Spring之假如让你来写IOC容器——解析配置文件篇第四章 Spring之假如让你来写IOC容器——XML配置文件篇第五章 Spring之假如让你来写…...

编程日记 2025/6/2 10:34:43

DDD - 如何运用 DDD 进行数据库设计

文章目录 Pre概述领域对象持久化的思想领域模型的设计传统的 4 种关系1. 一对一关系2. 多对一关系3. 一对多关系4. 多对多关系继承关系的 3 种设计1. 继承关系的第一种方案：整个父类与子类都写入一张表2. 继承关系的第二种方案：各子类各自对应各自的表3…...

编程日记 2025/5/30 13:49:42

OSPF - 特殊报文与ospf的机制

👠1 携带FA地址的5类LSA 除去7类转5类的LSA会携带FA地址，还有一种情况会有FA地址 FA地址:forwarding address 转发地址，解决次优路径，避免环路5类LSA FA地址不为0，则直接通过FA地址去往目标网段 FA地址为0&#xff0c…...

编程日记 2025/5/30 19:26:05

VSCode 插件

VSCode 插件 1. GitHub Copilot - AI 代码助手功能：根据上下文提供实时代码补全，支持自然语言转代码，提供符合现代编程规范的建议。进阶技巧： 使用快捷键 Alt ] 切换多个建议。写注释时，描述业务逻辑而不是具体实现…...

编程日记 2025/6/3 13:30:19

jQuery CSS 类

jQuery CSS 类引言在网页设计和开发中，CSS（层叠样式表）起着至关重要的作用，它负责定义网页的布局、颜色、字体等视觉效果。jQuery，作为一个快速、小巧且功能丰富的JavaScript库，极大地简化了HTML文档的…...

编程日记 2025/6/3 20:40:15

CentOS下安装Docker

Docker 必须要在Linux环境下才能运行，windows下运行也是安装虚拟机后才能下载安装运行，菜鸟教程下载安装 linux 依次执行下边步骤更新 yum yum update 卸载旧的Docker yum remove docker docker-client docker-client-latest docker-common doc…...

编程日记 2025/6/3 8:14:02

SQLAlchemy

https://docs.sqlalchemy.org.cn/en/20/orm/quickstart.htmlhttps://docs.sqlalchemy.org.cn/en/20/orm/quickstart.html 声明模型在这里，我们定义模块级构造，这些构造将构成我们从数据库中查询的结构。这种结构被称为声明式映射，它同时定…...

编程日记 2025/6/2 2:58:31

2025年第三届“华数杯”国际赛A题解题思路与代码（Python版）

游泳竞技策略优化模型代码详解第一题：速度优化模型在这一部分，我们将详细解析如何通过数学建模来优化游泳运动员在不同距离比赛中的速度分配策略。 1. 模型概述我们的模型主要包含三个核心文件： speed_optimization.py: 速度优化的核…...

编程日记 2025/5/31 8:02:09

深入架构剖析博客点赞逻辑 strategy 策略模式策略接口上下文具体策略项目实战

目录点赞策略上下文策略上下文代码详解 1. 策略模式概述 2. 核心组件 3. 代码解读 LikeStrategyContext 类 LikeTypeEnum 枚举 LikeStrategy 接口具体策略类 4. 如何使用这个设计 5. 优点 6. 总结具体代码实现定义枚举类从控制层传入参数到上下文在策略上…...

编程日记 2025/6/4 1:20:54

嵌入式Linux之C语言开发基础

一、C 语言编译过程 Linux 的 C 语言开发，一般选择 GCC 工具链进行编译，示例： 1.mkdir helloworld 2.cd helloworld // 1.main.c #include "hello.h" int main() {say_hello();return 0; } // 2.hello.h #ifndef __HELLO_H__ #de…...

编程日记 2025/5/31 17:50:05

std::accumulate

std::accumulate 是 C 标准库中的一个算法，定义在 <numeric> 头文件中。它用于计算给定范围内元素的累积值（通常是一个和，但也可以是其他类型的累积操作）。 template< class InputIt, class T > T accumulate( Input…...

编程日记 2025/6/1 4:21:14

计算机网络（33）传输控制协议TCP概述

一、定义与基本概念 TCP是一种面向连接的、可靠的、基于字节流的传输层通信协议。它工作在OSI模型的第四层，即传输层，为用户提供可靠的、有序的和无差错的数据传输服务。TCP协议与UDP协议是传输层的两大主要协议，但两者在设计上有明显的不同&…...

编程日记 2025/5/30 23:51:19

Gitee图形界面上传（详细步骤）

目录 1.软件安装 2.安装顺序 3.创建仓库 4.克隆远程仓库到本地电脑提交代码的三板斧 1.软件安装 Git - Downloads (git-scm.com) Download – TortoiseGit – Windows Shell Interface to Git 2.安装顺序 1. 首先安装git-2.33.1-64-bit.exe，顺序不能搞错2. …...

编程日记 2025/5/28 7:17:02

【STM32-学习笔记-6-】DMA

文章目录 DMAⅠ、DMA框图Ⅱ、DMA基本结构Ⅲ、不同外设的DMA请求Ⅳ、DMA函数Ⅴ、DMA_InitTypeDef结构体参数①、DMA_PeripheralBaseAddr②、DMA_PeripheralDataSize③、DMA_PeripheralInc④、DMA_MemoryBaseAddr⑤、DMA_MemoryDataSize⑥、DMA_MemoryInc⑦、DMA_DIR⑧、DMA_Buff…...

编程日记 2025/6/3 22:59:15

苍穹外卖08——（涉及接收日期格式数据、ApachePOI导出报表、sql获取top10菜品数据）

营业额统计 service层在需要处理空值、与数据库交互或使用集合时，Integer 、Double是更好的选择。 // 导入string工具类 import org.apache.commons.lang.StringUtils; Service // 标记该类为Spring的服务组件 Slf4j // 引入日志功能 public class Repor…...

编程日记 2025/5/31 10:25:09

Node.js——fs（文件系统）模块

个人简介 👀个人主页： 前端杂货铺 🙋‍♂️学习方向： 主攻前端方向，正逐渐往全干发展 📃个人状态： 研发工程师，现效力于中国工业软件事业 🚀人生格言： 积跬步…...

编程日记 2025/6/2 0:57:49

【Docker】入门教程

目录一、Docker的安装二、Docker的命令 Docker命令实验 1.下载镜像 2.启动容器 3.修改页面 4.保存镜像 5.分享社区三、Docker存储 1.目录挂载 2.卷映射四、Docker网络 1.容器间相互访问 2.Redis主从同步集群 3.启动MySQL 五、Docker Compose 1.命令式安装 …...

编程日记 2025/6/3 4:14:20

Ubuntu中使用miniconda安装R和R包devtools

安装devtools环境包 sudo apt-get install gfortran -y sudo apt-get install build-essential -y sudo apt-get install libxt-dev -y sudo apt-get install libcurl4-openssl-dev -y sudo apt-get install libxml2.6-dev -y sudo apt-get install libssl-dev -y sudo apt-g…...

编程日记 2025/6/3 13:09:16

基于异步IO的io_uring

1. io_uring的实现原理

2. liburing的使用流程

2.1 多线程设计

2.2 流程

3. proactor网络模型

4. proactor模式的使用场景

4.1 reactor对比proactor

相关文章：