当前位置：首页 > news >正文

说一说Node.js高性能开发中的I/O操作

news 来源：原创 2025/6/27 8:59:54

众所周知，在软件开发的领域中，输入输出（I/O）操作是程序与外部世界交互的重要环节，比如从文件读取数据、向网络发送请求等。这段时间，也指导项目中一些项目的开发工作，发现在Node.js运用中，理解阻塞与非阻塞 I/O 的差异，是掌握 Node.js 这一强大开发工具的关键所在。之所以这么说，是我发现目前项目组大多开发人员（刚毕业不久）对此知识点没有完整的认知，所以在大多数现代 Web 应用中，非阻塞 I/O 凭借其出色的性能和可扩展性，还有更大的提升空间。所以今天结合者Node.js这一个话题将这个概念融合在一起说说。

一、I/O 操作的基本概念

先了解一下，基本概念。I/O 操作指的是计算机系统与外部设备（如硬盘、网络接口、键盘、显示器等）之间的数据传输过程。在程序运行过程中，I/O 操作往往是相对缓慢的，与 CPU 的高速运算形成鲜明对比。例如，从硬盘读取一个大文件可能需要几十毫秒，而 CPU 在这段时间内可以执行数百万条指令。因此，如何高效地处理 I/O 操作，对于程序的性能至关重要。

二、阻塞 I/O：传统的同步处理方式

阻塞 I/O 是一种传统的同步处理方式。当程序执行阻塞 I/O 操作时，会一直等待该操作完成，在这期间程序会被 "阻塞"，无法执行其他任何任务。就好比你去银行办理业务，取号后必须在大厅等待叫号，在等待的过程中，你不能做其他任何事情，只能眼巴巴地等着。

以读取文件为例，在使用阻塞 I/O 的编程语言中（如传统的同步 Java I/O），当程序调用读取文件的函数时，会立即进入等待状态，直到文件数据被完全读取到内存中，程序才会继续执行后续的代码。在等待的过程中，CPU 资源被浪费，因为程序无法利用这段时间去处理其他任务。

阻塞 I/O 的优点是编程模型简单，易于理解和调试。开发人员可以按照顺序编写代码，不需要考虑异步回调等复杂的逻辑。然而，它的缺点也非常明显，尤其是在处理多个 I/O 操作时，性能会急剧下降。例如，当一个服务器需要同时处理多个客户端的请求时，如果每个请求都采用阻塞 I/O 方式，服务器必须为每个请求创建一个独立的线程或进程来处理，这会导致系统资源的大量消耗，并且线程或进程之间的上下文切换也会带来额外的开销。

三、非阻塞 I/O：异步处理的革新

非阻塞 I/O 是一种异步处理方式，它允许程序在发起 I/O 操作后，不需要立即等待操作完成，而是继续执行后续的代码。当 I/O 操作完成后，系统会以某种方式通知程序（如回调函数、事件驱动等），程序再处理 I/O 操作的结果。这就好比你在网上购物时下单后，不需要一直盯着订单状态，而是可以去做其他事情，等快递到达时，快递员会打电话通知你。

在非阻塞 I/O 模型中，程序通过轮询或者事件驱动的方式来管理多个 I/O 操作。轮询是指程序定期检查 I/O 操作是否完成，这种方式虽然简单，但会浪费 CPU 资源，因为在轮询的过程中，CPU 需要不断地执行检查操作。事件驱动则是一种更高效的方式，它通过操作系统提供的事件机制，当 I/O 操作完成时，自动触发相应的事件，程序只需注册事件处理函数即可。

Node.js 就是基于事件驱动和非阻塞 I/O 构建的运行环境。它采用单线程的事件循环机制，能够高效地处理大量的并发 I/O 操作。在 Node.js 中，当程序发起一个 I/O 操作（如读取文件、处理网络请求等）时，会将该操作交给底层的操作系统去处理，然后立即返回，继续执行后续的代码。当操作系统完成 I/O 操作后，会将结果放入事件队列中，Node.js 的事件循环会不断地从事件队列中取出事件，并执行相应的回调函数来处理结果。

四、阻塞与非阻塞 I/O 的核心差异

1、程序执行方式：阻塞 I/O 会阻塞程序的执行，直到 I/O 操作完成；非阻塞 I/O 不会阻塞程序的执行，程序可以在发起 I/O 操作后继续执行其他任务。

2、资源利用：阻塞 I/O 需要为每个 I/O 操作创建独立的线程或进程，导致系统资源的大量消耗；非阻塞 I/O 通过单线程和事件驱动的方式，高效地利用系统资源，能够处理大量的并发请求。

3、并发性：阻塞 I/O 的并发性较差，难以处理高并发的场景；非阻塞 I/O 具有良好的并发性，能够轻松应对大量的并发 I/O 操作。

4、编程模型：阻塞 I/O 的编程模型简单，易于理解；非阻塞 I/O 的编程模型相对复杂，需要处理异步回调、Promise、async/await 等异步编程模式。

五、Node.js 中非阻塞 I/O 的实现原理

前面铺垫了概念知识，现在就讲其重点？Node.js 的非阻塞 I/O 实现主要依赖于底层的 libuv 库。libuv 是一个跨平台的异步 I/O 库，它提供了事件循环、文件 I/O、网络 I/O、子进程等功能。在 Windows 系统上，libuv 使用 IOCP（输入输出完成端口）来实现异步 I/O；在 Linux 系统上，使用 epoll；在 macOS 系统上，使用 kqueue。这些底层的异步 I/O 机制能够高效地管理大量的并发 I/O 操作。可以说是各取所长，完成相应的I/O操作。

Node.js 的事件循环是其核心机制，它负责处理事件队列中的事件，并执行相应的回调函数。事件循环分为多个阶段，包括定时器阶段（timers）、I/O 回调阶段（I/O callbacks）、空闲 / 准备阶段（idle/prepare）、轮询阶段（poll）、检查阶段（check）和关闭回调阶段（close callbacks）。每个阶段都有其特定的功能，例如定时器阶段处理 setTimeout 和 setInterval 设置的回调函数，轮询阶段处理新的 I/O 事件等。

六、非阻塞 I/O 在现代 Web 应用中的优势

1、高性能：非阻塞 I/O 能够高效地处理大量的并发请求，减少系统资源的消耗，提高服务器的吞吐量。例如，一个使用 Node.js 构建的 Web 服务器，可以轻松处理数万个并发连接，而传统的阻塞 I/O 服务器在处理大量并发连接时，性能会急剧下降。

2、可扩展性：非阻塞 I/O 的编程模型使得应用程序更容易扩展。开发人员可以通过添加更多的事件处理函数来处理更多的并发请求，而不需要担心线程或进程数量过多带来的问题。

3、内存占用低：由于 Node.js 采用单线程的事件循环机制，不需要为每个请求创建独立的线程或进程，因此内存占用较低，能够在有限的硬件资源下运行更多的应用程序。

4、适合 I/O 密集型应用：现代 Web 应用通常是 I/O 密集型的，例如需要处理大量的网络请求、文件读取等操作。非阻塞 I/O 在处理这些操作时具有明显的优势，能够充分利用系统资源，提高应用程序的性能。

七、阻塞 I/O 的适用场景

虽然非阻塞 I/O 在大多数情况下表现更好，但阻塞 I/O 在某些特定场景下仍然有其用武之地。例如，当处理少量的 I/O 操作，并且这些操作的执行时间非常短，此时阻塞 I/O 的开销可能可以忽略不计，而其简单的编程模型可能更适合开发。此外，在一些需要严格顺序执行的场景中，阻塞 I/O 也可能是一个不错的选择。

最后小结以下

阻塞与非阻塞 I/O 是两种不同的 I/O 处理方式，它们各有优缺点。阻塞 I/O 编程简单，但性能和可扩展性较差，适合处理少量的、简单的 I/O 操作；非阻塞 I/O 编程相对复杂，但具有高性能和良好的可扩展性，适合处理大量的并发 I/O 操作。Node.js 作为基于非阻塞 I/O 和事件驱动的运行环境，充分发挥了非阻塞 I/O 的优势，成为了现代 Web 应用开发的重要选择。

无论是专业人士还是非专业人士，理解阻塞与非阻塞 I/O 的差异对于掌握 Node.js 和构建高性能的 Web 应用都具有重要意义。对于专业人士来说，深入理解其底层实现原理和编程模型，能够更好地利用 Node.js 的优势进行开发和优化；这也是 Node.js 在现代 Web 开发中如此受欢迎的原因之一吧。随着 Web 应用的不断发展，对高性能和可扩展性的要求越来越高，非阻塞 I/O 将在未来的开发中发挥更加重要的作用。

说一说Node.js高性能开发中的I/O操作

众所周知，在软件开发的领域中，输入输出（I/O）操作是程序与外部世界交互的重要环节，比如从文件读取数据、向网络发送请求等。这段时间，也指导项目中一些项目的开发工作，发现在Node.js运用中&#…...

编程日记 2025/6/27 8:59:54

小白入门：GitHub 远程仓库使用全攻略

一、Git 核心概念 1. 三个工作区域工作区（Working Directory）：实际编辑文件的地方。暂存区（Staging Area）：准备提交的文件集合（使用git add操作）。本地仓库（Local…...

编程日记 2025/6/27 8:54:26

Protobuf3协议关键字详解与应用实例

一、核心语法与基础关键字 syntax 声明协议版本，必须为文件的第一行非空、非注释内容。 syntax "proto3"; // 显式指定proto3语法，否则编译器默认使用proto2message 定义消息类型，包含一组结构化字段。支持嵌套消息定义&#xff…...

编程日记 2025/6/27 8:57:47

阿克曼-幻宇机器人系列教程3- 机器人交互实践（Message）

上一篇文章介绍了如何通过topic操作命令实现与机器人的交互，本篇我们介绍如何通过Message（即topic的下一级）实现与机器人的交互。和topic一样，首先在一个终端通过ssh命令登录机器人、启动机器人，然后打开另外一个终端…...

编程日记 2025/6/26 20:26:26

Leetcode刷题 | Day63_图论08_拓扑排序

一、学习任务拓扑排序代码随想录二、具体题目 1.拓扑排序117. 软件构建【题目描述】某个大型软件项目的构建系统拥有 N 个文件，文件编号从 0 到 N - 1，在这些文件中，某些文件依赖于其他文件的内容，这意味着如果文件 A 依…...

编程日记 2025/6/27 8:51:50

[Harmony]获取资源文件中.txt文件中的字符串

txt文件 src/main/resources/rawfile/userInfo.txt {"Code": 200,"Msg": "登录成功","RetData": {"Name": "shq","Phone": "18511111111","PostName": "按摩技师",&qu…...

编程日记 2025/6/26 19:48:03

matlab多项式

1. 多项式表示多项式用行向量表示，按降幂排列系数。例如，多项式 3x22x1 表示为 [3 2 1]。 2. 创建多项式直接输入系数：如 p [1 -3 3 -1] 表示 x3−3x23x−1。由根创建：使用 poly 函数。例如，根为 [1, 1, 1]&…...

编程日记 2025/6/25 15:15:39

手搓传染病模型（SEI - SEIAR ）

在传染病防控的前沿研究中，构建精准的数学模型对于理解疾病传播机制、预测疫情走势以及制定有效干预策略至关重要。SEI - SEIAR 模型（易感媒介 $S_m$ - 潜伏媒介 $E_m$ - 感染媒介 $I_m$ - 易感人群 S - 潜伏人群 E - 有症状感染者 I - 无症状感染…...

编程日记 2025/6/24 9:53:52

Ubuntu 安装 Redis

1. 下载 redis 下载地址：https://github.com/redis/redis 2. 解压 redis 把下载的软件包，上传到服务器的 /usr/local 目录中，执行解压命令 tar -zxvf redis-8.0.1.tar.gz 3. 安装 redis 安装依赖 sudo apt-get updatesudo apt-get ins…...

编程日记 2025/6/24 9:25:42

【QGIS二次开发】地图显示与交互-03

系列目录： 【QGIS二次开发】地图显示与交互-01_qgis二次开发加载地图案例-CSDN博客【QGIS二次开发】地图显示与交互-02_setlayerlabeling-CSDN博客 3. 地图符号与色表 3.1 矢量图层符号设置任务要求：双击图层树节点，实现图层中图元的符…...

编程日记 2025/6/25 16:17:30

28、动画魔法圣典：Framer Motion 时空奥义全解——React 19 交互动效

"在数字世界的夹缝中，存在着连接现实与虚拟的魔法纽带——这便是 Framer Motion 的时空秘术。" ——《前端魔法师手札卷七》一、时空裂隙动画 - FLIP量子跃迁术 1. FLIP时空扭曲原理 <motion.divlayout // 开启时空裂隙transition{{type: "spr…...

编程日记 2025/6/26 1:06:49

Ken Thompson 和 Dennis Ritchie

Ken Thompson（肯汤普逊）和Dennis Ritchie（丹尼斯里奇）是计算机科学领域的两位传奇人物，他们对现代计算机技术的发展产生了深远影响。以下是关于他们的详细介绍： 1. Ken Thompson 出生&am…...

编程日记 2025/6/23 6:02:38

SQL：MySQL函数：条件函数（Conditional Functions）

目录什么是条件函数？ 常用 MySQL 条件函数总览表 1️⃣ IF() – 条件判断函数（If Statement） 2️⃣ IFNULL() – 空值判断与替代函数（If Null） 3️⃣ NULLIF() – 相等返回 NULL（Null If Equal&#…...

编程日记 2025/6/25 1:51:08

初识Linux · IP分片

目录前言： IP分片分片vs不分片如何分片分片举例三个字段前言： 前文IP协议上和IP协议下我们已经把IP协议的报头的大多数字段介绍了，唯独有三个字段现在还有介绍，即16位标识，8位协议，13位片偏移…...

编程日记 2025/6/24 23:26:28

TCP 粘包

一、粘包问题详解 1. 粘包的概念定义： 指在 TCP 通信中，由于发送方和接收方的读写速度、数据量不一致，导致多个数据包被错误地合并成一个数据包处理的现象。产生原因： TCP 是流式协议（无边界）&#xff0…...

编程日记 2025/6/25 13:07:10

第一个优化

agent项目 tool 调用外部服务时选择了指数回避的重试机制优化点：延迟时间那加了一个随机的时间抖动指数回避我第一眼看到这不就是 tcp重连机制吗其实就是如果当时网络波动网况不好 || 服务正忙 ，可以不急着在这个时候选择多次重试&#xff0c…...

编程日记 2025/6/27 8:49:55

LabVIEW的CAN通讯测试程序

该程序是基于 NI LabVIEW 平台开发的 CAN（Controller Area Network，控制器局域网）通讯测试程序。主要功能是对 CAN 通讯过程进行模拟、数据传输与验证，确保 CAN 通讯的正常运行和数据的准确传输。程序详细说明接口选择&#xff…...

编程日记 2025/6/24 16:04:45

视频质量分析时，遇到不同分辨率的对照视频和源视频，分辨率对齐的正确顺序。

背景我们平时在做视频转码后，会用VMAF/PSNR得评分工具进行视频对比的评分，但是这几种客观评分方式都有一个要求就是分辨率要一模一样，因为这样才对像素点做数学运算。但是分辨率对齐其实有两种选择，例如源视频是1080P&#xf…...

编程日记 2025/6/25 22:56:54

Kotlin并发请求的一些知识记录

private suspend fun fetchDataConcurrently(list: MutableList<MyType>,onRequestResult: (Int, List<MyType>?) -> Unit //高阶函数回调) {val deferredList mutableListOf<Deferred<MyType?>>()// 设定任务超时时间为12秒，并使用 …...

编程日记 2025/6/23 16:43:16

Ubuntu 编译SRS和ZLMediaKit用于视频推拉流

SRS实现视频的rtmp webrtc推流 ZLMediaKit编译生成MediaServer实现rtsp推流 SRS指定某个固定网卡，修改程序后重新编译打开SRS-4.0.0/trunk/src/app/srs_app_rtc_server.cpp，在 232 行后面添加： ZLMediaKit编译后文件存放在ZLMediakit/rele…...

编程日记 2025/6/25 23:28:29

typora免费获取序列号

这个方法不是唯一，但是所需要的时长很短。废话不多说 1.下载网盘文件通过网盘分享的文件：typora破解链接: https://pan.baidu.com/s/1KQnSUV3V0uBGpLc_iz2UFQ?pwdetc4 提取码: etc4 2.把解压下来的文件放到装软件的文件夹 3. 打开cmd，…...

编程日记 2025/6/21 12:08:15

C++23 新增的查找算法详解：ranges::find_last 系列函数

文章目录引言C Ranges 库简介ranges::find_last、ranges::find_last_if 和 ranges::find_last_if_not 概述ranges::find_last示例代码代码解释 ranges::find_last_if函数签名参数解释示例代码代码解释 ranges::find_last_if_not示例代码代码解释使用场景总结引言在 C 的发…...

编程日记 2025/6/26 18:00:31

11.基础IO（上）

一、文件概念对文件归类认知： 对于 0KB 的空文件是占用磁盘空间的文件是文件属性（元数据）和文件内容的集合（文件属性（元数据） 内容） 所有的文件操作本质是文件内容操作和文件属性操作。 …...

编程日记 2025/6/23 16:17:22

本地部署Firecrawl+Dify调用踩坑记录

最近自己研究Dify，使用到Firecrawl这个比较好用的工具。用Firecrawl官网的不知道为什么总是卡住得不到结果，于是我打算自己去本地部署一个。好家伙真给我人搞麻了，太多问题了。我是在京东云上面租的一台服务器。首先就是docker的安装&…...

编程日记 2025/6/26 22:07:30

硬盘坏了电脑会出现哪些明显现象？机械和固态可不一样

机械硬盘（HDD）损坏的常见表现 >启动异常：如果是启动盘，可能会遭遇系统无法启动，提示“No Bootable Device”“Operating System not found”或“Sector not found”等错误；以及BIOS无法识别硬盘&#x…...

编程日记 2025/6/27 7:11:44

数据驱动下的具身智能进化范式

数据驱动技术与挑战...

编程日记 2025/6/24 9:07:10

使用Python与正则表达式高效提取Excel中的票号数据

使用Python与正则表达式高效提取Excel中的票号数据一、需求本文将介绍如何利用Python的Pandas库和正则表达式，快速实现票号这一数据清洗任务，并将结果整理为规范的表格结构。在数据处理场景中，从非结构化文本里提取特定格式的信息是常见…...

编程日记 2025/6/22 14:58:02

MySQL 迁移至 Doris 最佳实践方案

在数据架构不断演进的背景下，从 MySQL 迁移至 Doris 成为许多企业提升数据处理效率的关键选择。本文将深入剖析三种经过实践验证的 MySQL 迁移至 Doris 的最佳方案，涵盖全量迁移、增量同步、混合迁移以及基于 CDC（Change Data Capture&#x…...

编程日记 2025/6/20 14:31:21

2025长三角杯数学建模A题思路模型代码：智能手机产品设计优化与定价问题

2025长三角杯数学建模A题思路模型代码，详细内容见文末名片一、问题背景在 2025 年第五届长三角高校数学建模竞赛中，赛题 A 聚焦于智能手机产品设计优化与定价这一极具现实意义的问题。如今的智能手机市场，可谓是一片硝烟弥漫的“战场”&a…...

编程日记 2025/6/25 20:08:26

【hadoop】Kafka 安装部署

一、Kafka安装与配置步骤： 1、使用XFTP将Kafka安装包kafka_2.12-2.8.1.tgz发送到master机器的主目录。 2、解压安装包： tar -zxvf ~/kafka_2.12-2.8.1.tgz 3、修改文件夹的名字，将其改为kafka，或者创建软连接也可&#xff1…...

编程日记 2025/6/24 8:19:45

网络安全EN18031-1,EN18031-2,EN18031-3三个标准对应的测试项目

EN18031-1,EN18031-2,EN18031-3三个标准有什么区别 ‌EN18031-1、EN18031-2和EN18031-3三个标准分别针对不同的安全要求和应用场景，具体区别如下‌： ‌EN18031-1‌：主要关注网络安全防护，特别是防止DDoS攻击和确保安全通信协议的…...

编程日记 2025/6/26 1:14:17

React与Docker中的MySQL进行交互

完整结构 1. 项目结构设置首先创建项目： npm create vitelatest . --template react cd . npm install2. 设置Docker中的MySQL 创建docker-compose.yml文件（与之前相同）： version: 3.8 services:mysql:image: mysql:8.0conta…...

编程日记 2025/6/25 21:39:34

量子隧穿：PROFINET到Ethernet ip的无损耗协议转换方案转

在本季度的生产工作中，我们成功实现了仓储物流自动化分拣系统中的关键技术突破。我们面临的主要挑战是将采用EtherNet/IP协议的输送带控制器与PROFINET协议的上位系统进行有效通信。通过引入ethernet IP转PROFINET网关倍讯科技BX-606-EIP，我们实现了输送…...

编程日记 2025/6/22 19:53:06

W1R3S: 1.0.1靶场

W1R3S: 1.0.1 来自 <W1R3S: 1.0.1 ~ VulnHub> 1，将两台虚拟机网络连接都改为NAT模式 2，攻击机上做namp局域网扫描发现靶机 nmap -sn 192.168.23.0/24 那么攻击机IP为192.168.23.182，靶场IP192.168.23.249 3，对靶机进行端口…...

编程日记 2025/6/21 18:31:25

pycharm中qthread中的run函数debug不上的问题

先说结论在风和日丽的一天，我尝试把我mac上的代码拿到windows修改。突然遇到了个bug，然后想着对几个线程内部的run函数逐一debug。结果一开线程，整个线程仍然继续报错，run函数的第一行都不停断点。甚至，我加了个pr…...

编程日记 2025/6/26 10:41:23

深度解析IP静态的工作原理，IP静态的应用场景又哪些？

一、什么是IP静态？ 当我们谈到“IP静态”时，大家可能首先想到的是与“动态IP”相对的概念。确实如此，静态IP是一种固定分配的IP地址，也就是说，在特定时间内，分配给你的IP地址不会有所更改——无论你完成多…...

编程日记 2025/6/23 6:33:22

Electron 应用的升级机制详解

在产品分发给用户之后，进入迭代周期是不可避免的过程。开发者需要为产品增加新功能、修复Bug，并推出新版本。如何将这些更新有效地分发给用户，是产品经理和开发人员共同关注的问题。本节将从开发者的角度出发，详细介绍Electron应用的两种常见升级方式：全量升级与增量升级。…...

编程日记 2025/6/24 18:21:30

Java 开源报表系统全解析：免费工具、企业案例与集成实践

在企业级数据可视化与报表开发中，选择一款功能强大且完全免费的开源报表系统至关重要。本文深度剖析 5 款经过权威验证的免费开源 Java 报表工具，涵盖图表展示、定制化及第三方集成能力，附企业级案例与技术实践，助您高效选型。一…...

编程日记 2025/6/21 15:37:59

[原创](现代Delphi 12指南):[macOS 64bit App开发]: 注意“回车换行“的跨平台使用.

[作者] 常用网名: 猪头三出生日期: 1981.XX.XX 企鹅交流: 643439947 个人网站: 80x86汇编小站编程生涯: 2001年~至今[共24年] 职业生涯: 22年开发语言: C/C++、80x86ASM、Object Pascal、Objective-C、C#、R、Python、PHP、Perl、开发工具: Visual Studio、Delphi、XCode、…...

编程日记 2025/6/25 4:00:35

分类预测 | Matlab实现ABC-Transformer人工蜂群算法优化编码器多特征分类预测/故障诊断Matlab实现

分类预测 | Matlab实现ABC-Transformer人工蜂群算法优化编码器多特征分类预测/故障诊断Matlab实现目录分类预测 | Matlab实现ABC-Transformer人工蜂群算法优化编码器多特征分类预测/故障诊断Matlab实现分类效果基本描述程序设计参考资料分类效果基本描述 1.Matlab实现ABC-…...

编程日记 2025/6/26 4:24:50

Java中的设计模式

一、工厂方法模式 1.1 简单工厂模式 1.1.1 案例引入比方说我们要设计一个披萨店的点单程序，披萨店有水果披萨，有芝士披萨，两种类型，选择哪个披萨，只需要创建那个类型的披萨对象即可。 package org.example;import…...

编程日记 2025/6/23 21:41:20

NSSCTF [GFCTF 2021]where_is_shell

889.[GFCTF 2021]where_is_shell(system($0)64位) [GFCTF 2021]where_is_shell (1) 1.准备 motalymotaly-VMware-Virtual-Platform:~$ file shell shell: ELF 64-bit LSB executable, x86-64, version 1 (SYSV), dynamically linked, interpreter /lib64/ld-linux-x86-64.s…...

编程日记 2025/6/22 16:14:24