当前位置： 首页 > news >正文

【操作系统】深入理解内存管理：从虚拟内存到OOM Killer

news 来源：原创 2025/7/14 21:55:50

引言

在现代计算机系统中，内存管理是操作系统最核心的功能之一。本文将围绕内存管理的几个关键概念展开讨论，包括虚拟内存机制、内存分配原理、OOM Killer的工作机制以及不同系统架构下的内存限制。

虚拟内存：突破物理限制的关键技术

虚拟内存的核心原理

  1. 地址空间抽象化：每个程序运行在独立的虚拟地址空间中
  2. 分页机制：内存被划分为固定大小的块（通常为4KB的页）
  3. 按需调页：程序启动时仅加载必要页面
  4. 交换机制：当物理内存不足时，将最近未使用的页面移至磁盘

为什么虚拟内存能突破物理限制？

  1. 时间局部性原理：程序通常不会同时使用所有内存
  2. 空间局部性原理：程序倾向于集中访问某些内存区域
  3. 透明性：程序无需感知数据在内存还是磁盘

内存分配实践：当申请超过物理内存时

Linux系统的行为

  1. 默认允许过量申请
  2. 实际使用时先占用物理内存
  3. Swap不足时触发OOM Killer

Windows系统的行为

  1. 更保守的策略
  2. 物理内存+分页文件不足时可能直接失败

OOM Killer：内存耗尽时的守护者

OOM Killer的选择逻辑

  1. 内存占用
  2. 进程重要性
  3. 运行时间
  4. 用户权限

为什么MySQL经常成为牺牲品？

  1. 默认占用大量内存
  2. 未调整优先级
  3. 长时间运行

32位与64位系统的内存限制

32位系统的4GB壁垒

  1. 理论限制：32位地址空间最多寻址4GB
  2. 实际可用：通常只有3GB左右

64位系统的巨大优势

  1. 理论寻址能力：2^64=16EB
  2. 实际限制：现代CPU通常支持48位物理地址

内存交换（Swap）的配置与管理

默认情况

  1. Linux：多数发行版自动创建Swap
  2. Windows：默认开启分页文件
  3. macOS：默认使用动态Swap文件

手动配置Swap（Linux）

  1. 创建Swap文件：

    sudo fallocate -l 4G /swapfile
sudo chmod 600 /swapfile
sudo mkswap /swapfile
sudo swapon /swapfile

  2. 永久生效：

    echo '/swapfile none swap sw 0 0' | sudo tee -a /etc/fstab

  3. 调整swappiness：

    sudo sysctl vm.swappiness=10

最佳实践建议

  1. 合理设置内存限制
  2. 监控内存使用
  3. 优化关键服务
  4. 根据负载配置Swap
  5. 64位系统对于大内存应用是必须的

相关文章：

【操作系统】深入理解内存管理：从虚拟内存到OOM Killer

引言 在现代计算机系统中，内存管理是操作系统最核心的功能之一。本文将围绕内存管理的几个关键概念展开讨论，包括虚拟内存机制、内存分配原理、OOM Killer的工作机制以及不同系统架构下的内存限制。 虚拟内存：突破物理限制的关键技术 虚拟…...

编程日记 2025/7/14 21:55:50

《政治最后的日子》章节

政治与中世纪教会的类比性衰落 作者提出现代民族国家正重复中世纪教会的衰落轨迹： 两者均曾作为社会组织核心存在约5个世纪 晚期都成为生产力阻碍（中世纪教会税收负担/现代国家官僚低效） 末期均出现管理者普遍腐败与公众蔑视（…...

编程日记 2025/6/29 6:40:05

Rust Trait 学习

概述 特征（trait）是rust中的概念，类似于其他语言中的接口（interface）。特征定义了一个可以被共享的行为，只要实现了特征，你就能使用该行为。 如果不同的类型具有相同的行为，那么我们…...

编程日记 2025/7/14 21:12:28

基于开源链动2+1模式AI智能名片S2B2C商城小程序的爆品力构建研究

摘要：在兴趣电商生态中，爆品力已成为品牌实现指数级增长的核心竞争力。本文以开源链动21模式AI智能名片S2B2C商城小程序为技术载体，结合抖音平台的内容传播特性，提出“需求挖掘-技术赋能-内容转化”三位一体的爆品力构建模型。通过…...

编程日记 2025/7/14 21:20:06

【SimSession 】2：PacedReceiver:支持与 PacedVideoSender 本地联调

单独的基于libuv的发送能力，如何进一步在SimSession内集成使用？打算进行本地模拟俩线程，发送和接收，进行测试： 单独的发送测试 【SimSession】1：将视频发送逻辑与 libuv 事件循环集成是一个典型的并发设计问题 分析后，D:\XTRANS\thunderbolt\ayame\zhb-bifrost\player-…...

编程日记 2025/6/29 5:29:26

5 什么情况下需要微调

这个问题其实很重要，因为现代大模型训练出来已经非常强大，可能真的不需要微调。 我们可以通过 RAG 或提示词工程来实现目标。 需要微调的场景与替代方案分析 微调(Fine-tuning)确实不是所有场景都必需的，特别是考虑到现代大型语言模型(LLM…...

编程日记 2025/7/14 21:04:18

Docker 渡渡鸟镜像同步站 使用教程

Docker 渡渡鸟镜像同步站 使用教程 🚀 介绍 Docker.aityp.com（渡渡鸟镜像同步站）是一个专注于为国内开发者提供 Docker 镜像加速和同步服务的平台。它通过同步官方镜像源（如 Docker Hub、GCR、GHCR 等），为…...

编程日记 2025/7/14 21:43:59

位图的实现和拓展

一：位图的介绍 ①：需要位图的场景 给40亿个不重复的无符号整数，没排过序。给一个无符号整数，如何快速判断一个数是否在这40亿个数中？ 要判断一个数是否在某一堆数中，我们可能会想到如下方法： A…...

编程日记 2025/7/14 21:50:21

字符串问题c++

题目描述 小 Z 有一个字符串 s，他对这个字符串会进行如下两个操作： 1 p c 把字符串的第 p 个字符改成 c2 l r 把 s 的第 l 个字符到第 r 个字符按顺序输出。 这里『第 i 个字符』的下标计数从 1 开始，例如，a 是字符串 abc 的第…...

编程日记 2025/7/14 21:29:11

Redis事务

Redis中的事务是指提供一种将多个命令打包到一起，一次性按照顺序执行的机制。Redis在执行事务期间，不会接收处理其他操作命令。 Redis事务有以下局限性 无回滚机制：如果某个命令执行失败，不会影响其他命令的执行，因此…...

编程日记 2025/7/4 1:52:00

【PostgreSQL数据分析实战：从数据清洗到可视化全流程】3.3 异常值识别（Z-score法/IQR法/业务规则法）

👉 点击关注不迷路 👉 点击关注不迷路 👉 点击关注不迷路 文章大纲 PostgreSQL数据分析实战：数据质量分析之异常值识别（Z-score法 / IQR法 / 业务规则法）3.3 异常值识别3.3.1 Z-score法3.3.2 IQR法3.3.3 业…...

编程日记 2025/7/9 1:00:54

MCP底层协议完整通信过程

2025 年是智能体的元年， 也注定是智能体集中爆发的一年！ 两个互联领域的重大挑战： 第一、 Agent 与 Tools （工具）的交互 Agent 需要调用外部工具和 API...

编程日记 2025/6/28 20:05:00

C语言 指针(5)

目录 1.冒泡排序 2.二级指针 3.指针数组 4.指针数组模拟二级数组 1.冒泡排序 1.1 基本概念 冒泡排序（Bubble Sort） 是一种简单的排序算法，它重复地遍历要排序的数列，一次比较两个元 素，如果它们的顺序错误就把它…...

编程日记 2025/7/8 20:14:34

MYSQL-联合查询

经过上节课，我们学会了如何设计表以及了解到各种范式，这节课就请大家和小L一起来学习设计表之后如何使用 1.为什么要使用联合查询 在数据设计时由于范式的要求，数据被拆分到多个表中，那么要查询⼀个条数据的完整信息&#xff0c…...

编程日记 2025/6/29 7:50:10

一篇撸清 Http,SSE 与 WebSocket

HTTP,SSE 和WebSocket都是网络传输的协议，本篇快速介绍三者的概念和比较。 SSE（Server-Sent Events） 是什么？ SSE（Server-Sent Events），服务器发送事件， 是一种基于 HTTP 的轻量级协议，允许服务器主动向客户端（如浏览器）推送实时数据。它设计用于单向通信（服务器到…...

编程日记 2025/6/28 20:04:58

系统架构设计师：设计模式——行为设计模式

一、行为设计模式 行为模式涉及算法和对象间职责的分配。行为模式不仅描述对象或类的模式，还描述它们之间的通信模式。这些模式刻画了在运行时难以跟踪的、复杂的控制流。它们将用户的注意力从控制流转移到对象间的联系方式上来。 行为类模式使用继承机制在类间分…...

编程日记 2025/7/12 8:06:30

OpenCV入门指南：从环境搭建到第一个图像处理程序

引言 你是否想让计算机"看懂"世界？OpenCV（Open Source Computer Vision Library）正是打开计算机视觉大门的钥匙。本文将带你从零开始搭建开发环境，理解图像处理核心概念，并完成第一个OpenCV程序。无论你是想…...

编程日记 2025/6/29 5:11:52

基于STM32的温湿度光照强度仿真设计(Proteus仿真+程序设计+设计报告+讲解视频）

这里写目录标题 **1.****主要功能****2.仿真设计****3.程序设计****4.设计报告****5.下载链接** 基于STM32的温湿度光照强度仿真设计(Proteus仿真程序设计设计报告讲解视频） 仿真图Proteus 8.9 程序编译器：keil 5 编程语言：C语言 设计编号…...

编程日记 2025/6/29 5:19:34

4个纯CSS自定义的简单而优雅的滚动条样式

今天发现 uni-app 项目的滚动条不显示，查了下原来是设置了 ::-webkit-scrollbar {display: none; } 那么怎么用 css 设置滚动条样式呢？ 定义滚动条整体样式‌ ::-webkit-scrollbar 定义滚动条滑块样式 ::-webkit-scrollbar-thumb 定义滚动条轨道样式‌…...

编程日记 2025/6/29 5:41:49

修复笔记：SkyReels-V2项目中的 from_config 警告

#工作记录 Windows避坑部署SkyworkAI/SkyReels-V2昆仑万维电影生成模型_skyreels-v2本地部署-CSDN博客 一、项目背景 项目名称：SkyReels-V2 项目简介：由昆仑万维开源的全球首个无限时长电影生成模型，支持文本到视频、图像到视频等多种生成方…...

编程日记 2025/6/29 8:01:46

[硬件电路-11]：模拟电路常见元器件 - 什么是阻抗、什么是输入阻抗、什么是输出阻抗？阻抗、输入阻抗与输出阻抗的全面解析

1. 阻抗（Impedance） 定义：阻抗是电路或元件对交流信号（AC）流动的阻碍能力，用符号Z表示，单位为欧姆（Ω）。它综合了电阻（R）、电感（L&am…...

编程日记 2025/6/29 7:16:15

MCP协议与Dify集成教程

一、MCP协议概述 MCP（Model Control Protocol）是一种新兴的开放协议，为大型语言模型（LLM）与外部应用之间构建了双向通信通道。它就像是AI的"USB-C"接口，帮助模型发现、理解并安全调用各种外部工…...

编程日记 2025/7/3 16:01:30

flink常用算子整理

文章目录 前言1.重新分配(即打散)2.合并流的算子3.算子链操作4.侧边输出(目前只有一种)5.键控进行分区6.输出算子7.其他基础操作算子8.其他常用的算子9.Flink窗口等情况10.窗口举例前言 提示：以下是本篇文章正文内容，下面案例可供参考 1.重新分配(即打散) 2.合并流的算子 3…...

编程日记 2025/7/10 22:28:28

【SimSession】1：将视频发送逻辑与 libuv 事件循环集成是一个典型的并发设计问题

之前对SimSession的信令进行测试，echo可以与relay联通，现在单独提取 已经集成了webrtc的发送模块及libuv框架与SimSession和echo集成： 采集、编码和发送之前在pacedsender内部实现的 现在从pacedsender中去掉采集、编码，放在session中运行。 而pacedsender仅暴露发送部分：…...

编程日记 2025/6/29 8:21:02

Circular Plot系列(五): circle plot展示单细胞互作

这是我们circle系列的最后一节，我想常见的弦图是绕不开的，所以最后从前面介绍的circle plot思路，做一遍弦图。其实前面的内容如果消化了，plot互作弦图也就不成什么问题了。 效果如下： #cellchat提取互作结果&#xff…...

编程日记 2025/6/29 8:12:59

LLama-v2 权重下载

地址：llama模型 官方github仓库：llama仓库 注意点 网络代理位置：美国下面的国家选择 United States 克隆仓库后 运行bash download.sh输入邮箱收到的URL选择要下载的权重等待下载完成即可 有问题留言！！&#xff01…...

编程日记 2025/6/29 8:11:52

深入解析Linux进程间通信（IPC）：机制、应用与最佳实践

引言 在多任务操作系统中，进程间通信（Inter-Process Communication, IPC）是协同工作的核心机制。Linux作为现代操作系统的典范，提供了8种主要IPC方式，从传统的管道到面向网络的套接字，每种方法都暗藏独特的…...

编程日记 2025/7/3 13:27:53

基于开源AI大模型AI智能名片S2B2C商城小程序源码的私域流量稳定性构建研究

摘要：在私域流量时代，传统实体零售的"时间积累"逻辑被直播电商等新业态颠覆。完美日记等新锐品牌通过构建私域流量池，实现了从0到1的指数级增长，而传统品牌却陷入"流量焦虑"。本文提出以开源AI大模型AI智能名…...

编程日记 2025/7/11 19:17:43

第13章：陈默再访海奥华

第13章：陈默再访海奥华 第一节：启程——穿越虫洞的旅程 2046年，赤色世界的和平与繁荣达到了前所未有的高度。人类已经完成了从物质文明向意识文明的转变，精神力的普及让每一个人都拥有了学习、修复和感知的能力。然而&#xff0…...

编程日记 2025/6/29 6:58:53

Prompt compress 技术探究-LLMLingua2

LLMLingua2 https://arxiv.org/pdf/2403.12968是LLMLingua的改进版本。我们知道 LLMLingua需要用小模型压缩，模型太小不一定能保证性能，模型太大耗费时间又太长。这个方法理论上可以，但实际上不是很方便用。很难选择到合适的小模型。 小模型…...

编程日记 2025/6/29 7:34:02

【机器学习案列-22】基于线性回归（LR）的手机发布价格预测

🧑 博主简介：曾任某智慧城市类企业算法总监，目前在美国市场的物流公司从事高级算法工程师一职，深耕人工智能领域，精通python数据挖掘、可视化、机器学习等，发表过AI相关的专利并多次在AI类比赛中获奖。CSDN…...

编程日记 2025/7/3 21:18:17

python调用国税乐企直连接口开数电票之获取数字化电子发票批量预赋码信息

乐企平台介绍 乐企平台作为国家税务总局推出的唯一数电票标准化的API接口重要平台，旨在通过税务系统与企业自有信息系统的直连涉税服务，开票员登录企业自有系统（ERP、OMS、发票管理系统等）无需通过第三方平台即可实现国税直连开票…...

编程日记 2025/6/29 8:14:14

Axure打开html文件失败，解决方案：

1、在原型文件中找到 2、文件后缀名改为 axure-chrome-extension.rar ,解压后到axure-chrome-extension 3、打开Chrome浏览器，找到扩展程序 选择刚刚解压的文件axure-chrome-extension文件夹，配置完成，打开html试试吧...

编程日记 2025/6/29 7:34:09

Android第四次面试总结之Java基础篇（补充）

一、设计原则高频面试题（附大厂真题解析） 1. 单一职责原则（SRP）在 Android 开发中的应用（字节跳动真题） 真题：“你在项目中如何体现单一职责原则？举例说明。”考点：结合…...

编程日记 2025/7/8 18:30:07

网络开发基础（游戏）之 心跳机制

简介 心跳机制：是指客户端定时（比如每隔着10秒）向服务端发送PING消息，服务端收到后回应PONG消息。服务端会记录客户端最后一次发送PING消息的时间，如果很久没有收到下一次客户端发来的消息，服务端就就判…...

编程日记 2025/6/29 5:49:49

Hive进阶之路

目录 一、Hive 基础回顾 二、数据定义语言（DDL）进阶 2.1 复杂表创建 2.2 分区与分桶优化 三、数据操作语言（DML）深入 3.1 高效的数据加载 3.2 灵活的数据更新与删除 四、Hive 函数高级应用 4.1 内置函数的巧用 4.2 自定义…...

编程日记 2025/6/29 8:07:05

imx6uLL应用-v4l2

Linux V4L2 视频采集 JPEG 解码 LCD 显示实践 本文记录一个完整的嵌入式视频处理项目：使用 V4L2 接口从摄像头采集 MJPEG 图像，使用 libjpeg 解码为 RGB 格式，并通过 framebuffer 显示在 LCD 屏幕上。适用于使用 ARM Cortex-A 系列开发板进…...

编程日记 2025/7/14 9:46:58

以太坊智能合约开发框架：Hardhat v2 核心功能从入门到基础教程

一、设置项目 Hardhat 项目是安装了 hardhat 包并包含 hardhat.config.js 文件的 Node.js 项目。 操作步骤： ①初始化 npm npm init -y②安装 Hardhat npm install --save-dev hardhat③创建 Hardhat 项目 npx hardhat init如果选择 Create an empty hardhat.…...

编程日记 2025/6/29 5:11:55

【现代深度学习技术】现代循环神经网络06：编码器-解码器架构

【作者主页】Francek Chen 【专栏介绍】 ⌈ ⌈ ⌈PyTorch深度学习 ⌋ ⌋ ⌋ 深度学习 (DL, Deep Learning) 特指基于深层神经网络模型和方法的机器学习。它是在统计机器学习、人工神经网络等算法模型基础上，结合当代大数据和大算力的发展而发展出来的。深度学习最重…...

编程日记 2025/6/29 5:11:54

Jasper and Stella: distillation of SOTA embedding models

摘要 Dense检索是许多深度学习应用系统中（例如常见问题 （FAQ） 和检索增强生成 （RAG））关键组成部分。在此过程中，Embedding模型将原始文本转换为向量。然而，目前在文本Embedding基准…...

编程日记 2025/6/29 8:10:03

程序的本质—API接口

API 是什么 官方定义：API 英文全称 Application Programming Interface，翻译过来为程序之间的接口。也是程序与外部世界的桥梁，实现了服务拆分与解藕的核心机制 大白话：按照规则提供输入，它帮你得到对应的输出 API可…...

编程日记 2025/6/29 7:56:56

Python函数完全指南：从零基础到灵活运用

Python函数是组织代码、实现代码复用的基本单元，也是Python编程中最重要的概念之一。本文将全面介绍Python函数的知识体系，帮助初学者系统掌握函数的使用方法。 一、函数基础概念 1. 什么是函数？ 函数是一段可重复使用的代码块&#xff0c…...

编程日记 2025/6/28 20:04:56

第十章.XML

文章目录 1.XMl简介2.解析XML技术2.1DOM解析XML 2.2DOM4j3.json 1.XMl简介 EXtensible Markup Language ,可扩充标记语言 特点: XML与操作系统,编程语言的开发平台无关实现不同系统之间的数据交换 作用: 数据交互配置应用程序和网站 XML标签 xml文档由一系列标签元素组成<…...

编程日记 2025/7/3 14:28:51

5个情感丰富GPT-4o图像提示词（不是吉卜力风格）

一场新的创意运动正在迅速兴起——人们不仅使用ChatGPT进行写作，还用它来构思富有想象力、情感丰富的视觉概念。 这一趋势正在改变我们讲故事、建立品牌和探索创意的方式。从异想天开的海报世界到基于物品的故事叙述，各行业的创作者正在将ChatGPT与视觉生成工具结合使用，赋…...

编程日记 2025/7/4 4:52:41

华为OD机试真题——求最多可以派出多少支队伍（2025A卷：100分）Java/python/JavaScript/C/C++/GO最佳实现

2025 A卷 100分 题型 本专栏内全部题目均提供Java、python、JavaScript、C、C、GO六种语言的最佳实现方式&#xff1b; 并且每种语言均涵盖详细的问题分析、解题思路、代码实现、代码详解、3个测试用例以及综合分析&#xff1b; 本文收录于专栏&#xff1a;《2025华为OD真题目录…...

编程日记 2025/7/8 20:17:16

《七年一剑》速读笔记

文章目录 书籍信息概览知己知彼市场的本质认识自我了解他人人剑合一 技术分析精要K线分型均线节奏形态画线成交量周期级别指标之王——MACD波动理论 管窥基本面A股周期论实战角度看财报 构建交易系统打开交易之门交易基础之买卖依据风险控制与仓位管理系统评估及情绪管理 实战秘…...

编程日记 2025/6/29 8:07:02

VMware-centOS7安装redis分布式集群

1.部署redis包 1.1 在usr/local文件夹里创建文件夹 mkdir software 1.2 进入文件夹 cd /usr/local/software/ 下载redis wget http://download.redis.io/releases/redis-6.2.6.tar.gz解压 tar zxvf redis-6.2.6.tar.gz重命名文件夹 mv redis-6.2.6 redis安装gcc编译器 yum i…...

编程日记 2025/6/29 7:17:10

Kubernetes(k8s)学习笔记(六)--KubeSphere前置环境安装

1、安装 helm&#xff08;master 节点执行&#xff09; Helm 是 Kubernetes 的包管理器。包管理器类似于我们在 Ubuntu 中使用的apt、Centos 中使用的 yum 或者 Python 中的 pip 一样&#xff0c;能快速查找、下载和安装软件包。Helm由客户端组件 helm 和服务端组件 Tiller 组…...

编程日记 2025/6/29 5:11:56

黑马点评day01(基于Redis)

1.7 Redis代替session的业务流程 1.7.1、设计key的结构 首先我们要思考一下利用redis来存储数据&#xff0c;那么到底使用哪种结构呢&#xff1f;由于存入的数据比较简单&#xff0c;我们可以考虑使用String&#xff0c;或者是使用哈希&#xff0c;如下图&#xff0c;如果使用…...

编程日记 2025/6/29 5:41:41

14.Excel：排序和筛选

一 位置 两个位置。 二 排序&#xff1a;如何使用 1.常规使用 补充&#xff1a;不弹出排序提醒排序。 选中要排序列中的任意一个单元格&#xff0c;然后排序。 2.根据要求进行排序 1.根据姓名笔画进行降序排序 要勾选上数据包含标题&#xff0c;默认是勾选了。 2.根据运营部、…...

编程日记 2025/6/29 7:51:22