当前位置：首页 > news >正文

【漫话机器学习系列】163.方差膨胀因子（Variance Inflation Factor, VIF）

news 来源：原创 2025/7/12 19:59:34

方差膨胀因子（Variance Inflation Factor, VIF）详解

1. 什么是方差膨胀因子？

方差膨胀因子（Variance Inflation Factor, VIF）是一种用于衡量回归分析中多重共线性（Multicollinearity）程度的指标。多重共线性指的是自变量（特征）之间存在较强的相关性，会导致模型参数估计的不稳定性，影响模型的解释能力和预测能力。

当回归模型中的一个或多个自变量彼此高度相关时，它们会导致回归系数的不稳定，使得估计的标准误增大，从而影响统计推断的准确性。VIF 用于量化这种膨胀效应，帮助我们识别和处理多重共线性问题。

2. VIF 的计算方法

要计算某个变量 XiX_iXi 的 VIF，需要执行以下步骤：

选择自变量 XiX_iXi，将其视为目标变量。
以其余的自变量作为解释变量，构建一个新的回归模型，即：
$X_i = \beta_0 + \beta_1 X_1 + \beta_2 X_2 + ... + \beta_{i-1} X_{i-1} + \beta_{i+1} X_{i+1} + ... + \beta_n X_n + \epsilon$
计算该回归模型的 $R^2$ 值（决定系数）。
使用下面的公式计算 VIF 值：

其中：
- $VIF_i$ 表示自变量 $X_i$ 的方差膨胀因子。
- $R^2_i$ 是以 $X_i$ 作为因变量、其他变量作为自变量进行回归分析所得的决定系数。

3. 如何解释 VIF？

VIF 值的大小用于判断变量间的共线性程度，通常有以下经验规则：

VIF = 1 ：该变量与其他自变量无相关性，即不存在多重共线性问题。
1 < VIF < 3 ：该变量与其他变量的相关性较弱，一般可以忽略共线性问题。
VIF > 3 或 VIF > 5 ：该变量与其他变量存在较强相关性，说明多重共线性较为严重，需要引起注意。
VIF > 10 ：说明该变量的多重共线性非常严重，可能导致回归系数不稳定，建议采取处理措施。

一般而言，如果 VIF 值较高，则意味着该变量可能与其他变量存在强相关性，从而导致系数估计不稳定。

4. 多重共线性的影响

多重共线性会对回归分析产生以下不利影响：

回归系数不稳定
- 由于变量之间高度相关，当数据发生微小变化时，回归系数的估计值可能会剧烈波动，导致模型的稳定性下降。
标准误增大
- 共线性会导致回归系数的标准误（Standard Error）增大，使得统计检验（t 统计量）的结果不可靠，导致某些重要变量可能被误判为不显著。
解释能力下降
- 多重共线性会影响模型的解释能力，使得无法明确区分各个变量对因变量的独立贡献，从而降低模型的可信度。
模型预测能力受损
- 在多重共线性严重的情况下，模型的预测能力可能会大幅降低，导致对新数据的预测效果变差。

5. 解决多重共线性的方法

如果在模型中发现了较高的 VIF 值，可以采取以下方法来降低共线性影响：

删除相关性高的变量
- 如果两个或多个变量高度相关，可以删除其中一个变量，以减少多重共线性对模型的影响。
使用主成分分析（PCA）或因子分析
- 通过主成分分析（PCA）或因子分析，可以将多个相关变量合并成少量无关的新变量，从而降低共线性影响。
增加样本量
- 如果数据量较小，可以尝试增加样本量，以降低共线性对估计的影响。
标准化或正则化方法（如 Lasso 回归）
- Lasso（L1 正则化）回归可以对变量施加约束，从而减少变量之间的共线性影响。
通过逐步回归选择变量
- 采用逐步回归（Stepwise Regression）方法，选择对模型贡献较大的变量，并剔除多余的变量。

6. 实际案例分析

假设我们有一个包含以下自变量的数据集：

$X_1$ （房屋面积）
$X_2$ （房屋卧室数量）
$X_3$ （房屋总价）

如果我们要预测房屋租金 Y，但发现 $X_1$ 和 $X_3$ 之间的 VIF 值过高（例如 VIF > 10），说明这两个变量可能存在较强的线性相关性。此时，我们可以选择删除 $X_3$ （房屋总价）或使用主成分分析（PCA）提取一个新的变量来降低共线性影响。

7. 结论

方差膨胀因子（VIF）是一个重要的统计指标，用于衡量回归模型中的多重共线性问题。通过计算 VIF，可以有效识别哪些变量存在较强的相关性，并采取适当的方法进行处理，以提高回归模型的稳定性和预测能力。在实际应用中，合理使用 VIF 进行变量筛选和特征工程，有助于构建更可靠的回归模型。

如果你在建模过程中遇到了多重共线性问题，不妨先计算一下 VIF 值，看看是否有必要对变量进行调整。

【漫话机器学习系列】163.方差膨胀因子（Variance Inflation Factor, VIF）

方差膨胀因子（Variance Inflation Factor, VIF）详解 1. 什么是方差膨胀因子？ 方差膨胀因子（Variance Inflation Factor, VIF）是一种用于衡量回归分析中多重共线性（Multicollinearity）程度的指…...

编程日记 2025/7/12 19:59:34

蓝桥杯省模拟赛字符串拼接

问题描述给定四个字符串 a,b,c,d，请将这四个字符串按照任意顺序依次连接拼成一个字符串。请问拼成的字符串字典序最小是多少？ 输入格式输入四行，每行包含一个字符串。输出格式输出一行包含一个字符串，表示答案。样例…...

编程日记 2025/7/11 18:59:51

前端路由守卫与后端权限验证，仅使用路由守卫是否安全？

前后端分离架构的安全原则后端必须对所有 API 接口进行权限验证前端仅负责用户界面的重定向安全策略应始终由后端最终决定问题1：前端设置路由守卫是否可以阻挡用户直接通过URL访问？？？ 前端路由守卫（如 Vue Router …...

编程日记 2025/7/7 14:24:56

React-nodejs 练习个人博客

1.主要功能模块： 文章管理：CRUD操作用户系统：注册、登录、权限控制评论系统：文章评论功能 2.技术栈： 前端：React Ant Design React Router后端：Express MongoDB 通信：RESTful…...

编程日记 2025/6/30 20:08:19

AI三大主义和深度学习三大主义

在人工智能（AI）研究领域，"三大主义"通常指三种核心方法论或思想流派，它们代表了不同的技术路径和哲学观点。以下是主流的划分方式： 1. 符号主义（Symbolicism） 核心思想：智…...

编程日记 2025/7/11 17:20:12

Linux实现生产者消费者模型（基于阻塞队列）

目录概念及优势代码实现概念及优势生产者消费者模型是一种用于线程同步的模型，在这个模型中有两种角色，生产者生产数据，消费者消费数据。有三种关系，生产者与生产者，消费者与消费者，生产者与消费者。…...

编程日记 2025/7/11 21:07:06

UE5 UE4 右键/最大化-菜单-不显示/闪/黑色/黑屏--修复方法

先关闭UE5 、UE4 编辑器。进入这个网站：https://nvidia.custhelp.com/app/answers/detail/a_id/5157 网速慢，换成这个下载：https://download.csdn.net/download/qq_21153225/90546310 下载：mpo_disable.reg 的文件只双击“mpo…...

编程日记 2025/7/11 1:09:32

[ C语言 ] | 从0到1？

目录认识计算机语言 C语言工欲善其事必先利其器第一个C语言代码这一些列 [ C语言 ] ，就来分享一下 C语言相关的知识点~ 认识计算机语言我们说到计算机语言，语言，就是用来沟通的工具，计算机语言呢？就是我们…...

编程日记 2025/7/10 14:10:55

4.训练篇2-毕设篇

resnet # 1. 从 torchvision 中加载预训练的 ResNet18 模型 # pretrainedTrue 表示使用在 ImageNet 上预训练过的参数，学习效果更好 base_model_resnet18 models.resnet18(pretrainedTrue)# 2. 获取 ResNet18 模型中全连接层（fc）的输入特征…...

编程日记 2025/7/8 13:00:35

Ubuntu 系统中，每日健康检查

一、手动检查命令（基础项） 1. 系统资源监控内存使用： free -h # 查看内存和交换空间使用情况 cat /proc/meminfo | grep -i "memavailable" # 查看可用内存CPU 负载： top -n 1 -b | grep "load ave…...

编程日记 2025/7/3 4:48:41

#CX# UVM中的virtual sequence 和 virtual sequencer 的用途

在UVM中，Virtual Sequence（虚拟序列）的核心用途是协调多个物理Sequencer上的Sequence执行，以实现跨接口、跨组件的复杂事务同步和场景控制。 1. 核心用途多接口协同测试当验证场景需要多个接口（如DUT的AXI、I2C、UART接口）同时或按特定顺序发送事务时，Virtual Seque…...

编程日记 2025/7/10 9:43:44

vue：突然发现onok无法使用

const that this;this.$confirm({title: "修改商品提示",content: "如果当前商品存在于商品活动库，则在商品活动库的状态会下架",onOk: function () {that.submitForm();}}); 突然发现 this.$confirm无法进入onok 最终发现是主题冲突&#x…...

编程日记 2025/7/11 18:22:49

Vue.js devtools https://chromewebstore.google.com/detail/vuejs-devtools/nhdogjmejiglipccpnnnanhbledajbpd?hlzh-CN&utm_sourceext_sidebar ModHeader https://chromewebstore.google.com/detail/modheader-modify-http-hea/idgpnmonknjnojddfkpgkljpfnnfcklj?utm…...

编程日记 2025/7/8 1:28:38

基于javaweb的SpringBoot房屋出租系统设计与实现(源码+文档+部署讲解）

技术范围：SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、Python、爬虫、数据可视化、小程序、安卓app、大数据、物联网、机器学习等设计与开发。主要内容：免费功能设计、开题报告、任务书、中期检查PPT、系统功能实现、代码编写、论文编写和辅导、论文…...

编程日记 2025/7/7 2:59:19

小程序某点餐平台全自动化实现思路

某德基全自动化实现一、实现思路二、具体步骤1、分析接口2、破解接口3、解决自动支付4、获取订单三、其他以下内容仅供学习交流使用粗略讲解一下思路，要完全实现只靠以下这些内容还是不够的。一、实现思路全自动化实现用的是小程序版本。我们首先要分析整个…...

编程日记 2025/7/11 5:23:12

红宝书第二十讲：详解JavaScript的Proxy与Reflect

红宝书第二十讲：详解JavaScript的Proxy与Reflect 资料取自《JavaScript高级程序设计（第5版）》。查看总目录：红宝书学习大纲一、Proxy的作用：给对象戴上“监听耳机” Proxy（代理）允许你为对象…...

编程日记 2025/7/11 11:04:19

Contactile三轴触觉传感器：多维力感赋能机器人抓取

在非结构化环境中，机器人对物体的精准抓取与操作始终面临巨大挑战。传统传感器因无法全面感知触觉参数（如三维力、位移、摩擦），难以适应复杂多变的场景。Contactile推出的三轴触觉力传感器，通过仿生设计与创新光学技术…...

编程日记 2025/7/9 5:23:11

18-动规-子序列中的 k 种字母（中等）

题目来源 28. 子序列中的 k 种字母（第一期模拟笔试） 思路基本分析子序列的定义子序列是从原序列中选取部分元素，同时保持这些元素在原序列中的相对顺序所形成的新序列。也就是说，子序列中的元素不需要在原序列中连续出现…...

编程日记 2025/7/7 22:47:34

Lua 数组

Lua 数组引言 Lua 是一种轻量级、高效的脚本语言，广泛应用于游戏开发、服务器端编程等领域。在 Lua 中，数组是一种非常重要的数据结构，它允许开发者以高效的方式存储和操作一系列数据。本文将详细介绍 Lua 数组的相关知识，包括…...

编程日记 2025/7/9 11:45:41

C 语言的未来：在变革中坚守核心价值

一、从 “古老” 到 “长青”：C 语言的不可替代性诞生于 20 世纪 70 年代的 C 语言，历经半个世纪的技术浪潮，至今仍是编程世界的 “基石语言”。尽管 Python、Java 等高级语言在应用层开发中占据主流，但 C 语言在系统级编程和资…...

编程日记 2025/7/8 13:04:36

springboot3 基于 logback

1.配置 logging:level:root: ${ROOT_LOG_LEVEL:debug}web: ${ROOT_WEB_LEVEL:info}org.hibernate.orm.jdbc.bind: ${ROOT_SQL_PARAM_LEVEL:info} #打印SQL参数2.基于 logback-spring.xml配置 <?xml version="1.0" encoding="UTF-8"?> <configu…...

编程日记 2025/7/9 12:24:43

网络相关的知识总结1

1.设备可以通过以太网电缆（如双绞线）连接到交换机的端口，交换机也通过以太网电缆连接到路由器。但是如果距离过远，比如跨国路由器如何连接？ 1.专用通信线路（如 MPLS、光纤专线）：租用…...

编程日记 2025/7/11 14:24:20

Rust vs. Go: 性能测试(2025)

本内容是对知名性能评测博主 Anton Putra Rust vs. Go (Golang): Performance 2025 内容的翻译与整理, 有适当删减, 相关数据和结论以原作结论为准。再次对比 Rust 和 Go，但这次我们使用的是最具性能优势的 HTTP 服务器库---Hyper，它基于 Tokio 异步运…...

编程日记 2025/7/9 13:49:14

如何使用postman调用多参数接口（包含文件上传）

🤟致敬读者 🟩感谢阅读🟦笑口常开🟪生日快乐⬛早点睡觉 📘博主相关 🟧博主信息🟨博客首页🟫专栏推荐🟥活动信息文章目录如何使用postman调用包含文件参数的多参数接…...

编程日记 2025/7/9 15:35:20

无人机助力道路智能养护，基于YOLOv5全系列【n/s/m/l/x】参数模型开发构建无人机航拍道路交通场景下水泥路面缺陷智能检测识别系统

道路养护是保障交通命脉安全的隐形防线，其重要性不亚于道路建设本身。我国每年因道路病害引发的交通事故占比高达12%，及时修复1平方米的早期裂缝可避免后续数万元的修复成本。在这场与道路病害赛跑的战役中，传统养护模式正遭遇前所未有的挑战…...

编程日记 2025/7/9 11:32:59

28_跨域

目录 promise promise的基本语法 async await try catch promise 静态方法跨域跨域的解决方案 1-cors 编辑 2-jsonp方案 3-代理服务器 promise promise 是一个es6新增的语法承诺的意思作用:是专门用来解决回调地狱!!!! promise的基本语法 // 基本语法:// Pr…...

编程日记 2025/7/9 7:23:44

【C#.NET】VS2022创建Web API项目

C# Web API 是一种基于 .NET 平台（包括但不限于.NET Framework 和 .NET Core）构建 HTTP 服务的框架，用于创建 RESTful Web 服务。REST（Representational State Transfer）是一种软件架构风格，它利用HTTP协议…...

编程日记 2025/7/12 18:02:34

注意力蒸馏技术

文章目录摘要abstract论文摘要简介方法预备知识注意力蒸馏损失注意力引导采样实验结论总结参考文献摘要本周阅读了一篇25年二月份发表于CVPR 的论文《Attention Distillation: A Unified Approach to Visual Characteristics Transfer》,论文开发了Attention Distillation…...

编程日记 2025/7/10 6:05:04

Day17 -实例：利用不同语言不同框架的特征进行识别

前置：我们所需的web站点，都可以利用fofa去搜索，例如：app"flask"这样的语句去找对应的站点，找到后，我们模拟不知道是什么框架，再根据特征去判断它的框架。 ***利用工具可以再去结合大…...

编程日记 2025/7/1 13:55:58

Centos7 安装 TDengine

Centos7 安装 TDengine 1、简介官网： https://www.taosdata.com TDengine 是一款开源、高性能、云原生的时序数据库（Time Series Database, TSDB）, 它专为物联网、车联网、工业互联网、金融、IT 运维等场景优化设计。同时它还带有内建的缓…...

编程日记 2025/7/10 1:22:42

DeepSeek调用API访问，使用AnythingLLM建立本地知识库后开放API调用，ApiFox/PostMan调用本地DeepSeek

上篇文章中我们使用AnythingLLM成功在本地部署了DeepSeek的本地知识库，并且上传了几个文件让DeepSeek学习，可点击查看： 本地部署DeepSeek并使用AnythingLLM建立本地知识库全流程，DeepSeek-R1:7b本地安装部署,DeepSeek-R1本地部署…...

编程日记 2025/7/10 3:31:51

SQL语句---DDL

文章目录 1、SQL语句2、DDL2.1 数据库的操作显示当前的数据库创建数据库指定编码删除数据库切换当前数据库 2.2 数据表的操作显示表创建表显示表结构修改表添加新的字段删除原有字段修改原有字段删除数据表 2.3 Mysql数据库中常用的数据类型 1、SQL语句结构化查询语句&#…...

编程日记 2025/7/8 11:24:32

Java实战：实现用户的登录注册功能

系列文章目录 Java文件 I/O流的操作实战和高级UI组件和事件监听的综合文章目录系列文章目录前言一、大致流程思路分析：二、定义用户类：三、服务层的实现： 1.保护用户数据功能的实现2.登录操作的实现四、实现用户的注册界面： 大…...

编程日记 2025/7/4 5:03:24

用LLama factory时报类似Process 2504721 got signal: 1的解决方法

之前用nohup来远程跑LLama factory微调脚本，是没有问题的，但今天发现运行类似下面这个命令时， nohup llamafactory-cli train examples/train_qlora/qwen_lora.yaml 只要一关闭ssh session，就会终止训练，报类似&…...

编程日记 2025/7/12 1:54:25

WPF ContentTemplate

ContentTemplate 是一个非常重要的属性，用于定义 ContentPresenter 中内容的显示样式。通过设置 ContentTemplate，你可以控制 ContentPresenter 如何呈现其绑定的内容。下面是对 ContentTemplate 的详细解释以及它的作用和用法。 1. ContentTemplate 的…...

编程日记 2025/7/1 11:52:58

powershell7.5.0不支持conda的问题

经历：这周手欠使用vscode的powershell时提示我更新，我就更新了，更新完激活不了conda环境了，查询了半天是powershell最新版7.5.0与目前conda25.1.1以前的版本不支持的问题。问题环境：powershell版本>7.5.0&#xff…...

编程日记 2025/7/8 10:20:28

SSE SseEmitter.completeWithError(e) 触发的处理逻辑

在 Java 客户端使用 OkHttp 监听 SSE（Server-Sent Events） 的情况下，当服务端调用 SseEmitter.completeWithError(e)，客户端会触发 EventSourceListener 的 onFailure() 方法（而不是 onError）。 1. 服务端&…...

编程日记 2025/7/9 1:11:27

JAVA反序列化深入学习（八）：CommonsCollections6

与CC5相似： 在 CC5 中使用了 TiedMapEntry#toString 来触发 LazyMap#get在 CC6 中是通过 TiedMapEntry#hashCode 来触发 LazyMap#get 之前看到了 hashcode 方法也会调用 getValue() 方法然后调用到其中 map 的 get 方法触发 LazyMap，那重点就在于如何在反…...

编程日记 2025/7/9 15:03:54

科技快讯 | 韩国科学家研发出全球首款仿生液态机器人；OpenAI推出GPT-4o图像生成功能

韩国科学家研发出全球首款仿生液态机器人，自由变形穿越金属栅栏韩国首尔大学等研究团队开发出一种基于液体的下一代软体机器人，具有细胞仿生特性，能自由变形、分裂融合，并执行物质运输任务。该机器人采用“颗粒装甲”设计&#x…...

编程日记 2025/7/10 19:18:36

[Vue2]v-model用于表单

之前我们讲到过v-model用于双向绑定一个数据，通常用于表单提交数据。而之前的演示里只演示了文本输入栏，这里详细演示一下其他表单输入时使用v-model。文本输入文本输入数据就是经典的type"text"： <input type"text&qu…...

编程日记 2025/7/3 18:58:59

【机器学习】imagenet2012 数据预处理数据预处理

【机器学习】数据预处理 1. 下载/解压数据2. 数据预处理3. 加载以及训练代码3.1 使用PIL等加载代码3.2 使用OpenCV的方式来一张张加载代码3.3 h5的方式来加载大文件最后总结这个数据大约 140个G,128w的训练集 1. 下载/解压数据首先需要下载数据： 数据最后处理…...

编程日记 2025/7/12 4:59:18

基于pycatia的CATIA零部件激活状态管理技术解析

一、问题背景：CATIA激活状态管理的痛点在CATIA V5/V6的装配设计过程中，工程师经常使用激活状态控制（Activation）来管理大型装配体的显示性能。但实际使用中存在一个典型问题：当零部件被取消激活（Deac…...

编程日记 2025/7/10 18:34:32

基于javaweb的SpringBoot水果生鲜商城系统设计与实现(源码+文档+部署讲解）

技术范围：SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、Python、爬虫、数据可视化、小程序、安卓app、大数据、物联网、机器学习等设计与开发。主要内容：免费功能设计、开题报告、任务书、中期检查PPT、系统功能实现、代码编写、论文编写和辅导、论…...

编程日记 2025/7/9 14:39:36

‌JVM 内存模型（JDK8+）

‌1. 内存模型结构图解‌ JVM 内存模型（JDK 8） ├── **线程私有区** │ ├── 程序计数器（Program Counter Register）‌ │ ├── 虚拟机栈（VM Stack） │ │ └── 栈帧（局…...

编程日记 2025/7/10 18:02:40

基于飞腾FT2000/4的全国产标准6U VPX板卡，支持银河麒麟

1 功能高可靠性的基于飞腾公司FT2000/4的处理器以及 X100 芯片组的标准6U VPX板卡，具有以太网、SATA、PCIE，以及显示等接口，产品功能框图如图1所示： 图 1 功能框图 2 技术指标本产品功能和性能指标，见表 1。表1 产品…...

编程日记 2025/7/9 21:51:35

【从零实现Json-Rpc框架】- 项目实现 - Dispatcher模块实现篇

📢博客主页：https://blog.csdn.net/2301_779549673 📢博客仓库：https://gitee.com/JohnKingW/linux_test/tree/master/lesson 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正！ &…...

编程日记 2025/7/8 22:17:56

WPS宏开发手册——JSA语法练习

目录系列文章3、JSA语法练习3.1、运算练习3.2、比较练习3.3、if else练习3.4、for 练习3.5、字符串、数组方法练习3.6、语义转编程练习题系列文章使用、工程、模块介绍 JSA语法 JSA语法练习题 Excel常用Api 后续EXCEL实战、常见问题、颜色附录，持…...

编程日记 2025/7/9 10:02:47

【自学笔记】Go语言基础知识点总览-持续更新

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录 1. Go 语言简介2. 基本语法变量声明与赋值常量数据类型运算符 3. 控制结构条件语句循环语句 4. 函数函数定义与调用多返回值匿名函数与闭包 5. 并发编程goroutinech…...

编程日记 2025/7/9 5:09:14

PyQt6实例_批量下载pdf工具_主线程停止线程池

目录前置： 代码： 视频： 前置： 1 本系列将以 “PyQt6实例_批量下载pdf工具”开头，放在【PyQt6实例】专栏 2 本系列涉及到的PyQt6知识点： 线程池：QThreadPool,QRunnable； 信号与…...

编程日记 2025/7/9 1:36:05

在 Vue 项目中，登录成功后是否存储 token 与用户信息到本地

答案：不安全举例：直接使用localStorage存储，本地存储可能会被 XSS 攻击窃取 localStorage.setItem(token, response.token)localStorage.setItem(userInfo, JSON.stringify({username: response.username,email: response.email})) 推荐方…...

编程日记 2025/6/28 1:33:05