当前位置：首页 > news >正文

使用线性回归模型逼近目标模型 | PyTorch 深度学习实战

news 来源：原创 2025/5/22 16:16:46

前一篇文章，计算图 Compute Graph 和自动求导 Autograd | PyTorch 深度学习实战

本系列文章 GitHub Repo: https://github.com/hailiang-wang/pytorch-get-started

使用线性回归模型逼近目标模型

什么是回归
什么是线性回归
使用 PyTorch 实现线性回归模型
- 代码
- 执行结果

什么是回归

在统计学中，回归分析（regression analysis）指的是确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法。

简单说，就是使用统计学手段，分析变量之间的规律。发现规律后，可以根据给定的数据猜测特征空间的因变量¹的数据。

在这里插入图片描述
参考文章：https://zhuanlan.zhihu.com/p/669597409

什么是线性回归

用一条直线去逼近数据的分布，参考定义:

A linear regression is a straight line that describes how the values of a response variable $y$ change as the predictor variable $x$ changes.

线性回归在实际中，可以包含多元的情况，比如：

$z = w_1 x + w_2 y$

更多线性回归介绍，参考文章。

使用 PyTorch 实现线性回归模型

实现量化投资：现在假如我们观测到了某支股票的数据 $v$ ，并且这支股票和石油的价格 $x$ 、黄金的价格 $y$ 和原煤的价格 $z$ 有关联。因此，我们取得了不同时刻的 $x$ $y$ $z$ 和对应的股票价格 $v$ ，现在，依据这些数据，建立一个方程式：

$v = a x + b y + cz + d$

此时，依赖历史采集的数据，我们来求 a,b,c,d 的值。
使用 PyTorch，这个程序实现如下。

代码

import torch
import matplotlib.pyplot as plt
import numpy as np# X and Y data，观测数据，包含多条
# 每条包含 3 个数据，分别代表石油、黄金、原煤的价格
x_data = [[65., 80., 75.],[89., 88., 93.],[80., 91., 90.],[30., 98., 100.],[50., 66., 70.]]
# 对应的这支股票的价格
y_data = [[152.],[185.],[189.],[196.],[142.]]# 定义输入 tensor 和输出 tensor 的变量
x=torch.autograd.Variable(torch.Tensor(x_data)) 
y=torch.autograd.Variable(torch.Tensor(y_data))# Our hypothesis XW+b，定义模型及参数
model=torch.nn.Linear(3,1,bias=True)# cost criterion，定义损失函数
criterion=torch.nn.MSELoss()# Minimize，优化器
optimizer=torch.optim.SGD(model.parameters(),lr=1e-7)# 训练轮数
epochs=200
cost_h=np.zeros(epochs)# Train the model，对于这个简单的问题，没有使用 SGD，每次都是将数据录入
for step in range(epochs):optimizer.zero_grad()hypothesis=model(x) # Our hypothesiscost=criterion(hypothesis,y)cost.backward()optimizer.step()cost_h[step]=cost.data.numpy()print(step,'Loss:',cost.data.numpy(),'\nPredict:\n',hypothesis.data.numpy())for name, param in model.named_parameters():if param.requires_grad:print(name, param.data)plt.plot(cost_h)
plt.show()

执行结果

使用 Python 运行上述程序，结果如下：

weight tensor([[-0.0980,  0.5064,  0.4115]])
bias tensor([-0.1257])

在这里插入图片描述

因为模型的定义是：

model=torch.nn.Linear(3,1,bias=True)

也就是包含了三个参数和一个偏置，最终机器学习得到的公式就是：
$v = - 0.0980 x + 0.5064 y + 0.4115 z - 0.1257$

我们就可以由某一天的黄金、石油、原煤的价格，来预测这支股票的价格。

因变量（dependent variable）函数中的专业名词，也叫函数值。函数关系式中，某些特定的数会随另一个（或另几个）会变动的数的变动而变动，就称为因变量。如：Y=f(X)。此式表示为：Y随X的变化而变化。Y是因变量，X是自变量。 ↩︎

使用线性回归模型逼近目标模型 | PyTorch 深度学习实战

前一篇文章，计算图 Compute Graph 和自动求导 Autograd | PyTorch 深度学习实战本系列文章 GitHub Repo: https://github.com/hailiang-wang/pytorch-get-started 使用线性回归模型逼近目标模型什么是回归什么是线性回归使用 PyTorch 实现线性回归模型代码执行结…...

编程日记 2025/5/22 16:16:46

解决com.kingbase8.util.KSQLException: This _connection has been closed.

问题描述一个消息管理系统，系统采用kingbase8数据库，数据库采用单体模式，后台应用也采用springboot单体模式。系统正式上线后，出现几个JDBC响应的异常信息： com.kingbase8.util.KSQLException: An I/O error occurred while sending to the backend.java.net.SocketTime…...

编程日记 2025/5/17 17:38:10

Pyqt 的QTableWidget组件

QTableWidget 是 PyQt6 中的一个表格控件，用于显示和编辑二维表格数据。它继承自 QTableView，提供了更简单的方式来处理表格数据，适合用于需要展示结构化数据的场景。 1. 常用方法 1.1 构造函数 QTableWidget(parent: QWidget None)&#x…...

编程日记 2025/5/22 15:44:29

DeepSeek R1 Distill Llama 70B（免费版）API使用详解

DeepSeek R1 Distill Llama 70B（免费版）API使用详解在人工智能领域，随着技术的不断进步，各种新的模型和应用如雨后春笋般涌现。今天，我们要为大家介绍的是OpenRouter平台上提供的DeepSeek R1 Distill Llama 70B&…...

编程日记 2025/5/22 15:59:05

24.ppt：小李-图书策划方案【1】

目录 NO1234 NO5678 NO1234 新建PPT两种方式👇docx中视图→导航窗格→标题1/2/3ppt新建幻灯片→从大纲→重置开始→版式设计→主题插入→表格 NO5678 SmartArt演示方案：幻灯片放映→自定义幻灯片放映→新建→选中添加...

编程日记 2025/5/18 17:24:58

百科词条创建审核不通过的原因有哪些？

我们知道的国内有名的百科网站有百度百科、快懂百科、搜狗百科、360百科,这些有名的百科网站。一般来说,百科的词条排名都是在第一页的,无论是名人、明星、软件、影视名称,还是其他名称,大多排名都在首页,这就拥有了更多的曝光量和流量,而且由于百科是人们获取信息、查找资料的…...

编程日记 2025/5/21 15:05:22

amis组件crud使用踩坑

crud注意过滤条件参数同步地址栏默认 CRUD 会将过滤条件参数同步至浏览器地址栏中，比如搜索条件、当前页数，这也做的目的是刷新页面的时候还能进入之前的分页。但也会导致地址栏中的参数数据合并到顶层的数据链中，例如：自动…...

编程日记 2025/5/20 2:53:33

【docker】Failed to allocate manager object, freezing:兼容兼容 cgroup v1 和 v2

参考大神让系统同时兼容 cgroup v1 和 v2 要解决你系统中只挂载了 cgroup v2 但需要兼容 cgroup v1 的问题，可以通过以下几步来使系统同时兼容 cgroup v1 和 cgroup v2。这样 Docker 和其他服务就可以正常工作了。步骤 1：更新 Grub 配置，启用兼容模式编辑 GRUB 配置来启用同…...

编程日记 2025/5/18 11:12:39

LeetCode：503.下一个更大元素II

跟着carl学算法，本系列博客仅做个人记录，建议大家都去看carl本人的博客，写的真的很好的！ 代码随想录 LeetCode：503.下一个更大元素II 给定一个循环数组 nums （ nums[nums.length - 1] 的下一个元素是 nums[…...

编程日记 2025/5/21 20:57:54

【AI日记】25.02.08

【AI论文解读】【AI知识点】【AI小项目】【AI战略思考】【AI日记】【读书与思考】【AI应用】探索 AI 应用探索周二有个面试，明后天打算好好准备一下，我打算主要研究下 AI 如何在该行业赋能和应用，以及该行业未来的发展前景和公司痛点&#…...

编程日记 2025/5/22 15:54:22

32. C 语言安全函数( _s 尾缀)

本章目录前言什么是安全函数？安全函数的特点主要的安全函数1. 字符串操作安全函数2. 格式化输出安全函数3. 内存操作安全函数4. 其他常用安全函数安全函数实例示例 1：strcpy_s 和 strcat_s示例 2：memcpy_s示例 3：strtok_s 总结 …...

编程日记 2025/5/22 11:13:15

常用数据结构之String字符串

字符串在Java编程语言中，字符可以使用基本数据类型char来保存，在 Java 中字符串属于对象，Java 提供了 String 类来创建和操作字符串。操作字符串常用的有三种类：String、StringBuilder、StringBuffer 接下来看看这三类常见用…...

编程日记 2025/5/22 15:57:04

Android开发获取缓存，删除缓存

Android开发获取缓存，删除缓存 app设置中往往有清理缓存的功能。会显示当前缓存时多少，然后可以点击清理缓存直接上代码： object CacheHelper {/*** 获取缓存大小* param context* return* throws Exception*/JvmStaticfun getTotalCache…...

编程日记 2025/5/13 23:36:01

网络安全 | 保护智能家居和企业IoT设备的安全策略

网络安全 | 保护智能家居和企业IoT设备的安全策略一、前言二、智能家居和企业 IoT 设备面临的安全威胁2.1 设备自身安全缺陷2.2 网络通信安全隐患2.3 数据隐私风险2.4 恶意软件和攻击手段三、保护智能家居和企业 IoT 设备的安全策略3.1 设备安全设计与制造环节的考量3.2 网络…...

编程日记 2025/5/22 16:00:50

掌握API和控制点(从Java到JNI接口)_38 JNI从C调用Java函数 01

1. Why? 将控制点下移到下C/C层对古典视角的反思 App接近User，所以App在整体架构里，是主导者，拥有控制权。所以， App是架构的控制点所在。Java函数调用C/C层函数，是合理的。但是EIT造形告诉我们： App…...

编程日记 2025/5/22 15:39:23

vue组件间的数据传递：自定义输入组件（v-model/defineModel）

文章目录引言I Vue 3.4 开始，推荐使用 defineModel() 宏子组件使用defineModel父组件用 v-model 绑定值底层机制II Vue 3.4之前：自定义输入组件（组件中实现 v-model ）前置知识父组件监听自定义事件进行 v-model 的数据绑定子组件通过监听input事件触发自定义的 `update:mo…...

编程日记 2025/5/22 16:11:39

记录一下在Mac下用pyinstallter 打包 Django项目

安装: pip install pyinstaller 在urls.py from SheepMasterOneToOne import settings from django.conf.urls.static import staticurlpatterns [path("admin/", admin.site.urls),path(generate_report/export/, ReportAdmin(models.Report, admin.site).generat…...

编程日记 2025/5/22 15:20:20

大模型相关概念

文章目录部署相关数据并行模型并行张量并行管道并行（流水线并行） 混合并行（数据并行模型并行）显存优化技术InfiniBand去中心化的All-Reduce操作软件大模型命名**1. 模型架构相关****2. 模型用途相关****3. 训练方法相关****4. 多…...

编程日记 2025/5/20 6:43:48

【实用教程】在 Android Studio 中连接 MuMu 模拟器

MuMu 模拟器是一个非常流行的安卓模拟器，特别适合开发人员进行应用测试，我使用它的根本原因在于Android Studio自带的AVM实现是太难用了，但是Mumu模拟器启动以后不会自动被Android Studio识别到，但是其他模拟器都是能够正常被Andr…...

编程日记 2025/5/21 7:29:59

Linux 安装 Ollama

1、下载地址 Download Ollama on Linux 2、有网络直接执行 curl -fsSL https://ollama.com/install.sh | sh 命令 3、下载慢的解决方法 1、curl -fsSL https://ollama.com/install.sh -o ollama_install.sh 2、sed -i s|https://ollama.com/download/ollama-linux|https://…...

编程日记 2025/5/22 16:05:47

双亲委派（JVM）

1.双亲委派在 Java 中，双薪委派通常是指双亲委派模型，它是 Java 类加载器的一种工作模式，用于确保类加载的安全性和一致性。以下是其相关介绍： 定义与作用定义：双亲委派模型要求除了顶层的启动类加载器外&#xf…...

编程日记 2025/5/15 14:29:47

青少年编程与数学 02-009 Django 5 Web 编程 01课题、概要

青少年编程与数学 02-009 Django 5 Web 编程 01课题、概要一、Django 5Django 5 的主要特性包括： 二、MVT模式三、官方网站四、内置功能数据库 ORM（对象关系映射）用户认证和授权表单处理模板引擎URL 路由缓存框架国际化和本地化安全性功能管…...

编程日记 2025/5/22 15:29:54

为AI聊天工具添加一个知识系统之90 详细设计之31 Derivation 之5-- 神经元变元用它衍生神经网络

本文要点要点 Derivation 神经元变元衍生模型（ 衍生神经网络） 整体上说，它（ Derivation）自己充当整体无意识原型anestor的代言--作为所有神经网络的共生环境。Derivation 初始断言了基于最古老的自然和逻辑树…...

编程日记 2025/5/19 4:17:30

Centos挂载镜像制作本地yum源,并补装图形界面

内网环境centos7.9安装图形页面内网环境制作本地yum源上传镜像到服务器目录创建目录并挂载镜像 #创建目录 cd /mnt/ mkdir iso#挂载 mount -o loop ./CentOS-7-x86_64-DVD-2009.iso ./iso #前面镜像所在目录，后面所挂载得目录#检查 [rootlocalhost mnt]# df -h…...

编程日记 2025/5/22 16:15:06

【Python实战练习】Python类中的方法：形式与作用详解

文章目录 Python类中的方法：形式与作用详解1. 实例方法 (Instance Method)定义与使用作用2. 类方法 (Class Method)定义与使用作用3. 静态方法 (Static Method)定义与使用作用4. 特殊方法 (Magic/Dunder Methods)常见的特殊方法定义与使用作用5. 抽象方法 (Abstract Method)定…...

编程日记 2025/5/22 15:35:58

Idea 2024.3 使用CodeGPT插件整合Deepseek

哈喽，大家好，我是浮云，最近国产大模型Deepseek异常火爆，作为程序员我也试着玩了一下，首先作为简单的使用，大家进入官网，点击开始对话即可进行简单的聊天使用，点击获取手机app即可安装…...

编程日记 2025/5/22 16:09:53

神经网络常见激活函数 1-sigmoid函数

sigmoid 1 函数求导 sigmoid函数 σ ( x ) 1 1 e ( − x ) \sigma(x) \frac{1}{1e^{(-x)}} σ(x)1e(−x)1 sigmoid函数求导 d d x σ ( x ) d d x ( 1 1 e − x ) e − x ( 1 e − x ) 2 ( 1 e − x ) − 1 ( 1 e − x ) 2 1 1 e − x − 1 ( 1 e − x ) 2 …...

编程日记 2025/5/22 15:46:10

Vue（6）

一.路由板块封装 （1）路由的封装抽离目标：将路由板块抽离出来好处：拆分板块，利于维护 // 路由的使用步骤 5 2 // 5个基础步骤 // 1. 下载 v3.6.5 // 2. 引入 // 3. 安装注册 Vue.use(Vue插件) // 4. 创建路由对象…...

编程日记 2025/5/22 16:02:30

深入理解进程优先级

目录引言一、进程优先级基础 1.1 什么是进程优先级？ 1.2 优先级与系统性能二、查看进程信息 2.1 使用ps -l命令 2.2 PRI与NI的数学关系三、深入理解Nice值 3.1 Nice值的特点 3.2 调整优先级实践四、进程特性全景图五、优化实践建议结语引言在操…...

编程日记 2025/5/22 15:00:14

机器学习 - 需要了解的条件概率、高斯分布、似然函数

似然函数是连接数据与参数的桥梁，通过“数据反推参数”的逆向思维，成为统计推断的核心工具。理解它的关键在于区分“参数固定时数据的概率”与“数据固定时参数的合理性”，这种视角转换是掌握现代统计学和机器学习的基础。一、在学习似然函…...

编程日记 2025/5/20 4:23:38

程序诗篇里的灵动笔触：指针绘就数据的梦幻蓝图＜7＞

大家好啊，我是小象٩(๑ω๑)۶ 我的博客：Xiao Xiangζั͡ޓއއ 很高兴见到大家，希望能够和大家一起交流学习，共同进步。今天我们一起来学习转移表，回调函数，qsort… 目录一、转移表1.1 定义与原理1.3…...

编程日记 2025/5/22 15:48:05

4、C#基于.net framework的应用开发实战编程 - 测试（四、一） - 编程手把手系列文章...

四、测试； 四．一、调试； 开发完应用，就需要对应用进行测试，第一部就从调试开始，特别是一些重要的功能点，还有如果运行时有问题，也需要对应用进行调试，以找出问题。 1、 …...

编程日记 2025/5/21 10:06:12

逻辑回归：Sigmoid函数在分类问题中的应用

欢迎来到我的主页：【Echo-Nie】本篇文章收录于专栏【机器学习】 1 什么是Sigmoid函数？ Sigmoid函数（Logistic函数）是机器学习中最经典的激活函数之一，是一个在生物学中常见的S型函数，也称为S型生长曲线。…...

编程日记 2025/5/22 16:13:22

使用 SDKMAN! 在 Mac（包括 ARM 架构的 M1/M2 芯片）上安装 Java 8

文章目录 1. 安装 SDKMAN!2. 查找可用的 Java 8 版本3. 安装 Java 84. 验证安装5. 切换 Java 版本（可选）6. 解决 ARM 架构兼容性问题总结可以使用 SDKMAN! 在 Mac（包括 ARM 架构的 M1/M2 芯片）上安装 Java 8。SDKMAN! 是一个强大…...

编程日记 2025/5/21 23:49:55

AUTOSAR汽车电子嵌入式编程精讲300篇-基于FPGA的CAN FD汽车总线数据交互系统设计

目录前言汽车总线以及发展趋势汽车总线技术汽车总线发展趋势 CAN FD总线国内外研究现状 2 系统方案及CAN FD协议分析 2.1系统控制方案设计 2.2 CAN FD总线帧结构分析 2.2.1数据帧分析 2.2.2远程帧分析 2.2.3过载帧分析 2.2.4错误帧分析 2.2.5帧间隔分析 2.3位…...

编程日记 2025/5/22 5:46:07

滴水逆向_程序实现弹窗修改OEP

作业： 几个很重要的注意事项。 1 我们模拟的是内核如何将一个文件硬盘中拉伸到内存中，但是我们做的仅仅是模拟拉伸过程。也就是说其中的属性字段是无差别的拷贝的。但是加载exe的时候 ，imagebase 是随机分配的。我们打开内存中的exe&…...

编程日记 2025/5/20 14:08:20

HTTP报文格式

HTTP请求报文格式 1. 结构： [请求行] [请求头] [空行] [请求体] （可选）请求行：方法 URI HTTP版本常见方法：GET（获取资源）、POST（提交数据）、PUT（替…...

编程日记 2025/5/19 4:26:38

pytest.fixture

pytest.fixture 是 pytest 测试框架中的一个非常强大的功能，它允许你在测试函数运行前后执行一些设置或清理代码。以下是关于 pytest.fixture 的详细介绍：一、定义与用途 pytest.fixture 是一个装饰器，用于标记一个函数为 fixture。Fixture 函数中的代码可以在测试函数运…...

编程日记 2025/5/18 17:51:39

位运算算法篇：进入位运算的世界

位运算算法篇：进入位运算的世界本篇文章是我们位运算算法篇的第一章，那么在我们是算法世界中，有那么多重要以及有趣的算法，比如深度优先搜索算法以及BFS以及动态规划算法等等，那么我们位运算在这些算法面前相比&#…...

编程日记 2025/5/20 18:52:03

Heterogeneous Graph Attention Network(HAN)

HAN WWW19 分类：异构图神经网络元路径 (图片地址：异构图注意力网络(3) HAN_哔哩哔哩_bilibili) 如图所示，假如异构图如上所示。那么，按照MAM和MDM就可以生成不同的子图。这样，就可以生成MAM与MDM的一阶邻居…...

编程日记 2025/5/20 23:24:27

重学SpringBoot3-Spring WebFlux之SSE服务器发送事件

更多SpringBoot3内容请关注我的专栏：《SpringBoot3》期待您的点赞??收藏评论 Spring WebFlux之SSE服务器发送事件 1. 什么是 SSE？2. Spring Boot 3 响应式编程与 SSE 为什么选择响应式编程实现 SSE？ 3. 实现 SSE 的基本步骤 3.1 创建 Spr…...

编程日记 2025/5/20 3:45:05

Java中实现定时锁屏的功能（可以指定时间执行）

Java中实现定时锁屏的功能（可以指定时间执行） 要在Java中实现定时锁屏的功能，可以使用java.util.Timer或java.util.concurrent.ScheduledExecutorService来调度任务，并通过调用操作系统的命令来执行锁屏。下面我将给出一个基本的…...

编程日记 2025/5/19 21:42:21

工作案例 - python绘制excell表中RSRP列的CDF图

什么是CDF图 CDF（Cumulative Distribution Function）就是累积分布函数，是概率密度函数的积分。CDF函数是一个在0到1之间的函数，描述了随机变量小于或等于一个特定值的概率。在可视化方面，CDF图表明了一个随机变量X小于…...

编程日记 2025/5/19 4:47:11

推理大模型DeepSeek迅速觉醒

随着人工智能技术的快速发展，DeepSeek作为一种创新的技术工具，正在重塑行业格局。本文将深入分析如何把握这一波由DeepSeek带来的流量红利，揭示其在市场洞察、技术创新和用户需求中的潜在机会，并提供实用策略帮助个人或企业快速融…...

编程日记 2025/5/22 3:12:12

Ubuntu22.04部署deepseek大模型

Ollama 官方版 Ollama 官方版: https://ollama.com/ 若你的显卡是在Linux上面可以使用如下命令安装 curl -fsSL https://ollama.com/install.sh | shollama命令查看 rootheyu-virtual-machine:~# ollama -h Large language model runnerUsage:ollama [flags]ollama [comman…...

编程日记 2025/5/19 4:28:34

redis的数据结构介绍（string

redis是键值数据库，key一般是string类型，value的类型很多 string，hash，list，set，sortedset，geo，bitmap，hyperlog redis常用通用命令： keys： …...

编程日记 2025/5/19 10:44:02

QUIC 与 UDP 关系

QUIC协议是建立在UDP之上的，这意味着QUIC的数据包实际上是通过UDP传输的。QUIC的设计使其能够利用UDP的特性，同时在其上实现更复杂的功能。以下是QUIC如何体现出其基于UDP的特性，以及QUIC头部字段的详细介绍。 QUIC与UDP的关系 UDP封装：QUIC数据包被封装在UDP数据包中进行…...

编程日记 2025/5/17 15:46:42

webview_flutter的使用

目录步骤示例代码步骤 1.配置依赖。根目录下运行如下命令： flutter pub add webview_flutter 2.所需页面导入： import ‘package:webview_flutter/webview_flutter.dart’; 3.初始化WebViewController overridevoid initState() {super.initState();…...

编程日记 2025/5/18 7:58:35

Centos执行yum命令报错

错误描述错误：为仓库 ‘appstream’ 下载元数据失败 : Cannot prepare internal mirrorlist: Curl error (6): Couldn’t resolve host name for http://mirrorlist.centos.org/?release8&archx86_64&repoAppStream&infrastock [Could not resolve h…...

编程日记 2025/5/22 8:07:54

aio-pika 快速上手（Python 异步 RabbitMQ 客户端）

目录简介官方文档如何使用简介 aio-pika 是一个 Python 异步 RabbitMQ 客户端。5.0.0 以前 aio-pika 基于 pika 进行封装，5.0.0 及以后使用 aiormq 进行封装。 https://github.com/mosquito/aio-pikahttps://pypi.org/project/aio-pika/ pip install aio-pika官…...

编程日记 2025/5/21 20:33:53

使用线性回归模型逼近目标模型

什么是回归

什么是线性回归

使用 PyTorch 实现线性回归模型

代码

执行结果

相关文章：