当前位置：首页 > news >正文

DAY 39 图像数据与显存

news 来源：原创 2025/6/26 21:40:12

图像数据的格式：灰度和彩色数据
模型的定义
显存占用的4种地方
1. 模型参数+梯度参数
2. 优化器参数
3. 数据批量所占显存
4. 神经元输出中间状态
batchisize和训练的关系

import torch
import torch.nn as nn
import torch.optim as optim
from torch.utils.data import DataLoader , Dataset
from torchvision import datasets, transforms
import matplotlib.pyplot as plttorch.manual_seed(42)
transform = transforms.Compose([transforms.ToTensor(),transforms.Normalize((0.1307,), (0.3081,))
])
train_dataset = datasets.MNIST(root='./data',train=True,download=True,transform=transform
)test_dataset = datasets.MNIST(root='./data',train=False,transform=transform
)
sample_idx = torch.randint(0, len(train_dataset), size=(1,)).item() 
image, label = train_dataset[sample_idx] 
def imshow(img):img = img* 0.3081 + 0.1307npimg= img.numpy()plt.imshow(npimg[0], cmap='gray')plt.show()
print(f'Label:{label}')
imshow(image)
import torch
import torchvision
import torchvision.transforms as transforms
import matplotlib.pyplot as plt
import numpy as nptorch.manual_seed(42)
transform = transforms.Compose([transforms.ToTensor(), transforms.Normalize((0.5, 0.5, 0.5), (0.5, 0.5, 0.5))  
])trainset = torchvision.datasets.CIFAR10(root='./data',train=True,download=True,transform=transform
)trainloader = torch.utils.data.DataLoader(trainset,batch_size=4,shuffle=True
)classes = ('plane', 'car', 'bird', 'cat', 'deer', 'dog', 'frog', 'horse', 'ship', 'truck')sample_idx = torch.randint(0, len(trainset), size=(1,)).item()
image, label = trainset[sample_idx]print(f"图像形状: {image.shape}") 
print(f"图像类别: {classes[label]}")def imshow(img):img = img / 2 + 0.5 npimg = img.numpy()plt.imshow(np.transpose(npimg, (1, 2, 0)))  plt.axis('off') plt.show()imshow(image)
transform = transforms.Compose([transforms.ToTensor(), transforms.Normalize((0.1307,), (0.3081,)) 
])
import matplotlib.pyplot as plttrain_dataset = datasets.MNIST(root='./data',train=True,download=True,transform=transform
)test_dataset = datasets.MNIST(root='./data',train=False,transform=transform
)
class MLP(nn.Module):def __init__(self):super(MLP, self).__init__()self.flatten = nn.Flatten()  self.layer1 = nn.Linear(784, 128) self.relu = nn.ReLU()  self.layer2 = nn.Linear(128, 10)  def forward(self, x):x = self.flatten(x)  x = self.layer1(x)   x = self.relu(x)    x = self.layer2(x) return xmodel = MLP()device = torch.device("cuda" if torch.cuda.is_available() else "cpu")
model = model.to(device)  from torchsummary import summary  
print("\n模型结构信息：")
summary(model, input_size=(1, 28, 28)) 
class MLP(nn.Module):def __init__(self, input_size=3072, hidden_size=128, num_classes=10):super(MLP, self).__init__()self.flatten = nn.Flatten()self.fc1 = nn.Linear(input_size, hidden_size) self.relu = nn.ReLU()self.fc2 = nn.Linear(hidden_size, num_classes) def forward(self, x):x = self.flatten(x)  x = self.fc1(x)    x = self.relu(x)     x = self.fc2(x)     return xmodel = MLP()device = torch.device("cuda" if torch.cuda.is_available() else "cpu")
model = model.to(device) 
from torchsummary import summary 
print("\n模型结构信息：")
summary(model, input_size=(3, 32, 32))  class MLP(nn.Module):def __init__(self):super().__init__()self.flatten = nn.Flatten() self.layer1 = nn.Linear(784, 128)self.relu = nn.ReLU()self.layer2 = nn.Linear(128, 10)def forward(self, x):x = self.flatten(x) x = self.layer1(x) x = self.relu(x)x = self.layer2(x)   return x
from torch.utils.data import DataLoadertrain_loader = DataLoader(dataset=train_dataset,  batch_size=64,          shuffle=True           
)test_loader = DataLoader(dataset=test_dataset,batch_size=1000,shuffle=False
)

DAY 39 图像数据与显存

图像数据的格式：灰度和彩色数据模型的定义显存占用的4种地方模型参数梯度参数优化器参数数据批量所占显存神经元输出中间状态 batchisize和训练的关系 import torch import torch.nn as nn import torch.optim as optim from torch.utils.data import DataLoader ,…...

编程日记 2025/6/26 21:40:12

1、elasticsearch和kibana搭建配置见 https://blog.csdn.net/yh_zeng2/article/details/148812447?spm1001.2014.3001.5501 2、logstash 下载下载和elasticsearch版本一致的logstash，下载地址： Past Releases of Elastic Stack Software | Elastic …...

编程日记 2025/6/23 6:54:41

【ELK(Elasticsearch+Logstash+Kibana) 从零搭建实战记录：日志采集与可视化】

ELK(ElasticsearchLogstashKibana) 从零搭建实战记录：日志采集与可视化本文记录了我在搭建ELK(Elasticsearch, Logstash, Kibana)技术栈时的完整实战过程。使用Docker Compose快速搭建了ELK服务端（监控主机），并通过Filebeat实现…...

编程日记 2025/6/23 6:54:40

反无人机系统：技术利刃如何守护低空安全？

反无人机系统：技术利刃如何守护低空安全？ ——从军事防御到城市安防的全景解析一、技术体系：从“电磁软杀伤”到“激光硬摧毁”的立体防御网反无人机技术本质是一场“降维打击”：用百万级防御系统对抗千元级消费无人机。当前…...

编程日记 2025/6/26 21:26:35

第十章——8天Python从入门到精通【itheima】-102-Python基础综合案例-数据可视化（pyecharts的入门使用+数据处理）

目录 102节——pyecharts的入门使用 1.学习目标 2.pyecharts入门——基础折线图 3.pyecharts的配置对象有哪些？ 4.全局配置——set_global_opts 5.小节总结 103节——数据处理 1.学习目标 2.无法继续关于第一阶段的pyecharts的相关学习因为关于JSON数据获…...

编程日记 2025/6/26 21:05:47

Neo4j 中存储和查询数组数据的完整指南

Neo4j 中存储和查询数组数据的完整指南图形数据库 Neo4j 不仅擅长处理节点和关系，还提供了强大的数组(Array)存储和操作能力。本文将全面介绍如何在 Neo4j 中高效地使用数组，包括存储、查询、优化以及实际应用场景。数组在 Neo4j 中的基本使用数组…...

编程日记 2025/6/23 6:29:01

云原生/容器相关概念记录

文章目录网络与虚拟化技术云平台与架构容器与编排容器网络方案性能优化与工具硬件与协议网络与虚拟化技术 P4可编程网关 P4: Programming Protocol-independent Packet Processors一种基于P4语言的可编程网络设备，支持自定义数据包处理逻辑。P4可编程技术详解&am…...

编程日记 2025/6/26 13:17:02

uni-app项目实战笔记21--uniapp缓存的写入和读取

一、缓存的写入 uni.setStorageSync("storageClassList",classifyList.value) 二、缓存的读取，如果缓存不存在，则返回空数组 const storageClassList uni.getStorageSync("storageClassList") || []; 三、对读取到的数据进行转…...

编程日记 2025/6/23 6:23:29

操作系统概述

覆盖了操作系统概述、运行机制、中断、异常、操作系统的五大结构、虚拟机。借鉴：王道、我的好朋友杨某、我的笔记。一、操作系统概念概念 1.操作系统体现了封装思想由于底层硬件只接受二进制的指令不方便用户操作，所以操作系统把这些封装成简易的…...

编程日记 2025/6/26 21:25:14

探索数据的力量：Elasticsearch中指定链表字段的统计查询记录

目录一、基本的数据结构说明二、基本的统计记录 （一）统计当前索引中sellingProducts的所有类型 （二）检索指定文档中sellingProducts的数据总量 （三）检索指定文档中sellingProducts指定类型的数量统计…...

编程日记 2025/6/23 6:22:26

【Datawhale组队学习202506】YOLO-Master task03 IOU总结

系列文章目录 task01 导学课程 task02 YOLO系列发展线文章目录系列文章目录前言1 功能分块1.1 骨干网络 Backbone1.2 颈部网络 Neck1.3 头部网络 Head1.3.1 边界框回归头1.3.2 分类头 2 关键概念3 典型算法3.1 NMS3.2 IoU 总结前言 Datawhale是一个专注于AI与数据科学的开…...

编程日记 2025/6/26 21:13:23

C/C++数据结构之静态数组

概述静态数组是C/C中一种基础的数据结构，它允许用户在编译时便确定数组的大小，并分配固定数量的连续存储空间来存放相同类型的元素。静态数组的主要特点是：其大小在声明时就必须指定，且在其生命周期内保持不变。这也意味着&#…...

编程日记 2025/6/23 5:50:48

pyqt f-string

文章目录一、f-string的基本语法二、代码中的具体应用拼接效果三、f-string的核心优势四、与其他字符串格式化方式的对比五、在Qt程序中的实际作用六、扩展用法：在f-string中添加格式说明 Python的 f-string（格式化字符串字面值） 特性&…...

编程日记 2025/6/26 21:19:40

夏普 AR-2348SV 打印机信息

基本信息：这是一款黑白 A3 激光多功能数码复合机，可实现打印、复印、扫描功能。性能参数打印 / 复印速度：23 张 / 分钟。分辨率：600x600dpi，能确保文字和图像清晰。最大打印 / 复印尺寸：A3。纸张支持&…...

编程日记 2025/6/23 5:38:53

跨个体预训练与轻量化Transformer在手势识别中的应用：Bioformer

目录一、从深度学习到边缘部署，手势识别的新突破 （一）可穿戴设备边缘计算个性化医疗新可能 （二）肌电信号（sEMG）：手势识别的关键媒介 （三）挑战&#…...

编程日记 2025/6/26 21:34:07

探索常识性概念图谱：构建智能生活的知识桥梁

目录一、知识图谱背景介绍 （一）基本背景 （二）与NLP的关系 （三）常识性概念图谱的引入对比二、常识性概念图谱介绍 （一）常识性概念图谱关系图示例 （二&#xff09…...

编程日记 2025/6/26 21:38:27

人人都是音乐家？腾讯开源音乐生成大模型SongGeneration

目录前言一、SongGeneration 带来了什么？ 1.1 文本控制与风格跟随：你的想法，AI 精准实现 1.2 多轨生成：从“成品”到“半成品”的巨大飞跃 1.3 开源：推倒“高墙”，共建生态二、3B 参数如何媲美商业…...

编程日记 2025/6/26 21:36:51

一，python语法教程.内置API

一，字符串相关API string.strip([chars])方法：移除字符串开头和结尾的空白字符（如空格、制表符、换行符等），它不会修改原始字符串，而是返回一个新的处理后的字符串 chars（可选）&…...

编程日记 2025/6/25 20:02:34

python中学物理实验模拟：凸透镜成像和凹透镜成像

python中学物理实验模拟：凸透镜成像和凹透镜成像凸透镜成像凸透镜是指中间厚、边缘薄的透镜。它对光线有会聚作用，即光线通过凸透镜后会向主光轴方向偏折。成像原理基于光的折射，平行于主光轴的光线经凸透镜折射后会聚于焦点&#xff…...

编程日记 2025/6/26 21:20:52

【AGI】突破感知-决策边界：VLA-具身智能2.0

突破感知-决策边界：VLA-具身智能2.0 （一）技术架构核心（二）OpenVLA：开源先锋与性能标杆（三）应用场景：从实验室走向真实世界（四）挑战与未来方向&…...

编程日记 2025/6/26 12:38:30

2D曲线点云平滑去噪

2D曲线点云，含许多噪声，采用类似移动最小二乘的方法（MLS)分段拟合抛物线并投影至抛物线，进行点云平滑去噪。更通俗的说法是让有一定宽度的曲线点云，变成一条细曲线上的点。分两种情况进行讨论： 1&#…...

编程日记 2025/6/26 7:23:16

靶场（二十一）---小白心得靶场体会---DVR4

先看端口，看到了一个dvr的服务，老规矩只要有服务就先去看看 PORT STATE SERVICE VERSION 22/tcp open ssh Bitvise WinSSHD 8.48 (FlowSsh 8.48; protocol 2.0; non-commercial use) | ssh-hostkey: | 3072 21:25:f0:53:b4…...

编程日记 2025/6/26 21:18:20

Qt + C++ 入门2(界面的知识点)

补充前面没有说到的一点就是，qt的页面你可以用qt自带的也就是前面所说的自动生成.UI文件生成前端所谓的界面，然后往里面拖控件就可以了，这个UI界面非常的适合用于新手，以及某些软件少量的界面应用。但是有一个难点就是后期这个UI…...

编程日记 2025/6/26 21:09:57

计算机网络第九章——数据链路层《流量控制和可靠传输》

一、回顾概念前面上一章讲了数据链路层的《差错控制》，那么回顾一下差错控制和可靠传输的区别： 差错控制：发现一个帧里的【位错（比特错）】检错（奇偶校验码、CRC循环冗余校验码）：接…...

编程日记 2025/6/22 20:45:56

Zephyr 调试实用指南：日志系统、Shell CLI 与 GDB 全面解析

本文深入讲解 Zephyr 的调试利器，包括统一日志系统（logging subsystem）、内置命令行（Shell CLI）、与 GDB 调试集成方法，帮助开发者快速定位问题、分析运行时行为，实现高效开发与排障。一、日志…...

编程日记 2025/6/22 20:13:50

【知识图谱提取】【阶段总结】【LLM4KGC】LLM4KGC项目提取知识图谱推理部分

文章目录前言LLM4KGC的三个部分显卡使用效果前言之前在学习基于大模型的知识图谱提取，就找到了LLM4KGC这个项目：项目地址： https://github.com/ChristopheCruz/LLM4KGC/ 总体来说，这个项目没有什么比较高深的idea，年份也比较古老，但确实挺适合入手的。主要是绝对简…...

编程日记 2025/6/24 16:23:36

基于YOLO的智能车辆检测与记录系统

基于YOLO的智能车辆检测与记录系统摘要本报告总结了智能车辆检测系统的开发工作，主要包括车辆数据标注、YOLO模型训练及QT交互系统搭建三部分。通过使用专业标注工具完成车辆目标数据集的标注与预处理，基于YOLO模型构建车辆检测算法并优化训练流程&a…...

编程日记 2025/6/22 20:02:18

5.2 Qt Creator 使用FFmpeg库

一、目录结构 ├─3rdparty # 第三方依赖库 │ └─ffmpeg-4.4.3 # ffmpeg库 │ ├─mingw # 用MinGW64编译的库 │ │ ├─bin │ │ ├─include │ │ └─lib │ └─msvc # 用MSVC编译的库 │ ├─bin │ …...

编程日记 2025/6/24 5:02:28

C++基础练习 sort函数，用于排序函数

题目： https://acm.hdu.edu.cn/showproblem.php?pid2039 解答： #include <iostream> #include <cmath> #include <algorithm> using namespace std;double a[3]; int main(){int n;cin>>n;while(n--){cin>>a[0]>>…...

编程日记 2025/6/26 6:20:29

【Docker 08】Compose - 容器编排

🌈 一、Docker Compose 介绍 ⭐ 1. Docker Compose 是什么 Docker Compose 是由 Docker 官方提供的一个用于定义和运行多容器应用的工具，它让用户可以通过一个 YAML 文件（通常是 docker-compose.yml）来配置应用所需要的服务&…...

编程日记 2025/6/22 19:10:40

docker执行yum报错Could not resolve host: mirrorlist.centos.org

解决办法： -- 依次执行以下命令cd /etc/yum.repos.d/sed -i s|#baseurlhttp://mirror.centos.org|baseurlhttp://vault.centos.org|g /etc/yum.repos.d/CentOS-*sed -i s/mirrorlist/#mirrorlist/g /etc/yum.repos.d/CentOS-*yum update -yecho "export LC_ALL…...

编程日记 2025/6/24 21:00:38

信贷域——信贷授信业务

摘要本文详细介绍了信贷授信业务，包括其核心目标、典型流程、不同机构授信流程的对比、授信业务的其他类型以及授信模块的技术实现。信贷授信是金融机构在放贷前对客户信用额度的评估与审批流程，旨在控制风险、合理设定额度和期限、确保合规&#xff0…...

编程日记 2025/6/26 5:28:27

python的校园兼职系统

目录技术栈介绍具体实现截图系统设计研究方法：设计步骤设计流程核心代码部分展示研究方法详细视频演示试验方案论文大纲源码获取/详细视频演示技术栈介绍 Django-SpringBoot-php-Node.js-flask 本课题的研究方法和研究步骤基本合理，难度适中&#xf…...

编程日记 2025/6/24 19:53:21

深度剖析 PACK_SESSIONID 实现原理与安全突破机制

🌐 深度剖析 PACK_SESSIONID 实现原理与安全突破机制 🖼️ 1. 完整数据处理流程 #mermaid-svg-TW7jVIcz81hCZVS9 {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-TW7jVIcz81hCZVS9 .error-ico…...

编程日记 2025/6/22 19:02:43

从0开始学习计算机视觉--Day02--数据驱动

上次我们在课程里了解到，亚马逊网站在当时构建了一个在那时候最大的供AI训练的数据集，为了推广这个测试，他们举办了比赛邀请了许多的参赛者，识别图片的标准是输出的类别中只要在前面五个里包含了正确答案就算识别成功。在这个过程…...

编程日记 2025/6/26 18:05:32

【LeetCode#第198题】打家劫舍（一维dp）

198. 打家劫舍 - 力扣（LeetCode） 你是一个专业的小偷，计划偷窃沿街的房屋。每间房内都藏有一定的现金，影响你偷窃的唯一制约因素就是相邻的房屋装有相互连通的防盗系统，如果两间相邻的房屋在同一晚上被小偷闯入&#…...

编程日记 2025/6/22 18:29:13

stm32串口(uart)2转发到串口(uart)3实现

今天博主在用kelil5写stm32的程序时遇到了一个全局变量因为在中断和任务切换时没有加 volatile 修饰，导致任务检测不到标志位变化，无法实现效果的问题。全部代码： /* USER CODE BEGIN Header */ /***************************************…...

编程日记 2025/6/24 21:24:35

数据结构——函数填空题

链队出队入队入队：新指针p赋给队尾的下一个，再赋给队尾出队：队首指针赋给p，后移 p的下一个赋给队首指向的下一个若队尾p，则证明首尾相连为1个字符串匹配算法二叉树统计二叉树度为1的节点树T为空&#xff0…...

编程日记 2025/6/26 19:57:43

什么是跨域问题？后端如何解决跨域问题？

跨域问题是指浏览器为了安全，对不同域（包含不同协议、不同端口或不同主机名）的请求进行限制，从而导致请求无法正常访问后端接口。跨域问题的产生源于浏览器的同源策略（Same-Origin Policy），这…...

编程日记 2025/6/22 17:52:23

使用ccs生成bin

CCS12.6 编译生成BIN文件正确方法_ccs生成bin文件-CSDN博客...

编程日记 2025/6/25 1:21:22

Python 邻接表详细实现指南

邻接表是图数据结构的一种高效表示方法，特别适合表示稀疏图。下面我将用 Python 详细讲解邻接表的多种实现方式、操作方法和实际应用。一、邻接表基础概念邻接表的核心思想是为图中的每个顶点维护一个列表，存储与该顶点直接相连的所有邻接顶点。邻…...

编程日记 2025/6/26 11:32:29

FVISION 未来视界工作室：AI驱动的创新与智能外包平台

大家好，今天给大家介绍一个非常有意思的AI创新平台——FVISION 未来视界工作室。如果你正在寻找高效、智能、前沿的数字化工具和服务，这里一定有你想要的答案！ 🌟 平台简介 FVISION 未来视界工作室专注于AI驱动的创新应用开发&am…...

编程日记 2025/6/26 10:43:49

领域驱动设计(DDD)【3】之事件风暴

文章目录说明一事件风暴理论知识1.1 事件风暴的核心目标1.2事件风暴的关键步骤1.2.1 准备工作1.2.2 核心流程1.2.3 事件风暴的输出 1.3 事件风暴的优势1.4 常见问题Q1：事件风暴适合所有项目吗？Q2：事件风暴后如何落地？Q3&#xf…...

编程日记 2025/6/24 14:09:49

3.10 坐标导航

1.编写代码新建文件nav_clienr.cpp编写代码 #include<ros/ros.h> #include<move_base_msgs/MoveBaseAction.h> #include<actionlib/client/simple_action_client.h>typedef actionlib::SimpleActionClient<move_base_msgs::MoveBaseAction> MoveBas…...

编程日记 2025/6/24 15:48:47

TensorFlow 安装与 GPU 驱动兼容（h800）

环境说明TensorFlow 安装与 GPU 驱动兼容CUDA/H800 特殊注意事项PyCharm 和终端环境变量设置方法测试 GPU 是否可用的 Python 脚本 # 使用 TensorFlow 2.13 在 NVIDIA H800 上启用 GPU 加速完整指南在使用 TensorFlow 进行深度学习训练时，充分利用 GPU 能力至关重要…...

编程日记 2025/6/22 16:22:37

WPF调试三种工具介绍：Live Visual Tree、Live Property Explorer与Snoop

WPF调试工具详解：Live Visual Tree、Live Property Explorer与Snoop 1. Live Visual Tree (实时可视化树) 简介 Live Visual Tree是Visual Studio内置的WPF调试工具，允许开发者在应用程序运行时检查可视化树结构，查看控件的层次关系及其状态。…...

编程日记 2025/6/24 8:49:23

用OBS Studio录制WAV音频，玩转语音克隆和文本转语音！

言简意赅的讲解OBS Studio解决的痛点随着AI技术的快速发展，语音克隆与文本生成语音技术越来越受欢迎。无论你想要制作个人虚拟主播，还是给自媒体视频配音，拥有高质量的原始音频都是关键。本文详细教你使用免费且功能强大的软件——OBS Stud…...

编程日记 2025/6/24 19:35:23

5.3 VSCode使用FFmpeg库

一、VSCMake 1.1 使用ffmpeg动态库项目目录结构： ./ ├── 3rdparty # 第三方依赖库 │ └── ffmpeg_4.4.1 │ ├── include # 头文件 │ ├── lib # 静态库库 │ └── share ├── build # 编译目…...

编程日记 2025/6/22 16:15:21

【Datawhale组队学习202506】零基础学爬虫 02 数据解析与提取

系列文章目录提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加例如：第一章 Python 机器学习入门之pandas的使用文章目录系列文章目录前言2.1 概述2.2 re 解析2.3 bs4 解析2.4 xpath 解析总结前言 Datawhale是一个专注于…...

编程日记 2025/6/25 5:04:37

[muduo] ThreadPool | TcpClient | 异步任务 | 通信测试

第九章：线程池（ThreadPool） 在第八章《TcpServer》中，我们了解到muduo::net::TcpServer通过EventLoop线程池处理入站连接。这些EventLoop线程主要负责网络I/O：套接字读写和定时器处理，由Poller和Channel…...

编程日记 2025/6/24 15:49:07

相关文章：