当前位置：首页 > news >正文

5.18-AI分析师

news 来源：原创 2025/6/30 23:43:11

强化练习1 神经网络训练案例（SG）

#划分数据集 #以下5行需要背
folder = datasets.ImageFolder(root='C:/水果种类智能训练/水果图片', transform=trans_compose)
n  = len(folder)
n1 = int(n*0.8)
n2 = n-n1
train, test = random_split(folder, [n1, n2])

#训练并保存模型
import torchmetricslossf = nn.CrossEntropyLoss()
optimizer =  torch.optim.Adam(model.parameters(), lr=0.01)
metricsf =  torchmetrics.Accuracy(task='multiclass', num_classes=len(folder.classes))for i in range(1):for batchX, batchY in data_loader:#以下17行需要背  中文是对应题目的要求可以不背device = torch.device("cpu")batchX = batchX.to(device)batchY = batchY.to(device)model = model.to(device)# 清零梯度optimizer.zero_grad()# 前向传播outputs = model(batchX)# 计算损失loss = lossf(outputs, batchY)# 反向传播loss.backward()# 更新参数optimizer.step()# 计算准确率preds = torch.argmax(outputs, dim=1)metricsf.update(preds, batchY)# 每个 epoch 结束后打印损失和准确率epoch_loss = loss.item()epoch_accuracy = metricsf.compute()print(f'Epoch {i + 1}, Loss: {epoch_loss:.4f}, Accuracy: {epoch_accuracy:.4f}')# 重置评估指标metricsf.reset()
torch.save(model.state_dict(), '2-2model_test.pth')
print("模型已保存为 2-2model_test.pth")

强化练习2 简答题

数据采集培训大纲（以下为参考，自己要修改，与下面一致的会造成雷同）

基础认知：明晰数据采集概念、重要性与应用场景。
方法技巧：讲授多种采集方式，涵盖网络、传感器等，分享实操窍门。
工具运用：熟练掌握 Excel、Python 等工具用于数据获取与整理。

常见问题及解决方法（选2条背）

目标不明确
- 问题：未清晰界定采集数据的用途与范围，导致收集大量无关数据，遗漏关键信息。比如市场调研时，不清楚要分析用户哪类消费行为，盲目收集。
- 解决方法：项目启动前，组织跨部门会议，与业务、分析团队深入沟通，基于业务需求和分析目的，详细梳理数据需求清单，明确数据用途、范围、字段及预期成果。
样本偏差
- 问题：选取样本缺乏代表性，如调查城市居民出行方式，仅在高档社区采样，无法反映整体情况。
- 解决方法：运用科学抽样方法，像分层抽样，按城市区域、收入水平等分层后随机抽取；扩大样本覆盖范围，涵盖不同特征群体，必要时用统计方法评估样本代表性。
数据来源不可靠
- 问题：采用劣质数据源，像某些非官方网站数据，可能存在错误、过时或被篡改，影响数据质量。
- 解决方法：优先选用官方机构、权威数据库等可靠数据源；对新数据源，先小范围验证数据准确性，对比多个来源数据，分析差异。

强化练习3 人工智能系统设计

    def __init__(self):super(MyNet, self).__init__()self.fc1 = nn.Linear(14, 128)self.bn1 = nn.BatchNorm1d(128)self.relu = nn.ReLU()# 第二层self.fc2 = nn.Linear(128, 256)self.bn2 = nn.BatchNorm1d(256)self.relu = nn.ReLU()# 第三层self.fc3 = nn.Linear(256, 2)def forward(self, x):x = self.fc1(x)x = self.bn1(x)x = self.relu(x)x = self.fc2(x)x = self.bn2(x)x = self.relu(x)out = self.fc3(x)return out

流程图：

读取XX数据

检查数据是否正确

是

数据清洗

数据分析处理

模型加载

根据模型进行推理

输出响应结果

结束

强化练习4 gs程序分析

三种网络爬虫的主要搜索策略及特点

广度优先 (BFS)	特点：通用搜索引擎、大规模抓取优点：覆盖广、避免陷入深层结构、并行友好	缺点：可能抓取较多低质量页面
深度优先 (DFS)特点：静态网站、专题爬取优点：可快速深入特定分支缺点：易陷入循环、覆盖效率低
最佳优先特点：聚焦爬虫、垂直搜索引擎优点：高效获取高价值页面缺点：计算复杂、可能遗漏相关页面

流程图完善

（a）处：判断文件是否为图像文件（可通过文件扩展名判断是否为常见图像格式，如.png、.jpg 等）。
（b）处：判断图像文件是否为.png 格式。（tif根据题目要求改）
（c）处：判断图像文件分辨率是否为 x x y（根据题目要求改）。

问题及改善（此题用自己的话回答不能直接照抄下面的）

问题：严格按格式和分辨率筛，会丢有用图像致数据不足，且仅靠扩展名判格式易误筛。

改进：使用Opencv库进行图像处理

for filename in os.listdir(input_folder):# 遍历输入文件夹中的所有文件if filename.lower().endwith('png'):image_path = os.path.join(input_folder, filename)with Image.open(image_path) as img:if img.size != (100, 100)continueoutput_path = os.path.join(output_folder, filename)img.save(output_path)
print('处理完毕')

5.18-AI分析师

强化练习1 神经网络训练案例（SG） #划分数据集 #以下5行需要背 folder datasets.ImageFolder(rootC:/水果种类智能训练/水果图片, transformtrans_compose) n len(folder) n1 int(n*0.8) n2 n-n1 train, test random_split(folder, [n1, n2]) #训…...

编程日记 2025/6/30 23:43:11

腾讯云运营开发 golang一面

redis为什么单线程会快每秒10w吞吐量 io多路复用一个文件描述符整体拷贝；调用epoll_ctl 单个传递内核遍历文件描述符判断是否有事件发送；回调函数列表维护修改有事件发送的socket为可读或可写，返回整个文件描述符；返回链…...

编程日记 2025/6/28 23:34:18

spark数据压缩

### Spark 数据压缩方法及其实现在大数据处理框架中，数据压缩是一个重要的环节，它不仅能够减少磁盘占用空间，还能降低网络传输成本。然而，在分布式计算环境中（如 Spark），选择合适的压缩编解码…...

编程日记 2025/6/29 0:37:44

synchronized关键字详解

synchronized关键字详解 1. 基本概念与使用方式作用：确保多个线程在访问共享资源时的互斥性，防止数据不一致。使用方式：修饰实例方法：锁对象为当前实例（this）。public synchronized void instanceMethod() {// 同步代码 }修饰静态方法：锁对象为类的Class对象。public…...

编程日记 2025/6/30 23:13:57

React useState 的同步/异步行为及设计原理解析

一、useState 的同步/异步行为异步更新（默认行为） • 场景：在 React 合成事件（如 onClick）或生命周期钩子（如 useEffect）中调用 useState 的更新函数时，React 会将这些更新放入队列…...

编程日记 2025/6/29 1:10:46

《社交应用动态表情：RN与Flutter实战解码》

React Native依托于JavaScript和React，为动态表情的实现开辟了一条独特的道路。其核心优势在于对原生模块的便捷调用，这为动态表情的展示和交互提供了强大支持。在社交应用中，当用户点击发送动态表情时，React Native能够迅速调用相…...

编程日记 2025/6/28 22:55:51

【Oracle专栏】清理告警日志、监听日志

Oracle相关文档，希望互相学习，共同进步风123456789～-CSDN博客 1.背景今天在导入数据库时，发现之前可以导入，今天导入时居然报空间不足，于是检查是哪里占用空间比较大。检查回收站、归档日志，发现没有。然后检查告警日志、监听日志，发现果然占用空间比较大，于是进行…...

编程日记 2025/6/29 1:24:23

Ubuntu24.04编译ORB_SLAM的一系列报错解决

Ubuntu24.04编译ORB_SLAM的一系列报错解决 decay_t报错报错信息：error: ‘decay_t’ is not a member of ‘std’；did you mean ‘decay’ 将CMakeLists.txt中第17行的c标准修改为c14即可： 修改前： CHECK_CXX_COMPILER_FLAG…...

编程日记 2025/6/28 22:55:47

Python × CARLA：如何在自动驾驶仿真世界里打造智能驾驶系统？

Python CARLA：如何在自动驾驶仿真世界里打造智能驾驶系统？在人工智能与自动驾驶的浪潮中，真实世界的测试成本高昂，而自动驾驶仿真已成为开发者训练和测试 AI 驾驶算法的关键技术手段。其中，CARLA（Car Learning to Act）作为开源自动驾驶仿真平台，凭借其真实感强、高度…...

编程日记 2025/6/29 1:30:33

如何迁移 WSL 卸载 Ubuntu WSL

迁移 WSL 到其他盘区假设您已经安装了 WSL 上的 Ubuntu 22.04 LTS，并且想要将其从 C 盘迁移到 D 盘。查看 WSL 状态： 打开 PowerShell 或 CMD，运行以下命令查看当前安装的 WSL 发行版： wsl -l -v假设输出显示 Ubuntu-22.04 正在…...

编程日记 2025/6/28 22:55:49

【Linux】多路转接epoll、Linux高并发I/O多路复用

编程日记 2025/6/29 0:56:21

【taro3 + vue3 + webpack4】在微信小程序中的请求封装及使用

前言正在写一个以taro3 vue3 webpack4为基础框架的微信小程序，之前一直没有记咋写的，现在总结记录一下。uniapp vite 的后面出。文章目录前言一、创建环境配置文件二、配置 Taro 环境变量三、创建请求封装四、如何上传到微信小程序体验版1.第二…...

编程日记 2025/6/28 23:44:46

在python中使用Json提取数据

文章目录一、前言二、格式转换2.1 dumps函数2.2 loads函数2.3 错误处理三、JSONPath模块四、JMESPath模块4.1 search函数4.2 基本语法4.2.1 基本查询4.2.2 投影4.2.3 管道4.2.4 多选4.2.5 函数一、前言官方文档：https://docs.python.org/zh-cn/3.12/library/js…...

编程日记 2025/6/29 1:09:06

备战菊厂笔试4

目录 39.组合总和回溯（单向剪枝） 3102.最小化曼哈顿距离利用曼哈顿距离的性质 3163.压缩字符串3 46.全排列 53.最大子数组和 39.组合总和 39. 组合总和注意： set不能添加list得加元组元组不可修改 sorted后得赋值 class So…...

编程日记 2025/6/29 1:28:57

白盒测试——基本路径测试法

一、实验名称白盒测试——基本路径测试法二、实验目的白盒测试是结构测试，是依据被测程序的内部逻辑结构设计测试用例，驱动被测程序运行完成的测试，通过本实验希望： 1、掌握基本路径测试法的基本概念，用具体的例子…...

编程日记 2025/6/28 22:55:54

FFmpeg 与 C++ 构建音视频处理全链路实战（五）—— 音视频编码与封装

在前面的系列文章中，我们已经层层深入，从 MP4 与 FLV 封装格式的剖析，到 H.264 和 AAC 原理的探索，再到 FFmpeg 的解封装、解码，以及音频重采样、视频尺寸变化的代码实现，为音视频处理打下了坚实基础。而今…...

编程日记 2025/6/29 0:19:13

NNLM神经网络语言模型总结

一开始还以为很复杂，总结一下就是： NNLM 将某个单词前 n−1 个词各自转为 embedding，拼接成一个 (n−1)⋅d 维的向量，再通过隐藏层输出层 softmax，预测下一个词的概率分布可以发现，这个2003年提出的模…...

编程日记 2025/6/28 23:31:10

开源Heygem本地跑AI数字人视频教程

图文教程： 点击跳转视频教程资料包下载点击下载：...

编程日记 2025/6/28 23:24:27

软件验收测试有哪些流程?与确认测试又有什么不同?

随着信息技术的飞速发展，软件的应用覆盖面越来越广泛，软件验收测试的重要性也愈发显著。软件验收测试是指在软件开发完成后，对软件进行的最后一次全面审核，以确保软件的功能和性能满足用户需求。这一阶段通常由客户进行&#xff0…...

编程日记 2025/6/29 0:11:50

一文了解 HTTP Content-Type：从基础到实战

一文了解 HTTP Content-Type：从基础到实战在 Web 开发中，HTTP 请求头中的 Content-Type 是一个看似简单却至关重要的概念。它决定了浏览器和服务器如何解析和处理传输的数据。本文将带你全面掌握 Content-Type 的核心知识，涵盖常见类型、应…...

编程日记 2025/6/29 1:00:18

数学建模初等模型应用

一、目的掌握初等模型的建模方法,对简单的初等模型能借助Matlab工具软件进行辅助建模、求解和检验。二、实验内容与设计思想（设计思路、主要代码分析） 1、预测鱼的质量 （1）设计思路：使用线性回归模型预测鱼的质量…...

编程日记 2025/6/29 0:36:37

map和unordered_map

一、map和unordered_map的基本概念——它们是啥？ map：是一种“有序的关联容器”，存放一组“键值对”，内部元素按键排序（默认是升序），类似一本按字母排序的字典。 unordered_map：也是…...

编程日记 2025/6/29 0:31:36

【vue】脚手架

一、使用脚手架创建项目 1.打开编辑器终端 2.输入命令vue create 项目名 3.选择自定义配置，选以下几种常用的配置项（空格选中或删除） 二、常规操作进入项目：cd 项目名返回：cd .. 运行项目:npm run serve 停止项目:ct…...

编程日记 2025/6/29 0:26:13

PaddleNLP框架训练模型：使用SwanLab教程

PaddleNLP 是一款基于飞桨深度学习框架的大语言模型(LLM)开发套件，支持在多种硬件上进行高效的大模型训练、无损压缩以及高性能推理。PaddleNLP 具备简单易用和性能极致的特点，致力于助力开发者实现高效的大模型产业级应用。你可以使用PaddleNLP快速进行…...

编程日记 2025/6/28 23:47:27

#include<stdio.h> #include<stdlib.h> #define TRUE 1 #define FASLE 0//定义宏标识判断是否成功 typedef struct Node {int data;struct Node* next; }Node;Node* InitList() {Node* list (Node*)malloc(sizeof(Node));list->data 0;//创建节点保存datalist…...

编程日记 2025/6/28 23:54:00

数据结构：ArrayList简单实现与常见操作实例详解

目录 1.顺序表概念 2.自己实现 1.准备工作接口 MyArrayList的定义 2.具体接口实现添加判满扩容查找获得pos位置的值和更改pos位置的值判空删除得到数组长度清空数组打印 3.ArrayList 1.简介 2.使用 1.ArrayList的构造无参构造有参构造&a…...

编程日记 2025/6/28 22:55:48

C++之fmt库介绍和使用(1)

C之fmt库介绍与使用(1) Author: Once Day Date: 2025年5月12日一位热衷于Linux学习和开发的菜鸟，试图谱写一场冒险之旅，也许终点只是一场白日梦… 漫漫长路，有人对你微笑过嘛… 全系列文章可参考专栏: 源码分析_Once-Day的博客-CSDN博客 …...

编程日记 2025/6/29 1:32:47

嵌入式自学第二十一天（5.14）

gdb逻辑调试器: gcc 调试，发行版 gcc -g 调试版本，体积大，有源码。一般调试：gdb a.out b n.c:行数 ：设置断点，运行到这个位置，程序暂停。（可以直接加行数） r运行 n执行下…...

编程日记 2025/6/29 0:45:38

位与运算

只有当除数是 2 的幂次方（如 2、4、8、16...）时，取模运算才可以转换为位运算。 int b 19;int a1 b % 16; // 传统取模运算int a2 b & 15; // 位运算替代取模printf("b %d\n", b);printf("b %% 8 %d\n",…...

编程日记 2025/6/29 0:01:17

SparkSQL操作Mysql（2）

创建数据库和表我们去创建一个新的数据库，数据表，并插入一条数据。参考代码如下： -- 创建数据库 CREATE DATABASE spark; -- 使用数据库 USE spark; -- 创建表 create table person(id int, name char(20), age int); -- 插入示例数…...

编程日记 2025/6/29 0:05:18

Linux 中 open 函数的本质与细节全解析

一、open简介在 Linux 下，一切皆文件。而对文件的读写，离不开文件的“打开”操作。虽然 C 语言标准库提供了方便的 fopen，但更底层、更强大的是系统调用 open，掌握它能让你对文件系统控制更细致，在系统编程、驱动开发…...

编程日记 2025/6/28 23:12:46

对抗系统熵增：从被动救火到主动防御的稳定性实战

📕我是廖志伟，一名Java开发工程师、《Java项目实战——深入理解大型互联网企业通用技术》（基础篇）、（进阶篇）、（架构篇）清华大学出版社签约作家、Java领域优质创作者、CSDN博客专家、…...

编程日记 2025/6/29 0:35:25

高速系统设计实例设计分析二

6.6 仿真约束的生成和实施进行到这一步，我们已经完成了对实例进行仿真的所有条件的设置，包括对板子的设计要求分析和预布局处理。虽然从技术上讲，我们可以开始进行仿真分析并生成设计的约束，但是根据作者的工作经验，…...

编程日记 2025/6/29 1:28:22

AUTOSAR图解==＞AUTOSAR_SWS_V2XGeoNetworking

AUTOSAR V2X GeoNetworking 模块分析车联网地理网络协议解析与实现目录 1. 概述2. 模块架构分析 2.1 AUTOSAR V2X GeoNetworking 在BSW架构中的位置 2.1.1 架构层次说明2.1.2 模块间关系 2.2 V2X GeoNetworking 模块内部组件结构 2.2.1 核心组件2.2.2 接口说明 3. 消息处理…...

编程日记 2025/6/29 9:00:17

在 Rocky Linux 上手动安装 zsh

目录 🧩 一、准备：检查是否已经安装Zsh 🛠️ 二、从源码安装 Zsh（推荐方式） 1. 下载 Zsh 源码 2. 解压源码 3. 配置安装路径（到你的 home 目录下） 4. 编译并安装 🧪 三、测试…...

编程日记 2025/6/29 0:13:58

Vector和list

一、Vector和list的区别——从“它们是什么”到“区别在哪儿” 1. 它们是什么？ Vector：类似于一排排整齐的书架（数组），存放元素时，元素排成一条线，连续存储。可以很快通过编号（索引…...

编程日记 2025/6/28 22:56:04

人工智能外呼系统：重构智能交互的全维度进化

在数字化浪潮席卷全球的今天，人工智能外呼系统正以其颠覆性的技术革新，重新定义企业与客户的沟通范式。这一融合语音识别、自然语言处理与机器学习的智能系统，不仅实现了从 “机械应答” 到 “智慧交互” 的跨越，更在金融、医疗、…...

编程日记 2025/6/29 0:52:04

嵌入式培训之数据结构学习（三）gdb调试

一、gdb调试 （一）一般调试步骤与命令 1、gcc -g （调试版本，内含调试信息与源码；eg：gcc -g main.c linklist.c） 2、gdb a.out（调试可执行文件，eg：gdb ./a.o…...

编程日记 2025/6/28 23:40:07

元宇宙赛道新势力：成都芯谷产业园创新业务如何重构产业格局

成都芯谷产业园在元宇宙有啥新搞头？看看它的创新业务怎么改变行业！ 成都芯谷产业园在元宇宙赛道上的创新业务，核心在于系统性构建一个开放、协同、高效的元宇宙创新生态系统，以此重构产业格局。这并非简单的企业物理聚集&#xf…...

编程日记 2025/6/28 22:55:58

Java 日期解析与格式化：从标准格式到自然语言解析

使用 Java 搭配 Apache Commons Lang3 和 Natty 库，实现灵活高效的日期解析与格式化。一、背景将不同格式的日期统一成一个格式。日期格式可能有以下几种类型： 标准格式：2024-02-28、14/05/2022、2002年5月6日非英文月份缩写：…...

编程日记 2025/6/28 22:55:57

【windows server脚本每天从网络盘复制到本地】

windows server脚本每天从网络盘复制到本地调试模板 echo off :: 显示详细操作 echo echo 执行批处理文件：文件复制任务 echo :: 配置参数 set sourcePath\\network_drive\shared_folder :: 网络盘路径 set destinationPathC:\LocalBackup :: 本地保…...

编程日记 2025/6/28 23:50:52

GraphPad Prism简介、安装与工作界面

GraphPad Prism图表可视化与统计数据分析（视频教学版） - 商品搜索 - 京东 1.1 GraphPad Prism简介 GraphPad Prism 将科学绘图、综合曲线拟合（包括非线性回归）、易于理解的统计分析以及数据管理功能集于一身，帮助用…...

编程日记 2025/6/28 23:41:31

尚硅谷阳哥JVM

文章目录第01章 JVM快速入门1、什么是JVM2、主流虚拟机有哪些？3、结构图3、执行引擎Execution Engine4、本地方法接口Native Interface5、Native Method Stack6、PC寄存器(程序计数器) 第02章类加载器ClassLoader1、类的加载过程2、类加载器的作用3、类加载器分类…...

编程日记 2025/6/29 0:55:47

spark的Standalone模式介绍

Apache Spark 的 Standalone 模式是其自带的集群管理模式，无需依赖外部资源管理器（如 YARN 或 Mesos），可快速部署和运行 Spark 集群。以下是对 Standalone 模式的详细介绍： 1. 核心组件 Master 节点集群的主控制器…...

编程日记 2025/6/28 22:55:56

自营交易考试中，怎么用“黄昏之星”形态做出漂亮反转单？

在自营交易考试中，如何在复杂的市场波动中抓住关键的趋势反转点，常常决定了一笔交易的成败。尤其是在规则清晰、交易明确的交易考试中，具备对K线形态的敏感度，是不少EagleTrader交易员在晋级过程中总结出的实用经验。今天&#xf…...

编程日记 2025/6/28 22:56:02

【算法】版本号排序

对版本号数组进行排序，比如：[0.1.2.3，1.2.1.0，4.2.1.0，0.1.2.0] 核心思路将版本号拆分为数字数组，逐个比较每个子版本段。具体步骤： 拆分版本号：将每个版本字符串按 . 分割成数字数…...

编程日记 2025/6/28 23:33:51

wordcount程序

### 在 IntelliJ IDEA 中编写和运行 Spark WordCount 程序要使用 IntelliJ IDEA 编写并运行 Spark 的 WordCount 程序，需按照以下流程逐步完成环境配置、代码编写以及任务提交。 --- #### 1. **安装与配置 IntelliJ IDEA** 确保已正确安装 IntelliJ IDEA&#x…...

编程日记 2025/6/29 0:08:23

MySQL Explain 中 Type 与 Extra 字段详解

引言在数据库性能调优过程中，理解执行计划（EXPLAIN）的输出信息至关重要。MySQL 的 EXPLAIN 命令能够帮助开发者分析查询的执行路径和效率，其中 Type 和 Extra 字段提供了关键的执行细节。Type 字段表示访问类型，反映…...

编程日记 2025/6/29 0:30:26

代码随想录算法训练营第60期第三十六天打卡

大家好！今天我们就会正式进入动态规划的章节，以前我们相继学完了回溯算法，贪心算法，今天的动态规划应该是相当重要同时也是相当难的章节，那我们废话不多说直接进入我们今天的章节。第一部分动态规划理论基础那究竟…...

编程日记 2025/6/28 22:56:05

Python操作MySQL 连接加入缓存层完整方案

更多内容请见： python3案例和总结-专栏介绍和目录文章目录 1、整体架构设计2、MySQL 连接方案2.1 使用连接池 (推荐)2.2 使用 SQLAlchemy (ORM方案)3、缓存层实现方案3.1 Redis 缓存实现3.2 Memcached 缓存实现4、完整集成方案4.1 带缓存的数据库访问层4.2 使用装饰器实现缓存…...

编程日记 2025/6/28 23:15:45

强化练习1 神经网络训练案例（SG）

强化练习2 简答题

强化练习3 人工智能系统设计

强化练习4 gs程序分析

相关文章：