当前位置： 首页 > news >正文

机器学习 | 细说Deep Q-Network（DQN）

news 来源：原创 2025/8/18 12:11:31

文章目录

  • 📚传统Q学习的局限性
  • 📚DQN介绍
    • 🐇核心思想
    • 🐇关键技术
    • 🐇DQN的工作流程
      • ⭐️流程分步讲解
      • 🔄 整体流程循环小结
    • 🐇DQN的局限性及改进方向

👀参考视频&博客

  • 什么是 DQN (Reinforcement Learning 强化学习)
  • DQN（Nature DQN）算法流程讲解

📝相关前文导航

  • 机器学习 | 强化学习 vs 深度学习 vs 深度强化学习 | 概念向
  • 机器学习 | 强化学习基本原理 | MDP | TD | PG | TRPO
  • 机器学习 | 通俗理解Q-Learning、Sarsa和Sarsa(λ)
  • 机器学习 | 神经网络介绍 | 概念向

📚传统Q学习的局限性

  • 在强化学习中，智能体通过试错学习策略，Q学习算法通过维护一个Q表（表格记录每个状态-动作对的预期收益）来指导决策。但Q表存在致命缺陷：
    • 维度灾难：当状态空间庞大（如游戏画面是像素级输入）时，Q表无法存储所有可能的状态-动作对。传统Q表存储的Q值数量为 ∣ S ∣ × ∣ A ∣ ∣S∣×∣A∣ ∣S∣×∣A∣，当状态空间 S S S是连续或高维时，存储和更新Q表变得不可行。
    • 泛化能力差：无法通过已有经验推理类似但未见过的情况。传统Q学习无法通过“相似状态”推理未见过的情况，例如在迷宫中，两个结构相似但位置不同的状态需要重新学习，而DQN的神经网络可通过特征提取自动泛化。
  • Q表就像一个只能靠死记硬背的学生，面对一本百科全书厚度的题目（复杂状态），它需要记住每一题的答案（动作价值），但现实是题目太多根本记不住，遇到新题时更是一筹莫展。

📚DQN介绍

🐇核心思想

  • DQN用神经网络替代Q表，实现从状态到动作价值的映射（Q函数近似）。DQN用神经网络 Q ( s , a ; θ ) Q(s,a;θ) Q(s,a;θ)替代Q表，输入状态 s s s，输出所有动作的Q值。目标是最小化预测Q值与目标Q值的均方误差（MSE）：
    • L ( θ ) = E [ ( r + γ max ⁡ a ′ Q t a r g e t ( s ′ , a ′ ) − Q ( s , a ; θ ) ) 2 ] L(\theta) = \mathbb{E}\left[ \left( r + \gamma \operatorname*{max}_{a'} Q_{\mathrm{target}}(s', a') - Q(s, a; \theta) \right)^2 \right] L(θ)=E[(r+γmaxa′​Qtarget​(s′,a′)−Q(s,a;θ))2]，其中 θ θ θ是主网络参数。
  • 优势与意义：
    • 处理高维状态：神经网络可处理图像、声音等复杂输入。
    • 样本高效：经验回放允许重复利用历史数据。
    • 稳定训练：目标网络缓解了「追逐移动目标」的问题。
  • 🌟 DQN就像一个「会总结经验的老司机」：
    • 它把每次开车经历（经验）记录到笔记本（经验池）中，随机翻阅不同路况（随机采样），避免只记住最近一次事故（打破相关性）。
    • 同时，它有一个「驾驶教科书」（目标网络），每隔一段时间更新一次，而不是每天改交规（稳定学习目标），最终练就了稳定驾驶技术。

🐇关键技术

  • 经验回放（Experience Replay）
    • 原理：智能体将每一步的经验（状态、动作、奖励、下一状态）存储在一个经验池中。 训练时，从经验池中随机抽取一批历史经验（而非按顺序使用），打破数据间的相关性，避免模型陷入局部最优（如连续相似状态导致梯度更新方向偏差）。
    • 🌟经验回放就像一个厨师做菜：
      • 传统Q学习是「边买菜边做菜」，食材（经验）按顺序处理，可能重复用同一种食材，导致菜品（模型）味道单一。
      • DQN的厨师会先把各种食材（不同时间、不同状态的经验）存放到冰箱（经验池），每次随机取出不同食材混合烹饪（随机采样），最终菜品更均衡稳定。
  • 目标网络（Target Network）
    • 原理 ：使用两个结构相同的神经网络，主网络（Main Network）负责选择动作和实时更新参数。目标网络（Target Network）用于计算TD目标（Q目标值），参数定期从主网络同步。 目标网络的参数更新频率远低于主网络（如每1000步同步一次）。
    • 🌟目标网络就像一个「参考答案库」：
      • 如果学生（主网络）每次做题时，答案（目标值）都根据自己当前的知识随时变化，会导致学习混乱（如今天说1+1=2，明天说1+1=3）。
      • DQN的解决方案是：定期从老师（目标网络）那里获取一份固定答案（冻结参数），学生在一段时间内基于这份答案学习，避免自我干扰。

🐇DQN的工作流程

⭐️流程分步讲解

---

  1. 当前状态（S） ：就像司机看到的路况（如红灯、行人、车道线），输入到Q网络中，网络会给出每个动作的“驾驶评分”（Q值）。
  2. 动作选择（A） ——ε-greedy策略：
    • ε概率：Q-Netwiork，选评分最高的动作（如绿灯直行）。
    • 1-ε概率：随机选动作（如突然左转，探索未知操作）。
    • 初始新手爱乱试，随着训练降低，老司机更信任经验。
  3. 与环境互动
    • 执行动作后，环境反馈奖励（R）和新状态（S’）。
    • 奖励像交规打分（安全驾驶+1分，闯红灯-10分）。
    • 新状态是下一步的路况（如变绿灯、出现障碍物）。
  4. 经验存储（Experience Replay）
    • 将这次经历（S, A, R, S’）存入经验池（D），类似司机的行车记录仪。
    • 池子容量有限，新经验会覆盖旧数据（保留近期和多样化的驾驶片段）。
  5. 训练Q网络
    • 随机抽取一批经验：避免“只记得最近事故”，综合不同场景学习。
    • 计算目标Q值（y）： y = R + γ ⋅ max ⁡ a ′ Q target ( S ′ , a ′ ) y = R + \gamma \cdot \max_{a'} Q_{\text{target}}(S', a') y=R+γ⋅maxa′​Qtarget​(S′,a′)
      • γ（折扣因子）：像司机的远见（0.9表示重视未来奖励，0.1则短视）。
      • 目标网络（Target Q-Network）：提供稳定的参考Q值（类似驾校教材，定期更新，避免答案总变）。
    • 计算损失（Loss）：KaTeX parse error: Expected 'EOF', got '}' at position 5: Loss}̲ = \frac{1}{N} …，相当于对比“司机预测的驾驶评分”和“实际应得的评分”，误差越大，调整越迫切。
    • 梯度下降更新主网络：
      • 通过反向传播计算梯度（分析错误来源），用优化器（如Adam）调整主网络参数，减少预测误差。
      • 类似学生通过错题本修正知识漏洞，下次遇到类似路况时评分更准。
  6. 更新参数（硬更新）
    • 每隔一段时间，将主网络参数（ ω ω ω）复制给目标网络（ ω T ω_T ωT​），就像教练根据学员进步修订教材。
    • 训练目标是让主网络的预测Q值接近目标Q值（减少预测误差）。

🔄 整体流程循环小结

  1. 交互：观察状态 → 选择动作 → 获得反馈（R, S’）。
  2. 存储：记录经验（S, A, R, S’）到池子。
  3. 学习：随机抽经验 → 计算目标值（y） → 计算损失 → 梯度下降更新主网络。
  4. 同步：定期同步目标网络参数。

🐇DQN的局限性及改进方向

  • 局限性
    • 过高估计（Overestimation）：因 max 操作导致Q值被系统性高估，影响策略稳定性（Double DQN通过解耦动作选择与评估解决此问题）。
    • 灾难性遗忘（Catastrophic Forgetting）：神经网络在更新后可能遗忘早期经验（可通过持续经验回放缓解）。
  • 改进算法
    算法核心改进效果
    Double DQN使用主网络选择动作，目标网络评估值减少Q值高估计
    Dueling DQN分离状态价值与动作优势函数提升策略评估效率
    Noisy DQN在网络参数中引入噪声替代ε-greedy，实现自适应探索

相关文章：

机器学习 | 细说Deep Q-Network（DQN）

文章目录 📚传统Q学习的局限性📚DQN介绍🐇核心思想🐇关键技术🐇DQN的工作流程⭐️流程分步讲解🔄 整体流程循环小结 🐇DQN的局限性及改进方向 👀参考视频&博客 什么是 DQN (Rein…...

编程日记 2025/8/18 12:11:31

【SpringBoot+Vue自学笔记】003 SpringBoot Controll

跟着这位老师学习的：https://www.bilibili.com/video/BV1nV4y1s7ZN?vd_sourceaf46ae3e8740f44ad87ced5536fc1a45 这段话的意思其实是：Spring Boot 简化了传统 Web 项目的搭建流程，让你少折腾配置，直接开搞业务逻辑。 &#x1f52…...

编程日记 2025/8/17 20:37:40

Sentinel源码—4.FlowSlot实现流控的原理一

大纲 1.FlowSlot根据流控规则对请求进行限流 2.FlowSlot实现流控规则的快速失败效果的原理 3.FlowSlot实现流控规则中排队等待效果的原理 4.FlowSlot实现流控规则中Warm Up效果的原理 1.FlowSlot根据流控规则对请求进行限流 (1)流控规则FlowRule的配置Demo (2)注册流控监…...

编程日记 2025/8/17 21:41:14

跟康师傅学Java-基础语法

跟康师傅学Java-基础SE 一、Java语言概述 1. 基本概念 什么是Java？干什么的？ 前端是服务员，java做后台的，服务器，好比餐馆的厨师！ Java之父：詹姆斯.高斯林(James Gosling) 软件：一系列按照特定顺序组织的计算机数据和指令的集合。分为系统软件和应用软件。 程序…...

编程日记 2025/8/17 20:04:43

Java语言实现递归调用算法

1. 递归调用原理 递归是一种编程技巧，其中函数直接或间接地调用自身。递归的核心思想是将一个复杂问题分解为更小的子问题，直到问题变得足够简单可以直接解决。递归通常包含两个部分： 1. 基础情况（Base Case）&#xff…...

编程日记 2025/8/17 20:39:43

【数据结构_10】二叉树（1）

一、树 树是一种非线性的数据结构，是由n个有限节点组成一个具有层次关系的集合。树的每个节点能够延伸出多个子节点，但每个子节点只能由一个父节点。 树形结构中，子树之间不能有交集，否则就不是树形结构。 二、树的表示形式 1…...

编程日记 2025/8/17 20:52:09

c++：智能指针

1.智能指针使用场景与优势 void Func() { int* array1 new int[10]; int* array2 new int[10]; try { int len, time; cin >> len >> time; cout << Divide(len, time) << endl; } catch (...) { cout << "delete []" << arr…...

编程日记 2025/8/17 18:17:28

RISC-V简介

RISC-V简介 1. RISC-V RISC-V&#xff08;发音为“riskfive”&#xff09;是一个基于精简指令集&#xff08;RISC&#xff09;原则的全新开源指令集架构&#xff08;ISA&#xff09;。其中的字母“V”包含两层意思&#xff0c;一是这是Berkeley从RISCI开始设计的第五代指令集…...

编程日记 2025/8/17 19:52:44

Google Test 与 Google Mock：C++ 测试与模拟的完美结合

Google Test 与 Google Mock&#xff1a;C 测试与模拟的完美结合 摘要 本文深入解析 Google Test&#xff08;GTest&#xff09;和 Google Mock&#xff08;GMock&#xff09;的核心功能与使用方法&#xff0c;探讨两者在 C 项目中的联合应用及集成策略。通过详细的功能介绍、…...

编程日记 2025/8/17 20:37:28

c语言数据结构----------二叉排序树

#include <stdio.h> #include <malloc.h>//定义二叉排序树 typedef struct BSTnode {int key; //节点值int keyNull; //便于地址传递struct BSTnode *lchild;struct BSTnode *rchild; } BSTnode;//往二叉排序树插入结点 int BSTInsert(BSTnode *T, int k) {if (…...

编程日记 2025/8/17 21:04:33

Sysstat学习

Sysstat&#xff08;System Statistics&#xff09;是一个功能强大的开源工具集&#xff0c;用于监控 Linux 系统的性能和资源使用情况&#xff0c;特别适用于 Ubuntu 系统。它包含多个工具&#xff0c;如 sar、iostat、mpstat 和 pidstat&#xff0c;帮助系统管理员实时或历史…...

编程日记 2025/8/17 21:04:22

智能体开发范式革命：Cangjie Magic的颠覆性创新与行业重塑

开篇：一场静悄悄的技术革命 2025年春季，人工智能领域发生了一场意义深远却鲜为人知的变革。仓颉社区推出的Cangjie Magic智能体开发平台，正以润物细无声的方式重塑着AI应用的构建范式。这并非简单的工具迭代，而是一次从底层逻辑到顶层设计的全面革新。本文将带领读者深入探…...

编程日记 2025/8/17 20:18:05

k8s 下 java 服务出现 OOM 后获取 dump 文件

文章目录 背景解决第 1 步：通过 Dockerfile 挂载 NFS 盘第 2 步：修改 dump 路径为 NFS 盘路径第 3 步：OOM dump 验证参考背景 😂 背景：项目部署在RainBond（k8s）环境下，容器出现 OOM 异常后，k8s 会自动进行滚动更新。 恰恰因为滚动更新，会导致原来的容器被删除。这…...

编程日记 2025/8/17 1:47:24

16位海明码解码电路设计教程

## 1. 海明码基本原理 ### 1.1 什么是海明码 海明码(Hamming Code)是一种能够检测并纠正单比特错误的纠错码&#xff0c;由理查德海明(Richard Hamming)于1950年发明。它通过添加几个校验位(奇偶校验位)到原始数据中&#xff0c;使得数据在传输过程中发生单比特错误时能够被检测…...

编程日记 2025/8/17 20:51:15

九、数据库day01--认识

文章目录 一、认识数据库1.数据库分类关系型数据库核⼼要素示例 2. SQL 语⾔3. MySQL 数据库介绍4. 数据库连接⼯具 Navicat连接数据库操作步骤 总结 提示&#xff1a;以下是本篇文章正文内容&#xff0c;下面案例可供参考 一、认识数据库 说明: 数据库是专⻔⽤来存储数据的软…...

编程日记 2025/8/17 19:57:27

2.深入剖析 Rust+Axum 类型安全路由系统

摘要 详细解读 RustAxum 路由系统的关键设计原理&#xff0c;涵盖基于 Rust 类型系统的路由匹配机制、动态路径参数与正则表达式验证以及嵌套路由与模块化组织等多种特性。 一、引言 在现代 Web 开发中&#xff0c;路由系统是构建 Web 应用的核心组件之一&#xff0c;它负责…...

编程日记 2025/8/17 19:53:17

深度学习 从入门到精通 day_02

1. 自动微分 自动微分模块torch.autograd负责自动计算张量操作的梯度&#xff0c;具有自动求导功能。自动微分模块是构成神经网络训练的必要模块&#xff0c;可以实现网络权重参数的更新&#xff0c;使得反向传播算法的实现变得简单而高效。 1.1 基础概念 1. 张量 &#xff1a…...

编程日记 2025/8/17 20:59:16

Selenium 实现自动化分页处理与信息提取

Selenium 实现自动化分页处理与信息提取 在 Web 自动化测试或数据抓取场景中&#xff0c;分页处理是一个常见的需求。通过 Selenium&#xff0c;我们可以实现对多页面内容的自动遍历&#xff0c;并从中提取所需的信息。本文将详细介绍如何利用 Selenium 进行自动化分页处理和信…...

编程日记 2025/8/17 20:54:51

【系统搭建】DPDK实现两虚拟机基于testpmd和l2fwd的收发包

testpmd与l2fwd的配合构建一个高性能的虚拟网络测试环境。l2fwd服务工作在数据链路层&#xff0c;使用MAC地址寻址&#xff0c;很多基于DPDK的策略实现可以基于l2fwd进行开发。 一、拓扑结构示意 ------------------- 虚拟化层网络 ------------------- | 虚拟机1 …...

编程日记 2025/8/17 18:17:35

简单接口工具（ApiCraft-Web）

ApiCraft-Web 项目介绍 ApiCraft-Web 是一个轻量级的 API 测试工具&#xff0c;提供了简洁直观的界面&#xff0c;帮助开发者快速测试和调试 HTTP 接口。 功能特点 支持多种 HTTP 请求方法&#xff08;GET、POST、PUT、DELETE&#xff09;可配置请求参数&#xff08;Query …...

编程日记 2025/8/17 18:17:42

C语言数据类型取值范围

32位C语言整型数据类型取值范围 64位C语言整型数据类型取值范围 C语言标准数据类型保证的取值范围 在编写程序时如果要方便移植&#xff0c;我们应该关注的是图2-11的取值范围。 摘录自《CSAPP》。...

编程日记 2025/8/17 15:57:05

【机器学习】大数据时代，模型训练慢如牛？解锁Spark MLlib与分布式策略

Langchain系列文章目录 01-玩转LangChain&#xff1a;从模型调用到Prompt模板与输出解析的完整指南 02-玩转 LangChain Memory 模块&#xff1a;四种记忆类型详解及应用场景全覆盖 03-全面掌握 LangChain&#xff1a;从核心链条构建到动态任务分配的实战指南 04-玩转 LangChai…...

编程日记 2025/8/17 20:51:59

合成数据赋能AI：从生成到闭环的全景图谱

目录 合成数据赋能AI&#xff1a;从生成到闭环的全景图谱 &#x1f3af; 项目目标 &#x1f4c4; 白皮书 / PPT 大纲结构 一、合成数据概述&#xff08;What & Why&#xff09; 二、合成数据的核心生成技术&#xff08;How&#xff09; 三、合成数据适配任务&#xf…...

编程日记 2025/8/17 20:40:16

CS144 Lab0实战记录：搭建网络编程基础

文章目录 1 实验概述与背景2 ByteStream的设计与实现2.1 字节流抽象概述2.2 实现思路2.3 核心数据结构2.4 Writer实现细节2.5 Reader实现细节 3 WebGet应用实现 1 实验概述与背景 Stanford大学的CS144课程是计算机网络领域最著名的课程之一&#xff0c;其实验设计巧妙地引导学…...

编程日记 2025/8/17 20:26:44

杂记-LeetCode中部分题思路详解与笔记-HOT100篇-其三

时光荏苒啊&#xff0c;没想到这么快就到了四月份... 这个坑好久没写了&#xff0c;现在我们重启一下。 我看了一下之前的笔记&#xff0c;似乎是停留在了链表部分且HOT100中可以说最重要的链表题之一&#xff1a;LRU缓存居然没有写&#xff0c;真是岂有此理&#xff0c;让我…...

编程日记 2025/8/17 18:17:32

【python画图】：从入门到精通绘制完美柱状图

目录 Python数据可视化&#xff1a;从入门到精通绘制完美柱状图一、基础篇&#xff1a;快速绘制柱状图1.1 使用Matplotlib基础绘制1.2 使用Pandas快速绘图 二、进阶篇&#xff1a;专业级柱状图定制2.1 多系列柱状图2.2 堆叠柱状图2.3 水平柱状图 三、专业参数速查表Matplotlib …...

编程日记 2025/8/17 21:17:00

医疗设备预测性维护的合规性挑战与标准化路径研究

摘要 本研究从医疗设备全生命周期管理视角&#xff0c;探讨预测性维护技术面临的特殊合规性挑战及其标准化解决方案。通过分析全球12个主要医疗市场的监管差异&#xff0c;提出基于ISO 23510的通用合规框架&#xff0c;并验证其在三类典型医疗设备&#xff08;生命支持类、影像…...

编程日记 2025/8/17 20:49:30

使用 XWPFDocument 生成表格时固定列宽度

一、XWPFDocument XWPFTable个性化属性 1.初始默认写法 XWPFTable table document.createTable(n, m); //在文档中创建一个n行m列的表格 table.setWidth("100%"); // 表格占页面100%宽度// 通过getRow获取行进行自定义设置 XWPFTableRow row table.getRow(0); XW…...

编程日记 2025/8/17 21:01:16

抽象的https原理简介

前言 小明和小美是一对好朋友&#xff0c;他们分隔两地&#xff0c;平时经常写信沟通&#xff0c;但是偶然被小明发现他回给小美的信好像被人拆开看过&#xff0c;甚至偷偷被篡改过。 对称加密算法 开头的通信过程比较像HTTP服务器与客户端的通信过程&#xff0c;全明文传输…...

编程日记 2025/8/17 18:17:38

Chakra UI框架中响应式断点

默认的断点&#xff1a;base是默认样式&#xff0c;不带任何媒体查询&#xff0c;适用于所有屏幕。 sm是30em&#xff08;约480px&#xff09; md是48em&#xff08;768px&#xff09; lg是62em&#xff08;992px&#xff09; xl是80em&#xff08;1280px&#xff09; 2xl是96e…...

编程日记 2025/8/17 18:18:13

【cocos creator 3.x】cocos creator2.x项目升级3.x项目改动点

1、基本改动 基本改动&#xff1a;去掉了cc.&#xff0c;改成在顶部添加导入 项目升级时候直接将cc.去掉&#xff0c;根据提示添加引用 node只保留position,scale,rotation,layer 其余属性如opacity&#xff0c;如果需要使用需要在节点手动添加UIOpacity组件 3d层和ui层分开…...

编程日记 2025/8/17 20:03:38

【android telecom 框架分析 01】【基本介绍 2】【BluetoothPhoneService为何没有源码实现】

1. 背景 我们会在很多资料上看到 BluetoothPhoneService 类&#xff0c;但是我们在实际 aosp 中确找不到具体的实现&#xff0c; 这是为何&#xff1f; 这是一个很好的问题&#xff01;虽然在车载蓝牙电话场景中我们经常提到类似 BluetoothPhoneService 的概念&#xff0c;但…...

编程日记 2025/8/17 21:38:11

Linux：进程：进程调度

进程在CPU上运行具有以下特性&#xff1a; 竞争、独⽴、并⾏、并发 竞争性:系统进程数⽬众多&#xff0c;⽽CPU资源很少甚至只有一个&#xff0c;所以进程之间是具有竞争属性的。为 了⾼效完成任务&#xff0c;更合理竞争相关资源&#xff0c;便具有了优先级 独⽴性: 为了避…...

编程日记 2025/8/17 20:56:43

2025年探秘特种设备安全管理 A 证：守护安全的关键凭证​

在现代工业与生活中&#xff0c;特种设备如锅炉、压力容器、电梯、起重机械等广泛应用&#xff0c;它们给我们带来便利的同时&#xff0c;也伴随着较高的安全风险。为了确保这些设备的安全运行&#xff0c;保障人民生命财产安全&#xff0c;特种设备安全管理显得尤为重要&#…...

编程日记 2025/8/17 21:06:48

WebSocket 实现数据实时推送原理

WebSocket 实现数据实时推送的核心机制在于其全双工通信能力和持久的连接特性。以下是其工作原理的详细步骤&#xff1a; 1. 握手阶段&#xff08;HTTP 升级协议&#xff09; 客户端发起请求&#xff1a;通过发送一个带有特殊头部的 HTTP 请求&#xff0c;请求协议升级。 GET …...

编程日记 2025/8/17 18:17:45

快速迭代收缩-阈值算法（FISTA）

文章目录 1. 数学与优化基础2. FISTA 算法的原理、推导与机制3. Matlab 实现4. FISTA 在图像处理与压缩感知中的应用4.1. 基于小波稀疏先验的图像去噪4.2 压缩感知图像重建 1. 数学与优化基础 在许多信号处理与机器学习问题中&#xff0c;我们希望获得稀疏解&#xff0c;即解向…...

编程日记 2025/8/17 20:52:52

XC6SLX100T-2FGG484I 赛灵思 XilinxFPGA Spartan-6

XC6SLX100T-2FGG484I 是Xilinx 推出的Spartan-6 LXT 系列FPGA芯片&#xff0c;采用45nm工艺设计&#xff0c;以高性价比和低功耗为核心 系列定位&#xff1a;Spartan‑6 LXT&#xff0c;中端逻辑与 DSP 加速 逻辑资源&#xff1a;101 261 个逻辑单元&#xff08;LE&#xff0…...

编程日记 2025/8/17 15:40:08

DP 32bit位宽数据扰码实现和仿真

关于DisplayPort 1.4协议中扰码用的16-bit LFSR的移位8个时钟周期后的输出表达式我们已经用迭代的方法推导过&#xff0c;那么移位32个时钟周期的输出表达式同样可以迭代32次推导出&#xff0c;或者将移位8个时钟的输出表达式迭代3次也可以得到。以下就是移位32个时钟周期的输出…...

编程日记 2025/8/17 21:29:19

Electricity Market Optimization 探索系列（V）

本文参考链接link \hspace{1.6em} 众所周知, 社会福利是指消费者剩余和生产者剩余的和&#xff0c;也等价于产品的市值减去产品的成本&#xff0c;在电力市场中也非常关注社会福利这一概念&#xff0c;基于电力商品的同质性的特点&#xff0c;我们引入反价格需求函数来形象地刻…...

编程日记 2025/8/17 18:17:44

vue3 element-plus el-time-picker控制只显示时 分，并且控制可选的开始结束时间

只显示时分 控制只显示时分 HH:mm 控制只显示时分秒 HH:mm:ss 全部代码&#xff1a; <template><el-time-pickerstyle"width: 220px !important;"v-model"timeValue"format"HH:mm"value-format"HH:mm"/> </template&…...

编程日记 2025/8/17 20:36:08

从技术本质到未来演进：全方位解读Web的过去、现在与未来

一、Web的本质定义 Web（万维网）是一种基于**超文本传输协议（HTTP）和统一资源标识符（URI）**构建的分布式信息系统。它的核心在于通过超链接将全球范围内的信息资源连接成网状结构，使任何接入互联网的设备都能访问这些资源。Web的本质特征体现在三个方面： 跨平台性：无论…...

编程日记 2025/8/17 18:17:46

C++十进制与十六进制

在C中&#xff0c;可以使用不同的方式来表示十进制和十六进制数值。下面是一个简单的示例代码&#xff0c;展示了如何在C中表示和输出十进制和十六进制数值&#xff1a; #include <iostream> #include <iomanip>int main() {int decimalValue 255; // 十进制数值…...

编程日记 2025/8/17 18:17:53

MySQL基本语法

本地登录&#xff1a;mysql -u 用户名 -p 查看数据库&#xff1a;show databeases 创建库&#xff1a;create database 名字&#xff1b; 删除库&#xff1a;drop database 名字&#xff1b; 选择库&#xff1a;use 名字&#xff1b; 创建表&#xff1a;create table 表名 在…...

编程日记 2025/8/17 20:18:39

机器学习有多少种算法？当下入门需要全部学习吗？

机器学习算法如同工具箱中的器械——种类繁多却各有专攻。面对数百种公开算法&#xff0c;新手常陷入"学不完"的焦虑。本文将拆解算法体系&#xff0c;为初学者指明高效学习路径。 一、算法森林的全景地图 机器学习算法可按四大维度分类&#xff1a; 监督学习&#…...

编程日记 2025/8/17 21:00:29

【c语言】深入理解指针2

文章目录 一、指针数组指针数组模拟二维数组 二、数组指针二维数组传参的本质 三、字符指针变量四、函数指针变量4.1. 函数指针的应用4.2 两端有趣的代码4.3. typedef关键字4.3.1 typedef 的使用4.3.2. typedef与#define对比 五、函数指针数组函数指针数组的应用 一、指针数组 …...

编程日记 2025/8/17 18:17:48

Nacos

Nacos是阿里巴巴的产品&#xff0c; 现在是SpringCloud中的一个组件。相比Eureka功能更加丰富&#xff0c;在国内受欢迎程度较高。 官网地址&#xff1a;Redirecting to: https://nacos.io/ GitHub&#xff1a; https://github.com/alibaba/nacos 1.Nacos快入门 Nacos可以直…...

编程日记 2025/8/17 21:23:14

Linux，redis群集模式，主从复制，读写分离

redis的群集模式 主从模式 &#xff08;单项复制&#xff0c;主复制到从&#xff09; 一主两从 一台主机上的一主两从 需要修改三个配置文件 主要端口不一样 redis-8001.conf redis-8002.conf redis-8003.conf 哨兵模式 分布式集群模式 redis 安装部署 1&#xff0c;下载…...

编程日记 2025/8/17 21:31:12

《手环表带保养全攻略：材质、清洁与化学品避坑指南》

系列文章目录 文章目录 系列文章目录前言一、表带材质特性与专属养护方案二、清洁剂使用红黑榜三、家庭清洁实验&#xff1a;化学反应警示录四、保养实践方法论总结 前言 手环作为现代生活的智能伴侣&#xff0c;表带材质选择丰富多样。从柔软亲肤的皮质到耐用耐磨的金属&…...

编程日记 2025/8/17 21:36:42

【Leetcode 每日一题 - 补卡】1534. 统计好三元组

问题背景 给你一个整数数组 a r r arr arr&#xff0c;以及 a 、 b 、 c a、b 、c a、b、c 三个整数。请你统计其中好三元组的数量。 如果三元组 ( a r r [ i ] , a r r [ j ] , a r r [ k ] ) (arr[i], arr[j], arr[k]) (arr[i],arr[j],arr[k]) 满足下列全部条件&#xff…...

编程日记 2025/8/17 20:49:54

医疗设备预测性维护合规架构：从法规遵循到技术实现的深度解析

在医疗行业数字化转型加速推进的当下&#xff0c;医疗设备预测性维护已成为提升设备可用性、保障医疗安全的核心技术。然而&#xff0c;该技术的有效落地必须建立在严格的合规框架之上。医疗设备直接关乎患者生命健康&#xff0c;其维护过程涉及医疗法规、数据安全、质量管控等…...

编程日记 2025/8/17 20:27:48