当前位置：首页 > news >正文

深度学习让鱼与熊掌兼得

news 来源：原创 2025/6/27 4:55:39

通常,一个大的复杂的模型的loss会低,但是拟合方面不够,小的模型在拟合方面更好,但是loss高,我们可以通过深度学习来得到一个有着低loss的小模型

我们之前学过,peacewise linear可以用常数加上一堆这个阶梯型函数得到,然后因为peacewise linear可以逼近任何function,所以理论上,用neural network可以实现任何function

所以有人说只要neuron足够多,一层network就可以了,那我们就应该通过矮胖model和高瘦model来对比,看看怎么回事

结果是这样的,这证明同样参数量的时候,深的模型会更好,也更有效率

为什么多层会带来好处?

用逻辑电路是这样子的

在做程序的时候

剪窗花

接下来解释为什么深度比宽度好

第二层是这样子的一个关系,那么第三层是什么样的关系呢

于是我们可以发现,这是dimension上的差别,neuron数量之间有极大差距,也可以这么说,实现同一个function,shallow的model更复杂,也就更容易overfitting

所以,深度学习是一个鱼与熊掌兼得的方法

深度学习让鱼与熊掌兼得

通常,一个大的复杂的模型的loss会低,但是拟合方面不够,小的模型在拟合方面更好,但是loss高,我们可以通过深度学习来得到一个有着低loss的小模型我们之前学过,peacewise linear可以用常数加上一堆这个阶梯型函数得到,然后因为peacewise linear可以逼近任何function,所以理论上…...

编程日记 2025/6/27 4:55:39

面试 Linux 运维相关问题

标题Q1Shell脚本是什么、它是必需的吗? Shell脚本是一种用于自动化执行命令行任务的脚本程序，通常运行在Unix/Linux系统的Shell环境中（如Bash）。它通过将多个命令、逻辑控制（如条件判断、循环）和系统功能整合到一个文…...

编程日记 2025/6/24 8:21:20

阿里巴巴 1688 数据接口开发指南：构建自动化商品详情采集系统

在电商行业数据驱动决策的趋势下，高效获取商品详情数据成为企业洞察市场、优化运营的关键。通过阿里巴巴 1688 数据接口构建自动化商品详情采集系统，能够快速、精准地采集海量商品信息。本文将从开发准备、接口分析、代码实现等方面，详细介绍…...

编程日记 2025/6/27 4:36:55

python的宫崎骏动漫电影网站管理系统

目录技术栈介绍具体实现截图系统设计研究方法：设计步骤设计流程核心代码部分展示研究方法详细视频演示试验方案论文大纲源码获取/详细视频演示技术栈介绍 Django-SpringBoot-php-Node.js-flask 本课题的研究方法和研究步骤基本合理，难度适中&#xf…...

编程日记 2025/6/22 12:40:16

答题pk小程序道具卡的获取与应用

道具卡是答题PK小程序中必不可少的一项增加趣味性的辅助应用，那么道具卡是如何获取与应用的呢，接下来我们来揭晓答案： 一、道具卡的获取： 签到获取：在每日签到中签到不仅可获得当日的签到奖励积分，同时连…...

编程日记 2025/6/27 4:30:52

从零开始创建一个 Next.js 项目并实现一个 TodoList 示例

Next.js 是一个基于 React 的服务端渲染框架，它提供了很多开箱即用的功能，如自动路由、API 路由、静态生成、增量静态再生等。本文将带你一步步创建一个 Next.js 项目，并实现一个简单的 TodoList 功能。效果地址 🧱 安装 Next.j…...

编程日记 2025/6/27 4:24:09

全面掌握JSR303校验：从入门到实战

一、JSR303校验简介 JSR303是Java EE 6中的一项规范，全称为"Bean Validation 1.0"，它定义了一套基于注解的JavaBean校验机制。通过简单的注解，我们可以优雅地完成参数校验工作，避免在业务代码中编写大量的校验逻辑。 …...

编程日记 2025/6/22 11:44:27

「Java EE开发指南」如何使用MyEclipse的可视化JSF编辑器设计JSP？（二）

Visual JSF Designer（可视化JSF设计器）的目标是使创建JSF应用程序的特定于组件工作更容易可视化，在本教程中，您将使用可视化设计器设计JSF登录页面。您将学习如何： 创建一个JSF项目创建一个新的JSF页面设计JSF页面该…...

编程日记 2025/6/24 23:12:54

Python 翻译词典小程序

一、概述本工具是基于Python开发的智能翻译系统，采用有道词典进行翻译，并具有本地词典缓存以及单词本功能。版本号：v1.0 (2025-05-15) 二、核心功能说明 1. 基础翻译功能即时翻译：输入英文单词自动获取中文释义词性识别&…...

编程日记 2025/6/23 22:11:42

kafka调优

以下是 Kafka 性能调优的核心策略与参数配置建议，综合生产环境和硬件层面的优化方案，覆盖生产者、消费者、Broker 三个关键组件： 一、生产者调优批量发送优化 • batch.size：增大批量消息大小（默认 16KB，建…...

编程日记 2025/6/27 4:47:31

【hadoop】sqoop案例 hive-＞mysql

将temperature.log中的气象数据导入到Hive的temperature表中， 根据气象站id分组计算每个气象站30年来的*最高*气温， 然后将统计结果导出到MySQL当中。思路： 1.在hive中创建表 2.数据导入到表中 3.计算后的结果写入另外的表 4.用sqoop导出…...

编程日记 2025/6/23 4:51:21

Git/GitLab日常使用的命令指南来了！

在 GitLab 中拉取并合并代码的常见流程是通过 Git 命令来完成的。以下是一个标准的 Git 工作流，适用于从远程仓库（如 GitLab）拉取代码、切换分支、合并更新等操作。 🌐 一、基础命令：拉取最新代码 # 拉取远程仓库的所…...

编程日记 2025/6/25 3:25:42

遗传算法求解旅行商问题分析

目录一、问题分析二、实现步骤 1）初始化种群 2）计算适应度 3）选择操作 4）交叉操作 5）变异操作三、求解结果四、总结本文通过一个经典的旅行商问题，详细阐述在实际问题中如何运用遗传算法来进…...

编程日记 2025/6/24 20:18:38

【Hadoop】伪分布式安装

【Hadoop】伪分布式安装什么是 Hadoop 伪分布式安装？ Hadoop 伪分布式安装（Pseudo-Distributed Mode） 是一种在单台机器上模拟分布式集群环境的部署方式。它是介于本地模式（Local Mode） 和完全分布式模式&#xf…...

编程日记 2025/6/27 4:52:34

微服务概述

什么是微服务微服务是一个架构方案，属于分布式架构的一种。微服务提倡将模块以独立服务的方式独立管理，整个项目依靠多个小型的服务（单独进程）同时运作来支撑，单个服务只关注自己的业务实现并且有专业的团队进行开发。服务之间使用轻量的协议进行消息传送，并且对于单个…...

编程日记 2025/6/24 19:28:55

【网工】华为配置基础篇①

目录 ■华为设备登录配置 ■VLAN与VLANIF地址配置 ■DHCP配置命令 ■ACL访问控制列表配置 ■NAT地址转换配置 ■华为设备登录配置 <AR> system-view //进入系统模式 [AR]sysname Huawei //设备命名为Huawei [Huawei] telnet server enable //开启设备telnet功…...

编程日记 2025/6/25 1:22:09

React19源码系列之 Diff算法

在之前文章中root.render执行的过程，beginWork函数是渲染过程的核心，其针对不同类型的fiber进行不同的更新处理，在FunctionComponent（函数组件）中，会针对新旧fiber进行对比处理生成新fiber。因此此次就详细…...

编程日记 2025/6/25 5:10:16

华为2024年报：鸿蒙生态正在取得历史性突破

华为于2025年03月31日发布2024年年度报告。报告显示，华为经营结果符合预期，实现全球销售收入 8,621 亿元人民币，净利润 626 亿元人民币。2024 年研发投入达到 1,797 亿元人民币，约占全年收入的 20.8%，近十年累计投入的…...

编程日记 2025/6/24 11:09:33

如何在Firefox火狐浏览器里-安装梦精灵AI提示词管理工具

第一步：进入《梦精灵跨平台AI提示词管理工具》官网梦精灵跨平台AI提示词管理助手 - 官网梦精灵是一款专为AI用户打造的跨平台提示词管理插件，支持一键收藏、快速复制、智能分类等功能，适用于即梦、豆包、Kimi、DeepSeek等多个AI平台&…...

编程日记 2025/6/27 4:29:41

【鸿蒙开发】性能优化

语言层面的优化使用明确的数据类型，避免使用模糊的数据类型，例如ESObject。使用AOT模式 AOT就是提前编译，将字节码提前编译成机器码，这样可以充分优化，从而加快执行速度。未启用AOT时，一边运行一边进…...

编程日记 2025/6/25 6:05:56

Makefile与CMake

一、Makefile 核心内容 1. Makefile 基础结构与工作原理三要素： 目标（Target）：要生成的文件或执行的操作（如可执行文件、清理操作）。依赖（Dependency）：生成目标所需的…...

编程日记 2025/6/25 7:28:18

P8803 [蓝桥杯 2022 国 B] 费用报销

P8803 [蓝桥杯 2022 国 B] 费用报销 - 洛谷题目描述小明在出差结束后返回了公司所在的城市，在填写差旅报销申请时，粗心的小明发现自己弄丢了出差过程中的票据。为了弥补小明的损失，公司同意小明用别的票据进行报销，但是公司财…...

编程日记 2025/6/26 4:40:42

11 web 自动化之 DDT 数据驱动详解

文章目录一、DDT 数据驱动介绍二、实战一、DDT 数据驱动介绍数据驱动： 现在主流的设计模式之一（以数据驱动测试） 结合 unittest 框架如何实现数据驱动？ ddt 模块实现数据驱动的意义： 通过不同的数据对同一脚本实现…...

编程日记 2025/6/27 4:50:44

15：00开始面试，15：06就出来了，问的问题有点变态。。。

从小厂出来，没想到在另一家公司又寄了。到这家公司开始上班，加班是每天必不可少的，看在钱给的比较多的份上，就不太计较了。没想到4月一纸通知，所有人不准加班，加班费不仅没有了，薪资还要降40%…...

编程日记 2025/6/27 4:27:16

深入理解浏览器渲染引擎：底层机制与性能优化实战

现代浏览器背后是一个庞大而复杂的系统工程，渲染引擎作为核心模块之一，承担着从解析 HTML/CSS 到最终绘制页面的关键职责。本文将从底层机制出发，系统梳理渲染引擎（如 Blink）工作原理、V8 与渲染流程的协作方式&#x…...

编程日记 2025/6/27 4:50:43

【LeetCode 热题 100】56. 合并区间 —— 一文弄懂排序+遍历经典解法（附Python代码）

📌 题目链接 LeetCode 56. 合并区间 📖 一、引言：区间合并，刷题路上的绊脚石？区间类问题是算法面试中常见的经典题型，尤其是“合并区间”问题，考察你对排序、区间重叠判断及边界处理的理解和编码能力。很多同学在面对这题时，容易卡在：什么时候两个区间算重叠？…...

编程日记 2025/6/22 16:47:33

使用Mathematica绘制Clifford奇异吸引子

Clifford Attractors 是一种由微分方程生成的混沌吸引子，参数a,b,c,d不同会产生不同的分形图案。这类吸引子属于迭代函数系统，通过不断迭代参数方程来生成复杂的图形。其数学基础可能与 Clifford 代数或高维函数理论相关，例如 Clifford 代数…...

编程日记 2025/6/26 2:41:52

各个历史版本mysql/tomcat/Redis/Jdk/Apache下载地址

mysql 各版本下载地址： https://downloads.mysql.com/archives/community/ **************************************************************** tomcat 各版本下载地址： https://archive.apache.org/dist/tomcat/ ********************************…...

编程日记 2025/6/25 15:14:16

全面解析机器学习与深度学习中的模型权重文件格式与应用场景

概述随着机器学习和人工智能技术的飞速发展，高效且安全地存储、共享和部署训练有素的模型的方法变得越来越重要。模型权重文件格式在这个过程中发挥着关键作用。这些格式不仅保存了模型的学习参数，还能够实现可复现性，并且便于在各种不同环…...

编程日记 2025/6/27 4:33:10

鸿蒙OSUniApp 实现的地图定位与导航功能#三方框架 #Uniapp

UniApp 实现的地图定位与导航功能随着移动互联网的发展，地图定位与导航功能已成为众多应用的标配。本文将详细介绍如何在 UniApp 框架下实现地图定位与导航功能，并探讨如何适配鸿蒙系统，助力开发者打造更加流畅的地图体验。前言最近在做一…...

编程日记 2025/6/23 22:55:27

【HarmonyOS 5】鸿蒙星闪NearLink详解

【HarmonyOS 5】鸿蒙星闪NearLink详解一、前言鸿蒙星闪NearLink Kit 是 HarmonyOS 提供的短距离通信服务，支持星闪设备间的连接、数据交互。例如，手机可作为中心设备与外围设备（如鼠标、手写笔、智能家电、车钥匙等）通过星闪进…...

编程日记 2025/6/26 23:37:01

Java并发编程面试题总结

目录线程有哪几种状态?状态如何流转? 创建线程的方式? 多线程有什么应用? 线程池的好处? 线程池的七个参数? 为什么不推荐使用jdk的Executors创建线程池? 线程池的执行流程? 任务拒绝策略有哪些，怎么选择? 线程池的核心线程数和最大线程数怎么设定…...

编程日记 2025/6/27 4:31:58

LAMP项目部署实战

一、LAMP部署前期准备 1.1 关闭防火墙 # systemctl stop firewalld # systemctl disable firewalld 1.2 关闭SELinux SELinux(Security-EnhancedLinux)是美国国家安全局（NSA）对于强制访问控制的实现，是Linux历史上最杰出的新安全子系统。 …...

编程日记 2025/6/25 13:56:04

Dify与n8n全面对比指南：AI应用开发与工作流自动化平台选择【2025最新】

Dify与n8n全面对比指南：AI应用开发与工作流自动化平台选择【2025最新】随着AI技术与自动化工具的迅速发展，开发者和企业面临着多种平台选择。Dify和n8n作为两个备受关注的自动化平台，分别专注于不同领域：Dify主要面向AI应用开发&…...

编程日记 2025/6/27 4:44:48

VBA_NZ系列工具NZ10：VBA压缩与解压工具

我的教程一共九套及VBA汉英手册一部，分为初级、中级、高级三大部分。是对VBA的系统讲解，从简单的入门，到数据库，到字典，到高级的网抓及类的应用。大家在学习的过程中可能会存在困惑，这么多知识点该如何组织…...

编程日记 2025/6/23 18:01:31

EFT不过整改思路与调试经验

EFT是如何影响EUT的： EFT试验是为了验证电气和电子设备对诸如来自切换瞬态过程(切断感性负载、继电器触点弹跳等)的各种类型瞬变骚扰的抗扰度。EFT干扰是在电路中感性负载断开时产生的，它的特点是干扰信号不是单个脉而是一连串的脉冲群。EFT 干扰可以在…...

编程日记 2025/6/27 4:55:39

2.安卓逆向2-adb指令

免责声明：内容仅供学习参考，请合法利用知识，禁止进行违法犯罪活动！ 内容参考于：图灵Python学院工具下载： 链接：https://pan.baidu.com/s/1bb8NhJc9eTuLzQr39lF55Q?pwdzy89 提取码&#xff1…...

编程日记 2025/6/24 9:58:42

VSCode CMake工作流

Foreword 之前看到CMake有这么多选项，感觉不简单，还是看下别人在这里设计了多少东西 CMake 整体来说CMake遵循这样一套结构操作-操作预设（如果有的话）-操作目标（如果有的话）比如 Configure-Configure…...

编程日记 2025/6/23 19:03:24

【上位机——WPF】App.xml和Application类简介

App.xml和Application类简介概述App.xamlApp.xaml.cs 入门代码App.xamlMainWindow.xml Application生命周期窗体的声明周期概述 xaml类型的文件包含两部分，一部分以.xaml扩展名结尾的前端代码，另一部分以.xaml.cs结尾的后端代码，通常我们也…...

编程日记 2025/6/24 23:35:17

MySQL 8.0 OCP 1Z0-908 101-110题

Q101.which two queries are examples of successful SQL injection attacks? A.SELECT id, name FROM backup_before WHERE name‘; DROP TABLE injection; --’; B. SELECT id, name FROM user WHERE id23 oR id32 OR 11; C. SELECT id, name FROM user WHERE user.id (SEL…...

编程日记 2025/6/25 20:53:57

相关文章：