当前位置：首页 > news >正文

用Go语言正则，如何爬取数据

news 来源：原创 2025/7/17 1:16:06

文章精选推荐

1 JetBrains Ai assistant 编程工具让你的工作效率翻倍
2 Extra Icons：JetBrains IDE的图标增强神器
3 IDEA插件推荐-SequenceDiagram，自动生成时序图
4 BashSupport Pro 这个ides插件主要是用来干嘛的？
5 IDEA必装的插件：Spring Boot Helper的使用与功能特点
6 Ai assistant ,又是一个写代码神器
7 Cursor 设备ID修改器，你的Cursor又可以继续试用了

文章正文

Go语言结合正则表达式可以构建高效的数据爬取工具。下面我将提供几个完整的实例，涵盖不同场景下的数据爬取需求。

基础网页内容爬取

1.1 获取网页中所有链接

package mainimport ("fmt""io/ioutil""net/http""regexp"
)func main() {// 发送HTTP请求resp, err := http.Get("https://example.com")if err != nil {fmt.Println("HTTP请求失败:", err)return}defer resp.Body.Close()// 读取响应内容body, err := ioutil.ReadAll(resp.Body)if err != nil {fmt.Println("读取响应失败:", err)return}// 编译正则表达式，匹配所有a标签的href属性re := regexp.MustCompile(`<a[^>]+href=["'](.*?)["']`)matches := re.FindAllStringSubmatch(string(body), -1)// 输出所有链接fmt.Println("找到的链接:")for _, match := range matches {if len(match) > 1 {fmt.Println(match[1])}}
}

1.2 提取特定模式的文本

package mainimport ("fmt""io/ioutil""net/http""regexp"
)func main() {resp, err := http.Get("https://example.com")if err != nil {fmt.Println("HTTP请求失败:", err)return}defer resp.Body.Close()body, _ := ioutil.ReadAll(resp.Body)// 匹配所有<h1>-<h6>标签内容re := regexp.MustCompile(`<h[1-6][^>]*>(.*?)</h[1-6]>`)titles := re.FindAllStringSubmatch(string(body), -1)fmt.Println("网页标题:")for _, title := range titles {if len(title) > 1 {// 去除HTML标签cleanTitle := regexp.MustCompile(`<[^>]+>`).ReplaceAllString(title[1], "")fmt.Println(cleanTitle)}}
}

结构化数据爬取

2.1 爬取表格数据

package mainimport ("fmt""io/ioutil""net/http""regexp""strings"
)func main() {resp, err := http.Get("https://example.com/table-page")if err != nil {fmt.Println("HTTP请求失败:", err)return}defer resp.Body.Close()body, _ := ioutil.ReadAll(resp.Body)content := string(body)// 匹配整个表格tableRe := regexp.MustCompile(`<table[^>]*>(.*?)</table>`)tableMatch := tableRe.FindStringSubmatch(content)if len(tableMatch) == 0 {fmt.Println("未找到表格")return}tableContent := tableMatch[1]// 匹配表格行rowRe := regexp.MustCompile(`<tr[^>]*>(.*?)</tr>`)rows := rowRe.FindAllStringSubmatch(tableContent, -1)// 匹配单元格cellRe := regexp.MustCompile(`<t[dh][^>]*>(.*?)</t[dh]>`)fmt.Println("表格数据:")for _, row := range rows {cells := cellRe.FindAllStringSubmatch(row[1], -1)for _, cell := range cells {if len(cell) > 1 {// 清理单元格内容cleanCell := strings.TrimSpace(regexp.MustCompile(`<[^>]+>`).ReplaceAllString(cell[1], ""))fmt.Printf("%s\t", cleanCell)}}fmt.Println() // 换行}
}

2.2 爬取JSON数据中的特定字段

package mainimport ("encoding/json""fmt""io/ioutil""net/http""regexp"
)type Product struct {Name  string  `json:"name"`Price float64 `json:"price"`
}func main() {resp, err := http.Get("https://api.example.com/products")if err != nil {fmt.Println("HTTP请求失败:", err)return}defer resp.Body.Close()body, _ := ioutil.ReadAll(resp.Body)// 方法1：直接解析JSONvar products []Productif err := json.Unmarshal(body, &products); err == nil {fmt.Println("产品列表(JSON解析):")for _, p := range products {fmt.Printf("%s - $%.2f\n", p.Name, p.Price)}return}// 方法2：当JSON结构不确定时使用正则fmt.Println("\n尝试使用正则表达式提取:")// 匹配产品名称和价格re := regexp.MustCompile(`"name"\s*:\s*"([^"]+)"[^}]+"price"\s*:\s*(\d+\.?\d*)`)matches := re.FindAllStringSubmatch(string(body), -1)for _, match := range matches {if len(match) >= 3 {fmt.Printf("%s - $%s\n", match[1], match[2])}}
}

高级爬虫技巧

3.1 带并发控制的爬虫

package mainimport ("fmt""io/ioutil""net/http""regexp""sync"
)func main() {urls := []string{"https://example.com/page1","https://example.com/page2","https://example.com/page3",}var wg sync.WaitGroupsemaphore := make(chan struct{}, 3) // 并发限制为3titleRe := regexp.MustCompile(`<title[^>]*>(.*?)</title>`)for _, url := range urls {wg.Add(1)go func(u string) {defer wg.Done()semaphore <- struct{}{} // 获取信号量resp, err := http.Get(u)if err != nil {fmt.Printf("获取 %s 失败: %v\n", u, err)<-semaphorereturn}body, _ := ioutil.ReadAll(resp.Body)resp.Body.Close()title := titleRe.FindStringSubmatch(string(body))if len(title) > 1 {fmt.Printf("%s 的标题: %s\n", u, title[1])}<-semaphore // 释放信号量}(url)}wg.Wait()
}

3.2 处理分页内容

package mainimport ("fmt""io/ioutil""net/http""regexp""strconv"
)func main() {baseURL := "https://example.com/news?page="pageRe := regexp.MustCompile(`<div class="news-item">(.*?)</div>`)titleRe := regexp.MustCompile(`<h2>(.*?)</h2>`)pageNumRe := regexp.MustCompile(`page=(\d+)`)// 先获取总页数totalPages := getTotalPages(baseURL + "1")fmt.Printf("共发现 %d 页内容\n", totalPages)// 爬取每页内容for page := 1; page <= totalPages; page++ {url := baseURL + strconv.Itoa(page)fmt.Printf("\n正在爬取第 %d 页: %s\n", page, url)resp, err := http.Get(url)if err != nil {fmt.Printf("获取第 %d 页失败: %v\n", page, err)continue}body, _ := ioutil.ReadAll(resp.Body)resp.Body.Close()newsItems := pageRe.FindAllStringSubmatch(string(body), -1)for _, item := range newsItems {if len(item) > 1 {title := titleRe.FindStringSubmatch(item[1])if len(title) > 1 {fmt.Println("新闻标题:", title[1])}}}}
}func getTotalPages(url string) int {resp, err := http.Get(url)if err != nil {return 1 // 默认1页}defer resp.Body.Close()body, _ := ioutil.ReadAll(resp.Body)// 假设页面中有类似 "共 5 页" 的文字re := regexp.MustCompile(`共\s*(\d+)\s*页`)match := re.FindStringSubmatch(string(body))if len(match) > 1 {total, _ := strconv.Atoi(match[1])return total}return 1
}

实用技巧与注意事项

User-Agent设置：

client := &http.Client{}
req, _ := http.NewRequest("GET", "https://example.com", nil)
req.Header.Set("User-Agent", "Mozilla/5.0 (compatible; MyBot/1.0)")
resp, _ := client.Do(req)

处理相对链接：

import "net/url"base, _ := url.Parse("https://example.com")
rel, _ := url.Parse("/page1")
absURL := base.ResolveReference(rel).String()

正则表达式优化：

预编译正则表达式：re := regexp.MustCompile(pattern)
使用非贪婪匹配：.*?
避免过度复杂的正则表达式

错误处理增强：

resp, err := http.Get(url)
if err != nil {return fmt.Errorf("请求失败: %w", err)
}
defer func() {if err := resp.Body.Close(); err != nil {log.Printf("关闭响应体失败: %v", err)}
}()

反爬虫策略应对

设置合理的请求间隔：

import "time"func crawlWithDelay(urls []string, delay time.Duration) {for _, url := range urls {go crawlPage(url)time.Sleep(delay)}
}

使用代理IP：

proxyUrl, _ := url.Parse("http://proxy-ip:port")
client := &http.Client{Transport: &http.Transport{Proxy: http.ProxyURL(proxyUrl),},
}
resp, _ := client.Get("https://example.com")

处理Cookies：

jar, _ := cookiejar.New(nil)
client := &http.Client{Jar: jar}
// 第一次请求获取cookie
client.Get("https://example.com/login")
// 后续请求会携带cookie
client.Get("https://example.com/protected-page")

总结

以上实例展示了Go语言结合正则表达式进行数据爬取的多种方法：

基础网页爬取：获取链接、提取特定内容
结构化数据提取：表格数据、JSON数据
高级技巧：并发控制、分页处理
实用技巧：User-Agent设置、相对链接处理
反爬应对：请求间隔、代理IP、Cookies处理

在实际项目中，建议：

对于结构化数据优先使用API而非HTML解析
复杂的HTML解析考虑使用goquery等专门库
遵守网站的robots.txt规则
设置合理的爬取频率，避免对目标网站造成负担

这些实例可以作为基础模板，根据具体需求进行调整和扩展。

用Go语言正则，如何爬取数据

文章精选推荐 1 JetBrains Ai assistant 编程工具让你的工作效率翻倍 2 Extra Icons：JetBrains IDE的图标增强神器 3 IDEA插件推荐-SequenceDiagram，自动生成时序图 4 BashSupport Pro 这个ides插件主要是用来干嘛的 ？ 5 IDEA必装的插件&…...

编程日记 2025/7/17 1:16:06

Java中实现单例模式的多种方法：原理、实践与优化

单例模式（Singleton Pattern）是设计模式中最简单且最常用的模式之一，旨在确保一个类只有一个实例，并提供全局访问点。在 Java 开发中，单例模式广泛应用于配置管理、日志记录、数据库连接池和线程池等场景。然而&#x…...

编程日记 2025/7/17 0:44:55

Pikachu靶场-RCE漏洞

1. RCE漏洞原理核心问题：应用程序未对用户输入进行严格过滤，直接将输入内容拼接至系统命令、代码执行函数或反序列化过程中。常见触发场景：命令注入：用户输入被拼接到操作系统命令（如system()、exec()）。代…...

编程日记 2025/7/17 0:17:58

OpenCv高阶(七)——图像拼接

目录一、图像拼接的原理过程 1. 特征检测与描述（Feature Detection & Description） 2. 特征匹配（Feature Matching） 3. 图像配准（Image Registration） 4. 图像变换与投影（Warping&…...

编程日记 2025/7/16 8:30:29

电商系统用户需求报告（示例）

目录电商系统用户需求报告 1. 引言 1.1 目的 1.2 范围 2. 用户角色与核心需求 2.1 消费者 2.2 商家 2.3 平台管理方 3. 非功能性需求 4. 业务流程 4.1 消费者购物流程 4.2 商家入驻流程…...

编程日记 2025/7/10 9:03:05

图像挖掘课程笔记-第一章：了解机器视觉

一、什么是图像挖掘（Image Mining）？ 图像挖掘是一种从大量图像中自动提取有用信息、知识或模式的技术，它融合了图像处理、机器学习、数据库、人工智能、数据挖掘等多个领域的内容。 🧠 图像挖掘与图像处理的区别图像…...

编程日记 2025/7/16 23:45:56

Spring集合注入Bean

Spring框架中实现Bean集合注入的详细方法 1. 基础自动注入方式1.1 使用Autowired注入List1.2 使用Autowired注入Map 2. 更精细的控制方式2.1 使用Qualifier进行筛选2.2 使用自定义注解筛选 3. Java配置类方式4. 排序注入的Bean集合4.1 使用Order注解4.2 实现Ordered接口 5. 条件…...

编程日记 2025/7/17 1:10:04

实验一进程控制实验

一、实验目的 1、掌握进程的概念，理解进程和程序的区别。 2、认识和了解并发执行的实质。 3、学习使用系统调用fork()创建新的子进程方法，理解进程树的概念。 4、学习使用系统调用wait()或waitpid()实现父子进程同步。 5、学习使用getpid()和getppi…...

编程日记 2025/7/15 15:24:45

[预备知识]4. 概率基础

概率基础本章节介绍深度学习中的概率基础知识，包括基本概念、概率分布和统计推断。 1. 概率基础 1.1 基本概念随机变量：可以取不同值的变量，其值由随机试验的结果决定概率分布：描述随机变量取值的可能性分布条件概率&#x…...

编程日记 2025/7/11 5:28:47

第33周JavaSpringCloud微服务电商进阶开发

一、课程介绍 1. 定时任务课程主题 ：Spring Cloud 电商进阶开发定时任务定义 ：学习什么是定时任务。定时任务学习内容 ：定时任务实现方法、cron 表达式。定时任务实践 ：在 Spring 中使用 schedule 注解，定期关闭过期…...

编程日记 2025/6/29 12:13:40

基于cubeMX的hal库STM32实现硬件IIC通信控制OLED屏

1、通常的方法是使用软件模拟IIC来实现OLED屏的显示控制，这里用STM32单片机的硬件IIC来实现OLED屏的显示，主控芯片为STM32F103RCT6，正点原子mini开发板。 2、cubemx配置过程 （1）配置时钟和下载 （2&#x…...

编程日记 2025/7/16 15:26:23

游戏工作室为何要更换IP进行多开？工作室使用代理IP要注意什么？

在当今的游戏产业中，游戏工作室为了提升效率、规避风险或突破平台限制，常常需要通过更换IP进行多开操作。这一现象背后涉及技术、商业规则和网络安全等多重因素，而代理IP的选择与使用也成为工作室运营中的关键环节。以下是关于游戏工作室为何…...

编程日记 2025/7/13 17:20:39

postgreSQL 如何使用 dblink

SELECT b.id, flow_name, user_id,u.name FROM bpm_form_info b JOIN vrms_user u on b.user_idu.id dblink SELECT b.id, flow_name, user_id,u.name FROM bpm_form_info b – vrms_user u on b.user_idu.id JOIN dblink( ‘dbnameuser_db userpostgres passwordWs199612’,…...

编程日记 2025/7/15 1:30:29

121.在 Vue3 中使用 OpenLayers 实现去掉鼠标右键默认菜单并显示 Feature 信息

🎯 实现效果 👇 本文最终实现的效果如下： ✅ 地图初始化时绘制一个多边形； ✅ 鼠标右键点击地图任意位置； ✅ 若命中 Feature，则弹出该图形的详细信息； ✅ 移除浏览器默认的右键菜单，保留地图交互的完整控制。 💡 整个功能基于 Vue3 + OpenLayers 完成，采用 Com…...

编程日记 2025/7/8 7:57:25

复盘20250422

深度分析及个股推荐 1. 行业前景与个股逻辑梳理从提供的股票信息来看，主要涉及以下行业：合成尼古丁（电子烟）、化工、跨境支付、跨境电商、农药、食品饮料、光刻机、电子商务、造纸等。需结合行业景气度、政策支持、公司核心竞争…...

编程日记 2025/7/14 18:07:54

MQ底层原理

RabbitMQ 概述 RabbitMQ 是⼀个开源的⾼性能、可扩展、消息中间件（Message Broker），实现了 Advanced Message Queuing Protocol（AMQP）协议，可以帮助不同应⽤程序之间进⾏通信和数据交换。RabbitMQ 是由 E…...

编程日记 2025/7/16 17:06:54

30分钟编写十大排序算法完成

import java.util.ArrayList; import java.util.Arrays; import java.util.Collections; import java.util.List;//排序算法 public class test_04_22 {public static void swap(int[] nums, int i, int j){int temp nums[i];nums[i] nums[j];nums[j] temp;}//冒泡排序-稳定…...

编程日记 2025/7/15 5:19:50

为什么家电主板采用GND走线而不是整面铺GND铜

不管什么接地方式，本质是为了使得电流的回流路径最短。只要电流的回流路径最短，怎么都可以！ 如下图的芯片的一个信号的回流路径，是一个很糟糕的接地！！！！！！&a…...

编程日记 2025/7/14 14:40:28

NVIDIA 自动驾驶技术见解

前言参与 NVIDIA自动驾驶开发者实验室活动，以及解读了 NVIDIA 安全报告自动驾驶白皮书，本文是我的一些思考和见解。自动驾驶技术的目标是为了改善道理安全、减少交通堵塞，重塑更安全、高效、包容的交通生态。在这一领域，NVI…...

编程日记 2025/7/11 18:23:14

真我推出首款 AI 翻译耳机，支持 32 种语言翻译

2025 年 4 月 22 日，真我手机官微宣布，其首款 AI 翻译耳机 Buds Air7 Pro 将于 4 月 23 日 16 时正式上市1。这款耳机接入了讯飞星火认知大模型 4.0 Ultra，支持中文与 32 种语言面对面翻译，以及同声传译功能。除了 AI 翻译功能&a…...

编程日记 2025/7/15 16:17:44

如何简化复杂流程提升执行效率

简化复杂流程、提升执行效率的关键在于：聚焦核心目标、减少冗余环节、推动系统自动化、赋能一线决策、流程分级设计。其中，聚焦核心目标是流程优化的第一步。流程不该为了“流程而流程”，而应服务于业务目标。Gartner在《数字化运营报告》中…...

编程日记 2025/7/10 10:41:14

动态规划算法：完全背包类问题

前言现在我们考虑下面的问题： （1）小明有一个背包，背包容积为v，有m种物品，其中第i种物品的价值为val[i]，体积为t[i]，每样物品有无限个，请问背包内物品总价值最大为多少?…...

编程日记 2025/7/14 5:29:05

数据存储方式补码原码反码

1. 关于数据存储（补码、原码、反码） 有符号类型（Signed Types） 存储方式：现代计算机普遍采用补码（Two’s Complement） 存储有符号整数。原码：最高位为符号位（0正&…...

编程日记 2025/6/29 9:32:15

【AAudio】A2dp sink创建音频轨道的源码流程分析

一、AAudio概述 AAudio 是 Android 8.0（API 级别 26）引入的 C/C++ 原生音频 API，专为需要低延迟、高性能音频处理的应用设计，尤其适用于实时音频应用（如音频合成器、音乐制作工具、游戏音效等）。 1.1 主要特点低延迟：通过减少音频数据在内核与用户空间之间的拷贝，直…...

编程日记 2025/7/12 6:19:23

黑马点评之Feed流技术实现关注推送与滚动分页查询

Feed流关注推送也叫做Feed流，直译为“投喂”。为用户持续的提供“沉浸式体验”，通过无限下拉刷新获取新的信息。 Feed流（信息流）是一种常见的内容分发形式，通过动态更新的内容列表向用户展示个性化或实时信息。典型应…...

编程日记 2025/7/5 1:29:04

vue3+canvas裁剪框样式【前端】

目录 canvas绘制裁剪框：拖拽改变框的大小：圆圈样式：方块样式： canvas绘制裁剪框： // 绘制裁剪框 const drawCropRect (ctx: CanvasRenderingContext2D): void > {if (cropRect.value.width > 0 && crop…...

编程日记 2025/6/29 10:29:22

Python 设计模式：模板模式

1. 什么是模板模式？ 模板模式是一种行为设计模式，它定义了一个操作的算法的骨架，而将一些步骤延迟到子类中。模板模式允许子类在不改变算法结构的情况下，重新定义算法的某些特定步骤。模板模式的核心思想是将算法的固定部分提取…...

编程日记 2025/7/8 20:04:49

usb2.0的硬件知识（一）

一、USB2.0的硬件知识 1.1 USB2.0速率 USB 2.0协议支持3种速率：低速(Low Speed，1.5Mbps)、全速(Full Speed, 12Mbps)、高速(High Speed, 480Mbps)；USB Hub、USB设备，也分为低速、全速、高速三种类型。 1.2 USB2.0硬件线序组成 U…...

编程日记 2025/7/11 5:30:10

LangGraph(二)——QuickStart样例中的第二步

目录 1. 添加依赖2. 官网QuickStart——第二步：用工具增强聊天机器人2.1 Tavily Search2.2 简单测试Tavily Search2.3 添加带工具的ChatBot node2.4 添加tool node2.5 添加条件边2.6 可视化StateGraph2.7 构建聊天循环参考 1. 添加依赖 LangGraph(一)——QuickStar…...

编程日记 2025/7/16 1:41:26

机器学习第二篇多变量线性回归

数据集：世界幸福指数数据集中的变量有幸福指数排名、国家/地区、幸福指数得分、人均国内生产总值、健康预期寿命、自由权、社会支持、慷慨程度、清廉指数。我们选择GDP per Capita和Freedom，来预测幸福指数得分。文件一：linear，…...

编程日记 2025/7/15 18:05:05

【MCP Node.js SDK 全栈进阶指南】中级篇（3）：MCP高级资源设计

前言在MCP TypeScript-SDK的初级篇中，我们介绍了资源开发的基础知识，包括静态资源与动态资源的创建、资源模板设计与参数提取，以及基本的资源列表与发现机制。随着应用规模的扩大和复杂性的提高，我们需要更加高级的资源设计方案来应对各种挑战。本文作为中级篇的第三篇…...

编程日记 2025/7/9 21:38:43

PostgreSQL 常用日志

PostgreSQL 常用日志详解 PostgreSQL 提供了多种日志类型，用于监控数据库活动、排查问题和优化性能。以下是 PostgreSQL 中最常用的日志类型及其配置和使用方法。一、主要日志类型日志类型文件位置主要内容用途服务器日志postgresql-<日期>.log服务器运行…...

编程日记 2025/7/14 12:48:31

PostgreSQL认证培训推荐机构

首先来看一张2025年4月份db-engines上的数据库排行情况，前三名是雷打不动的Oracle、MySQL、Microsoft SQL Server，排名第四的就是我们今天的主角 - PostgreSQL数据库，从这张图上可以看出，PostgreSQL数据库的上升超非常明显&#x…...

编程日记 2025/7/9 18:23:28

2025年NISP一级题库试题

NISP一级考试只考50道单选题，难度不算大，话不多说，直接上硬菜！ 1、物理销毁的方式不包括（） .消磁 B.焚化炉烧毀 C.反复覆写数据 Ｄ.机器硏磨粉碎 2、信息安全应该建立贯穿信息系统的整个生命周期…...

编程日记 2025/7/8 16:25:57

pip install pymysql报错

python安装pymysql报错解决【现象】很多时候会出现安装pip包报错的问题，看过很多网上教程以及ai都是如下说法： 镜像问题pip版本问题ssh证书问题网络问题… 在遇见这些情况时，上述的各种解决方法都一一实验过但最后都是ERROR。【解决办…...

编程日记 2025/6/29 10:55:03

达梦官方管理工具 SQLark 更新--不仅支持达梦、Oracle、MySQL，还新增 PostgreSQL 数据库！

SQLark 是一款面向信创应用开发者的数据库开发和管理工具，用于快速查询、创建和管理不同类型的数据库系统，已支持达梦、Oracle、MySQL数据库；在最新的 V3.4 版本中，SQLark 新增了对 PostgreSQL 的支持，兼容 PostgreSQL…...

编程日记 2025/7/10 19:29:07

Windows 同步-互锁变量访问

互锁变量访问应用程序必须同步对多个线程共享的变量的访问。应用程序还必须确保对这些变量的作以原子方式执行（完全或根本不执行）。对正确对齐的 32 位变量的简单读取和写入是原子作。换句话说，你最终不会只更新变量的一部分;所有位都以…...

编程日记 2025/7/13 7:07:45

前端学习笔记

文章目录前端主要内容基于脚手架创建前端工程vue的基本使用axios 路由Vue-Router路由组成嵌套路由状态管理 vuex心得前端主要内容 HTML、CSS JavaScript axios Vue基础语法（router、vuex、typescript） Element UI 基于脚手架创建前端工程 node.js …...

编程日记 2025/7/16 5:31:36

2025-04-22| Docker: --privileged参数详解

在 Docker 中，--privileged 是一个运行容器时的标志，它赋予容器特权模式，大幅提升容器对宿主机资源的访问权限。以下是 --privileged 的作用和相关细节： 作用完全访问宿主机的设备： 容器可以访问宿主机的所有设备&am…...

编程日记 2025/7/16 14:47:21

Java八股深入理解Spring的AOP 面向切面编程底层保姆级教程手写例子

目录概念 AOP 术语 1. 连接点（Jointpoint）： 2. 切入点（Pointcut）： 3. 通知（Advice）： 4. 方面/切面（Aspect）： 5. 引入&#xff…...

编程日记 2025/7/7 12:16:25

macOS安全隐私最佳实践分析

1. 引言随着数字世界的不断扩展，个人和组织面临的安全与隐私威胁也日益增加。作为专业的安全合规与隐私保护研究团队，Kaamel 对 macOS 系统的安全隐私现状进行了全面分析，并提出了一系列最佳实践建议，旨在帮助用户更好地保护自己…...

编程日记 2025/7/16 10:13:19

WeakSet：JavaScript 中容易被忽视的“弱集合”

目录 WeakSet 详解基本概念创建 WeakSet WeakSet 的主要方法 WeakSet 的特性 WeakSet 的使用场景 1. 避免内存泄漏（DOM 元素管理） 2. 临时缓存系统 3. 私有属性模拟 4. 防止循环引用与其他数据结构的对比 1. WeakSet 没有实例属性 2. We…...

编程日记 2025/7/11 3:35:13

Discuz!+DeepSeek：传统论坛的智能化蜕变之路

在数字化浪潮中，社区论坛作为互联网早期的产物，面临着功能单一、用户体验滞后的发展瓶颈。虎跃办公（https://www.huyueapp.com）通过Discuz!搭建的网址导航网站，在集成DeepSeek的AI能力后，成功实现了从工具导…...

编程日记 2025/7/14 21:40:06

vs2017中，将CMake构建目录设置在项目目录下

修改CMake构建目录位置在Visual Studio 2017中，可以通过以下方法将CMake构建目录设置在项目目录下： 修改CMakeSettings.json文件‌： 在VS中生成CMakeSettings.json文件（通过点击编译平台按钮如x64-Debug或x64-Release&#xf…...

编程日记 2025/6/29 10:54:03

跨平台.NET 版本使用率排名

截至2025年4月，跨平台.NET版本的安装使用率排名主要基于版本支持状态、性能优化和企业迁移趋势。以下是结合微软官方政策、行业动态及开发者行为分析的综合结论： 1. .NET 8 (LTS) 占据主导地位支持周期：作为2023年11月发布的长期支持&…...

编程日记 2025/6/29 9:32:25

基于无障碍跳过广告-基于节点跳过广告

2025-04-22 一些广告的关闭是叉图标，获取到的信息也没什么特征，这种广告怎么跳过用autojs无障碍的节点定位ui控件位置，点击...

编程日记 2025/7/7 9:39:17

STM32提高篇: WIFI通讯

STM32提高篇: WIFI通讯一.WIFI通讯介绍1.WiFi的频段5G和2.4G2.WiFi的信道二.ESP32固件烧录及驱动1.一个AT指令响应的完成2.测试其他指令三.Wifi功能初始化和TCP通讯四.volatile关键字一.WIFI通讯介绍 Wi-Fi，又称“无线网路”，是Wi-Fi联盟的商标，一个基于IEEE 802.11标准的…...

编程日记 2025/7/16 16:55:10

资本怪兽贝莱德投资数据分析报告-独家

贝莱德概述贝莱德集团是全球最大的资产管理公司，其管理的资产规模达到了11.6万亿美元(约合人民币84.18万亿元)，这个数字相当于中国2024年GDP的62%。贝莱德通过收购李嘉诚旗下的43个全球港口资产，将在全球运营约100个港口。此外，…...

编程日记 2025/6/29 10:13:08

操作系统-用户级-内核级线程

一、先明确几个基本概念： 用户级线程（ULT）： 完全由用户空间的线程库（如 pthread 或 green threads）管理。操作系统内核对此一无所知。切换线程时，不需要进入内核，效率高&#xf…...

编程日记 2025/7/10 1:26:13

【深度学习】LoRA：低秩适应性微调技术详解

LoRA：低秩适应性微调技术详解文章目录 LoRA：低秩适应性微调技术详解1. 引言2. LoRA原理解析2.1 核心思想2.2 数学表达 3. LoRA实现细节3.1 适用层选择3.2 缩放因子3.3 初始化策略 4. 代码实现示例5. LoRA在实际应用中的优势5.1 内存效率5.2 训练速度5.3…...

编程日记 2025/7/16 19:48:47