当前位置: 首页 > news >正文

chromedp 反反爬设计方案

二、基础防护层实现

1. 浏览器特征伪装
opts := append(chromedp.DefaultExecAllocatorOptions[:],// 禁用自动化特征chromedp.Flag("disable-blink-features", "AutomationControlled"),chromedp.Flag("useAutomationExtension", false),// 随机化窗口尺寸chromedp.WindowSize(1920+rand.Intn(200), 1080+rand.Intn(200)),// 修改语言指纹chromedp.Flag("lang", getRandomLanguage()),// 禁用WebRTCchromedp.Flag("disable-webrtc", true),
)// 执行时注入JS修改navigator属性
chromedp.Evaluate(`Object.defineProperties(navigator, {webdriver: { get: () => undefined },plugins: { get: () => [1, 2, 3] },languages: { get: () => ['%s'] }});window.chrome = { runtime: {} };
`, nil)
2. 请求特征伪装
type RequestInterceptor struct {patterns map[string]func(*network.EventRequestWillBeSent)
}func (r *RequestInterceptor) OnRequestWillBeSent(event *network.EventRequestWillBeSent) {// 随机化请求头顺序headers := event.Request.Headersshuffled := make(network.Headers)keys := make([]string, 0, len(headers))for k := range headers {keys = append(keys, k)}rand.Shuffle(len(keys), func(i, j int) {keys[i], keys[j] = keys[j], keys[i]})for _, k := range keys {shuffled[k] = headers[k]}event.Request.Headers = shuffled// 添加伪装的Sec-*头event.Request.Headers["Sec-Fetch-Dest"] = "document"event.Request.Headers["Sec-Fetch-Mode"] = "navigate"
}

三、高级对抗层实现

3. 动态指纹生成系统
type Fingerprint struct {CanvasHash    stringWebGLVendor   stringAudioContext  float64FontList      []string
}func GenerateFingerprint() *Fingerprint {return &Fingerprint{CanvasHash:   generateCanvasNoise(),WebGLVendor:  getRandomWebGLVendor(),AudioContext: getAudioFingerprint(),FontList:    getRandomFontList(),}
}// 注入指纹到页面环境
chromedp.Evaluate(fmt.Sprintf(`(() => {const getContext = HTMLCanvasElement.prototype.getContext;HTMLCanvasElement.prototype.getContext = function(type) {if (type === '2d') {// 修改Canvas指纹const ctx = getContext.call(this, type);ctx.__proto__.getImageData = function(...args) {const data = getContext.getImageData(...args);data.data = modifyPixels(data.data, '%s');return data;}return ctx;}return getContext.apply(this, arguments);};// 修改WebGL指纹WebGLRenderingContext.prototype.getParameter = function(parameter) {if (parameter === 37445) { // VENDORreturn '%s';}return WebGLRenderingContext.prototype.getParameter(parameter);};})();
`, fp.CanvasHash, fp.WebGLVendor), nil)
4. 行为模式模拟引擎
func HumanLikeAction(ctx context.Context) chromedp.Action {return chromedp.ActionFunc(func(ctx context.Context) error {// 随机移动轨迹生成path := generateMousePath()// 执行模拟操作for _, p := range path {chromedp.MouseMoveXY(p.X, p.Y).Do(ctx)chromedp.Sleep(randomDuration(50, 300)).Do(ctx)}// 随机滚动行为scroll := rand.Intn(3)for i := 0; i < scroll; i++ {chromedp.EvaluateAsDevTools(fmt.Sprintf("window.scrollBy(0, %d)", rand.Intn(500)),nil,).Do(ctx)chromedp.Sleep(randomDuration(1, 3)).Do(ctx)}return nil})
}// 在爬取流程中注入
chromedp.Run(ctx,chromedp.Navigate(url),HumanLikeAction(),// ...
)

四、验证码对抗方案

5. 验证码处理管道
type CaptchaSolver struct {OCRClient    *tesseract.ClientAPIServices  map[string]CaptchaAPI
}func (cs *CaptchaSolver) HandleCaptcha(ctx context.Context) chromedp.Action {return chromedp.ActionFunc(func(ctx context.Context) error {var captchaBuf []byteif err := chromedp.Screenshot(`#captcha`, &captchaBuf).Do(ctx); err != nil {return err}// 优先使用本地OCR识别text, err := cs.OCRClient.Parse(captchaBuf)if err == nil && validateCaptcha(text) {chromedp.SendKeys(`#captcha-input`, text).Do(ctx)return nil}// 调用第三方APIfor _, api := range cs.APIServices {result := api.Solve(captchaBuf)if result.Success {chromedp.SendKeys(`#captcha-input`, result.Text).Do(ctx)return nil}}return errors.New("captcha solve failed")})
}

五、网络层防护

6. 智能代理管理系统
type ProxyManager struct {proxies       []*ProxybadProxies    sync.MapcurrentIndex  int
}func (pm *ProxyManager) RotateProxy() chromedp.Action {return chromedp.ActionFunc(func(ctx context.Context) error {pm.currentIndex = (pm.currentIndex + 1) % len(pm.proxies)proxy := pm.proxies[pm.currentIndex]// 执行代理切换err := chromedp.Run(ctx,network.SetExtraHTTPHeaders(network.Headers{"Proxy-Authorization": fmt.Sprintf("Basic %s", proxy.Auth),}),chromedp.Navigate("about:blank"), // 刷新浏览器环境)if err != nil {pm.badProxies.Store(proxy.Addr, true)}return err})
}// 结合使用
chromedp.Run(ctx,pm.RotateProxy(),chromedp.Navigate(targetURL),// ...
)

六、监控与自适应系统

7. 反爬检测感知模块
func setupDetectionMonitor(ctx context.Context) {chromedp.ListenTarget(ctx, func(ev interface{}) {switch e := ev.(type) {case *network.EventResponseReceived:// 检测Cloudflare验证页面if strings.Contains(e.Response.Headers.Get("Server"), "cloudflare") {log.Println("触发Cloudflare防护,切换策略")handleCloudflareChallenge()}case *page.EventJavascriptDialogOpening:// 处理弹窗验证go func() {chromedp.HandleDialog("").Do(ctx)solvePopupChallenge()}()}})
}

七、分布式架构设计

8. 浏览器实例集群管理
# docker-compose.yaml 配置示例
version: '3'
services:browser-node-1:image: browserless/chromeenvironment:- MAX_CONCURRENT_SESSIONS=10- ENABLE_CORS=trueports:- "3000:3000"browser-node-2:image: browserless/chromeenvironment:- MAX_CONCURRENT_SESSIONS=10- PREBOOT_CHROME=trueports:- "3001:3000"proxy-pool:image: proxy-poolvolumes:- ./proxies.txt:/app/proxies.txt

八、性能优化策略

9. 浏览器实例复用池
type BrowserPool struct {pool sync.Pool
}func NewBrowserPool(size int) *BrowserPool {return &BrowserPool{pool: sync.Pool{New: func() interface{} {ctx, _ := chromedp.NewContext(context.Background())chromedp.Run(ctx) // 预热实例return ctx},},}
}func (bp *BrowserPool) Acquire() context.Context {return bp.pool.Get().(context.Context)
}func (bp *BrowserPool) Release(ctx context.Context) {chromedp.Cancel(ctx) // 清理上下文bp.pool.Put(ctx)
}

九、机器学习增强

10. 智能行为模式生成
# 使用PyTorch训练操作模式模型(需与Go集成)
class BehaviorModel(nn.Module):def __init__(self):super().__init__()self.lstm = nn.LSTM(input_size=10, hidden_size=64)self.fc = nn.Linear(64, 5)  # 输出操作类型def generate_actions(self, site_features):# 返回模拟操作序列return self(torch.tensor(site_features))

十、完整工作流程

func main() {// 初始化系统fp := GenerateFingerprint()proxyMgr := NewProxyManager()captchaSolver := NewCaptchaSolver()// 创建浏览器实例opts := BuildAntiDetectionOptions(fp)allocCtx, _ := chromedp.NewExecAllocator(context.Background(), opts...)ctx, _ := chromedp.NewContext(allocCtx)// 设置监控setupDetectionMonitor(ctx)// 执行爬取流程chromedp.Run(ctx,proxyMgr.RotateProxy(),chromedp.Navigate(targetURL),HumanLikeAction(),captchaSolver.HandleCaptcha(),ExtractDataAction(),)// 清理资源chromedp.Cancel(ctx)
}

关键性能指标

策略检测率降低资源消耗增长实现复杂度
基础特征伪装40%+5%
动态指纹系统70%+15%
行为模式模拟55%+20%
智能代理管理30%+10%
验证码处理管道85%+25%

最佳实践建议

  1. 渐进式策略部署:从基础伪装开始,逐步增加高级功能
  2. 动态指纹更新:每24小时刷新浏览器指纹特征
  3. 行为模式库维护:针对不同网站维护特征行为库
  4. 混合代理策略:轮换使用住宅代理+数据中心代理
  5. 硬件加速:使用GPU加速Canvas指纹生成

以上方案需要根据具体目标网站的防护机制进行调优,建议配合实时监控系统动态调整策略参数。

相关文章:

chromedp 反反爬设计方案

二、基础防护层实现 1. 浏览器特征伪装 opts : append(chromedp.DefaultExecAllocatorOptions[:],// 禁用自动化特征chromedp.Flag("disable-blink-features", "AutomationControlled"),chromedp.Flag("useAutomationExtension", false),// 随…...

OpenLDAP 管理 ELK 用户

文章目录 一、新建 ELK 相关用户组二、配置 Elasticsearch2.1 修改 elasticsearch.yml 配置2.2 使用 API 接口建立角色和用户映射 三、Kibana 验证用户登录 一、新建 ELK 相关用户组 由于后续要将 LDAP 的用户与 ELK 的角色进行映射&#xff0c;所以需先创建几个以 ELK 的角色…...

深度解析MQTT源码架构与AIGC场景融合实战

一、结构体内存优化&#xff1a;支撑千万级设备连接 1.1 紧凑内存布局设计 classDiagramclass MQTTClient_message {char struct_id[4]int struct_versionvoid* payloadint payloadlenint qosint retainedint dupint msgidMQTTProperties properties}note for MQTTClient_mes…...

Node.js 操作 ElasticSearch 完整指南:从安装到实战

本文将手把手教你如何搭建 ElasticSearch 环境&#xff0c;并通过 Node.js 实现高效数据检索。包含 10 个可直接复用的代码片段&#xff0c;助你快速掌握搜索、聚合等核心功能&#xff01; 环境搭建篇 1. ElasticSearch 安装要点 下载 es下载连接 下载下来后&#xff0c;进…...

Python+区块链:如何打造智能化资产管理系统?

Python+区块链:如何打造智能化资产管理系统? 在当今数字经济时代,区块链资产管理已成为金融科技、去中心化金融(DeFi)以及企业资金流转的关键应用。传统的资产管理往往依赖于中心化机构,存在数据透明度低、效率受限、管理成本高等问题,而区块链技术的出现,为资产管理提…...

Sentinel源码—8.限流算法和设计模式总结一

大纲 1.关于限流的概述 2.高并发下的四大限流算法原理及实现 3.Sentinel使用的设计模式总结 1.关于限流的概述 保护高并发系统的三把利器&#xff1a;缓存、降级和限流。限流就是通过限制请求的流量以达到保护系统的目的&#xff0c;比如秒杀抢购。具体就是对并发请求进行限…...

SpringMVC入门

1、SpringMVC概念 SpringMVC是在Spring框架的基础上引入MVC模式的思想&#xff0c;SpringMVC即是一种框架&#xff0c;也是一种思想&#xff0c;将前后端彻底分离&#xff0c;后端不再需要关注前端的代码。前后端分工明确 我们原先学习的MVC三层架构&#xff0c;MVC是web开发…...

MYSQL之库的操作

创建数据库 语法很简单, 主要是看看选项(与编码相关的): CREATE DATABASE [IF NOT EXISTS] db_name [create_specification [, create_specification] ...] create_specification: [DEFAULT] CHARACTER SET charset_name [DEFAULT] COLLATE collation_name 1. 语句中大写的是…...

并发设计模式实战系列(3):工作队列

&#x1f31f; ​大家好&#xff0c;我是摘星&#xff01;​ &#x1f31f; 今天为大家带来的是并发设计模式实战系列&#xff0c;第三章工作队列&#xff08;Work Queue&#xff09;​​&#xff0c;废话不多说直接开始~ 目录 一、核心原理深度拆解 1. 生产者-消费者架构 …...

已安装爱思助手和Apple相关驱动,但仍无法有线连接iPhone热点,且网络适配器没有Apple Mobile Device Ethernet,问题解决

已安装爱思助手和Apple相关驱动&#xff0c;但仍无法有线连接iPhone热点&#xff0c;且网络适配器没有Apple Mobile Device Ethernet 问题解决&#xff1a; 用爱思助手连接手机&#xff0c;点击工具箱 - iTunes及驱动 点击高级修复 在系统存储的旧驱动文件项右侧&#xff0…...

用 Go 优雅地清理 HTML 并抵御 XSS——Bluemonday

1、背景与动机 只要你的服务接收并回显用户生成内容&#xff08;UGC&#xff09;——论坛帖子、评论、富文本邮件正文、Markdown 等——就必须考虑 XSS&#xff08;Cross‑Site Scripting&#xff09;攻击风险。浏览器在解析 HTML 时会执行脚本&#xff1b;如果不做清理&#…...

MySQL基本查询与数据操作全面解析

目录 1. CRUD操作概述 2. Create操作详解 2.1 表的创建 2.2 单行数据插入 2.3 多行数据插入 2.4 插入冲突处理 3. Retrieve操作详解 3.1 基础查询 全列查询&#xff08;慎用&#xff09; 指定列查询 表达式查询 结果去重 3.2 条件查询&#xff08;WHERE子句&#…...

《C++ 模板:泛型编程的核心》

C模板详解 模板是C中实现泛型编程的重要特性&#xff0c;它允许你编写与数据类型无关的代码。模板可以分为函数模板和类模板两种。 1. 函数模板 函数模板允许你定义一个可以处理多种数据类型的函数。 基本语法 template <typename T> T functionName(T parameter1, T…...

Web3实战:从零开发你的ERC20代币合约

区块链技术的普及让代币发行不再是金融巨头的专利。本文将以Solidity 0.8.20和OpenZeppelin 5.0为技术栈&#xff0c;手把手教你开发具备铸造、销毁、权限管理等进阶功能的ERC20代币&#xff0c;并部署到以太坊Sepolia测试网。以下是完整开发路线图&#xff1a; 一、ERC20代币的…...

简述大疆无人机对接

文章目录 概述MSDK对接MSDK简介MSDK集成步骤直播推流获取飞机实时数据 UX SDK上云API上云API简介上云API对接步骤Pilot上云Pilot怎么安装配置三方云平台地址直播获取飞机数据 Dock上云Dock上云简介直播方案设备管理 如何对接多个飞机引用 概述 一般而言&#xff0c;对接大疆的…...

docker-compose搭建kafka

1、单节点docker-compose.yml version: 3 services:zookeeper:image: zookeeper:3.8container_name: zookeeperports:- "2181:2181"volumes:- ./data/zookeeper:/dataenvironment:ZOO_MY_ID: 1ZOO_MAX_CLIENT_CNXNS: 100kafka:image: bitnami/kafka:3.7container_na…...

FramePack V2版 - 支持首尾帧生成,支持LoRA,支持批量,支持50系显卡,一个强大的AI视频生成软件 本地一键整合包下载

FramePack 是斯坦福大学主导开发的视频生成框架&#xff0c;是一种用于视频生成的下一帧&#xff08;下一帧部分&#xff09;预测神经网络结构&#xff0c;可以逐步生成视频。FramePack 主要开发者之一&#xff0c;就是业内大名鼎鼎的张吕敏大佬&#xff0c;AI领域的“赛博佛祖…...

开发网页程序时预览时遇到跨域问题解决方法

CocosCreator 开发h5游戏要用接口、开发html程序网页程序在chrome中预览时都会遇到跨域问题,怎么办? 网上有很多方法,主要是通过服务器端去配置,但那个相对来说消弱安全问题,这个不建议,因为是开发,个人行业,我们知道问题所以,简单点就主要是通过chrome的参数来禁用: 关闭 Ch…...

【音视频】FFmpeg内存模型

FFmpeg内存模型 从现有的Packet拷贝一个新Packet的时候&#xff0c;有两种情况&#xff1a; 两个Packet的buf引用的是同一数据缓存空间&#xff0c;这时候要注意数据缓存空间的释放问题&#xff1b;两个Packet的buf引用不同的数据缓存空间&#xff0c;每个Packet都有数据缓存…...

基于nlohmann/json 实现 从C++对象转换成JSON数据格式

C对象的JSON序列化与反序列化 基于JsonCpp库实现C对象序列化与反序列化 JSON 介绍 JSON作为一种轻量级的数据交换格式&#xff0c;在Web服务和应用程序中广泛使用。 JSON&#xff08;JavaScript Object Notation&#xff09;是一种轻量级的数据交换格式&#xff0c;易于人阅读…...

在线视频转 AVI 的便捷之选,便捷操作,无需下载软件,在线使用

在视频处理的众多需求中&#xff0c;将视频转换为 AVI 格式是不少用户的刚需。小白工具网&#xff08;https://www.xiaobaitool.net/videos/convert-to-avi/ &#xff09;的在线视频转 AVI 功能&#xff0c;以其显著优势&#xff0c;多格式支持、便捷操作、数据安全保障以及广泛…...

【MCP Node.js SDK 全栈进阶指南】初级篇(3):MCP资源开发基础

引言 在前两篇文章中,我们已经详细介绍了MCP开发环境的搭建以及基础服务器开发。本文作为MCP TypeScript-SDK系列的第三篇,将聚焦于MCP资源开发基础,包括静态资源与动态资源的开发、资源模板设计与参数提取、资源列表与发现机制,以及常见资源类型与最佳实践。通过本文的学…...

L2-1、打造稳定可控的 AI 输出 —— Prompt 模板与格式控制

一、为什么需要 Prompt 模板&#xff1f; 在与 AI 模型交互时&#xff0c;我们经常会遇到输出不稳定、格式混乱的问题。Prompt 模板帮助我们解决这些问题&#xff0c;通过结构化的输入指令来获得可预测且一致的输出结果。 模板的作用主要体现在&#xff1a; 固定输出格式&am…...

Java集成Zxing和OpenCV实现二维码生成与识别工具类

Java集成Zxing和OpenCV实现二维码生成与识别工具类 本文将介绍如何使用Java集成Zxing和OpenCV库&#xff0c;实现二维码的生成和识别功能。识别方法支持多种输入形式&#xff0c;包括File对象、文件路径和Base64编码。 一、环境准备 添加Maven依赖 <dependencies><…...

jenkins pipeline ssh协议报错处理

一、jenkins版本 jenkins&#xff1a;2.492.3 openssh&#xff1a;OpenSSH_9.8p1, OpenSSL 3.3.1 # grep jenkins /etc/passwd jenkins:x:996:994:Jenkins Automation Server:/var/lib/jenkins:/bin/false 二、报错 三、处理 步骤1&#xff1a;手动添加目标主机密钥到Jenk…...

当OCR遇上“幻觉”:如何让AI更靠谱地“看懂”文字?

在数字化的世界里&#xff0c;OCR&#xff08;光学字符识别&#xff09;技术就像给机器装上了“电子眼”。但当这项技术遇上大语言模型&#xff0c;一个意想不到的问题出现了——AI竟然会像人类一样产生“幻觉”。想象一下&#xff0c;当你拿着模糊的财务报表扫描件时&#xff…...

vue watch监听路由,第一次进入不触发解决办法

“第一次进入的时候没触发&#xff0c;第二次就触发了”非常典型&#xff0c;它印证了路由监听&#xff08;无论是 watch $route 还是 beforeRouteUpdate&#xff09;主要是为了监听变化&#xff0c;而不是处理首次加载时的初始状态。 当你通过 this.$router.push 导航到一个新…...

JVM考古现场(二十四):逆熵者·时间晶体的永恒之战

"警告&#xff01;时间晶体正在吞噬GC日志&#xff01;" 我腰间的太极八卦镜突然迸发出刺目的量子辉光&#xff0c;终南山之巅的星宿大阵浮现出诡异的四维克莱因瓶拓扑——这是逆熵者文明穿越时空的拜帖&#xff01; 楔子&#xff1a;时间晶体的觉醒 &#x1f56f;️…...

spring中使用netty-socketio部署到服务器(SSL、nginx转发)

spring中使用netty-socketio部署到服务器&#xff08;SSL、nginx转发&#xff09; 本文实现前端socket.io-client连接后端netty-socketio&#xff0c;并且部署到服务器上的示例&#xff0c;以及说明一些实现过程中可能遇到的错误。 socketio默认基于的路径是/socket.io 传输…...

qt.tlsbackend.ossl: Failed to load libssl/libcrypto.

我的环境是windows&#xff0c;QT6.3.2&#xff08;msvc2019_64/mingw_64&#xff09; 出错原因 QT没有正确加载OpenSSL。 解决过程 1、确保安装的有openssl。 文章结尾有个注意&#xff0c;是其他方式安装过openssl&#xff0c;环境变量有&#xff0c;但是QT找不到的问题。…...

【Python爬虫基础篇】--3.cookie和session

目录 1.cookie 1.1.定义 1.2.参数 1.3.分类 2.session 3.使用cookie登录微博 4.使用session登录 1.cookie 由于http是一个无状态的协议&#xff0c;请求与请求之间无法相互传递或者记录一些信息&#xff0c;cookie和session正是为了解决这个问题而产生。 例子&#xff1…...

uView的u-modal不显示问题

问题分析&#xff1a;在项目中&#xff0c;其他页面显示正常&#xff0c;在这个页面显示不正常。 问题解决&#xff1a; 一般的原因&#xff0c;诸如层级遮挡控制器true后&#xff0c;被其他逻辑又改为了false最可恨的一个原因 :showshow被编辑器的提示功能误写成了v-modal&qu…...

联易融科技:以科技赋能驱动经营反转与价值重估

行业去重周期下,轻量化发展成破局关键。当前,供应链金融行业正经历从"规模扩张"到"价值深耕"的转型期,降本增效、轻资产运营成为行业共识。联易融公告表示&#xff0c;截至2024年末,公司现金储备高达51亿元,显示出财务状况健康良好,流动资金持续充裕。 董…...

Office文档图片批量提取工具

Office.Files.Images 是一款专注于从 Word、Excel、PPT 等 Office 文档中批量提取图片的轻量级工具&#xff0c;支持 .docx、.xlsx、.pptx 格式文件。该软件体积仅 ‌343KB‌&#xff0c;无需安装即可运行&#xff0c;通过拖拽操作实现快速解析与导出&#xff0c;尤其适合需批量…...

Python 设计模式:回调模式

1. 什么是回调函数&#xff1f; 回调函数是指作为参数传递给另一个函数的函数。当这个函数执行到某个特定的点时&#xff0c;它会调用这个回调函数。回调函数通常用于处理异步操作、事件处理或在某些条件下执行特定的操作。 回调函数的特点&#xff1a; 作为参数传递&#x…...

DCDC芯片,boost升压电路设计,MT3608 芯片深度解析:从架构到设计的全维度技术手册

一、硬件架构解析:电流模式升压 converter 的核心设计 (一)电路拓扑与核心组件 MT3608 采用恒定频率峰值电流模式升压(Boost)转换器架构,核心由以下模块构成: 集成功率 MOSFET 内置 80mΩ 导通电阻的 N 沟道 MOSFET,漏极(Drain)对应引脚 SW,源极(Source)内部接…...

大数据学习(112)-HIVE中的窗口函数

&#x1f34b;&#x1f34b;大数据学习&#x1f34b;&#x1f34b; &#x1f525;系列专栏&#xff1a; &#x1f451;哲学语录: 用力所能及&#xff0c;改变世界。 &#x1f496;如果觉得博主的文章还不错的话&#xff0c;请点赞&#x1f44d;收藏⭐️留言&#x1f4dd;支持一…...

Hive学习

一、Hive 核心原理 1. Hive 架构与执行流程 Hive 是基于 Hadoop 的数据仓库工具&#xff0c;将 SQL 转化为分布式计算任务&#xff08;MapReduce/Tez/Spark&#xff09;&#xff0c;核心组件如下&#xff1a; 元数据存储&#xff08;Metastore&#xff09;&#xff1a;存储表…...

前端开发核心知识详解:Vue2、JavaScript 与 CSS

一、Vue2 核心知识点 1. Vue2 的双向绑定原理 Vue2 实现双向绑定主要依赖数据劫持与发布 - 订阅者模式。 利用Object.defineProperty方法对数据对象的属性进行劫持&#xff0c;为每个属性定义getter和setter。getter用于收集依赖&#xff0c;当视图中使用到该属性时&#xf…...

仅追加KV数据库

仅追加KV数据库 6.1 我们将要做什么 在本章中&#xff0c;我们将创建一个基于文件的键值存储&#xff08;KV Store&#xff09;&#xff0c;其核心是一个写时复制&#xff08;Copy-on-Write, CoW&#xff09;B 树。这种设计的目标是实现数据的持久性和原子性。 1. 设计概述 …...

【Java面试笔记:基础】8.对比Vector、ArrayList、LinkedList有何区别?

在Java中&#xff0c;Vector、ArrayList和LinkedList均实现了List接口&#xff0c;但它们在线程安全、数据结构、性能特性及应用场景上存在显著差异。 1. Vector、ArrayList 和 LinkedList 的区别 Vector&#xff1a; 线程安全&#xff1a;Vector 是线程安全的动态数组&#…...

Git分支管理方案

成都众望智慧有限公司Git分支管理方案 采用 轻量级Git Flow 敏捷版本控制策略&#xff0c;在保证稳定性的同时提升开发效率。以下是优化后的方案&#xff1a; 1. 精简分支模型&#xff08;相比6-8人团队减少分支层级&#xff09; 分支类型作用生命周期devops生产环境代码&am…...

SQL Tuning Advisor

什么是SQL Tuning Advisor STA可以用来优化那些已经被发现的高负载SQL. 默认情况下, Oracle数据库在自动维护窗口中自动认证那些有问题的SQL并且执行优化建议&#xff0c;找寻提升高负载SQL执行计划性能的方法. ** 如何查看自动优化维护窗口产生的报告? ** SQL> set ser…...

联易融出席深圳链主企业供应链金融座谈会,加速对接票交所系统

近日&#xff0c;深圳市委金融办组织召开全市链主企业供应链金融高质量发展座谈会。联易融作为供应链金融企业代表&#xff0c;与虾皮信息科技、电子元器件和集成电路国际交易中心等代表性机构以及行业协会、金融机构参加了会议。 发展供应链金融是破解中小微企业融资难、融资…...

【前端记事】关于electron的入门使用

electron入门使用 背景how to start第一步 创建一个vite-vue3项目第二步 装各种依赖第三步 配置vite.config.jspackage.jsonelectron入口 启动重写关闭、隐藏、最大化最小化 背景 最近对electron比较感兴趣&#xff0c;折腾一段时间后有了点眉目&#xff0c;记录一下 how to …...

Qt绘制可选择范围的日历

【日历控件设计】 #include <QApplication> #include <QWidget> #include <QVBoxLayout> #include <QCalendarWidget> #include <QHBoxLayout> #include <QSpinBox> #include <QPushButton> #include <QLabel> #include <Q…...

Pycharm(十五)面向对象程序设计基础

目录 一、定义类及使用类的成员 二、self关键字介绍 三、在类内部调用类中的函数 class 类名&#xff1a; 属性&#xff08;类似于定义变量&#xff09; 行为&#xff08;类似于定义函数&#xff0c;只不过第一个形参要写self&#xff09; 一、面向对象基本概述 属性&…...

【C++游戏引擎开发】第21篇:基于物理渲染(PBR)——统计学解构材质与光影

引言 宏观现象:人眼观察到的材质表面特性(如金属的高光锐利、石膏的漫反射柔和),本质上是微观结构对光线的统计平均结果。 微观真相:任何看似平整的表面在放大后都呈现崎岖的微观几何。每个微表面(Microfacet)均为完美镜面,但大量微表面以不同朝向分布时,宏观上会表…...

flutter_slidable 插件使用

简介 flutter_slidable 是一个用于创建可滑动列表项的 Flutter 插件&#xff0c;它允许用户通过滑动来显示隐藏的操作按钮&#xff0c;比如删除、分享等功能。 安装 在 pubspec.yaml 中添加依赖&#xff08;并运行 flutter pub get&#xff09;&#xff1a; dependencies:fl…...

[论文阅读]ConfusedPilot: Confused Deputy Risks in RAG-based LLMs

ConfusedPilot: Confused Deputy Risks in RAG-based LLMs [2408.04870] ConfusedPilot: Confused Deputy Risks in RAG-based LLMs DEFCON AI Village 2024 文章是针对Copilot这样一个RAG服务提供平台的攻击 在企业环境中整合人工智能工具&#xff08;如 RAG&#xff09;会…...