当前位置： 首页 > news >正文

使用 Nginx 进行前端灰度发布的策略与实践

news 来源：原创 2025/8/15 8:41:22

1. 引言

灰度发布的概念

灰度发布，也称为金丝雀发布，是一种软件发布策略，通过向一小部分用户群体逐步推出新版本，收集反馈并监控性能，以确保新版本在大规模部署前不会出现问题。这种方法可以有效降低发布风险，提高系统的稳定性和可靠性。

使用 Nginx 实现灰度发布的优势

Nginx 是一个高性能的 HTTP 和反向代理服务器，广泛用于负载均衡、静态内容服务和反向代理。使用 Nginx 实现前端灰度发布具有以下优势：

  • 灵活的配置：Nginx 提供了丰富的配置选项，可以根据不同的条件（如用户标识、IP 地址、Cookie）进行流量分发。
  • 高性能：Nginx 的高性能特性确保了在灰度发布过程中不会对现有服务造成显著影响。
  • 易于管理：Nginx 的配置文件简洁明了，便于管理和维护。

2. 灰度发布的基本策略

基于用户的灰度发布

基于用户的灰度发布通过特定的用户标识（如用户 ID）来区分流量，将新版本只推送给特定的用户群体。

基于 IP 的灰度发布

基于 IP 的灰度发布通过用户的 IP 地址来区分流量，将新版本只推送给特定 IP 范围内的用户。

基于 Cookie 的灰度发布

基于 Cookie 的灰度发布通过设置和读取 Cookie 来区分流量，将新版本只推送给设置了特定 Cookie 的用户。

3. Nginx 配置基础

Nginx 安装与基本配置

首先，确保你已经安装了 Nginx。可以通过以下命令安装：

sudo apt-get update
sudo apt-get install nginx

基本的反向代理配置

以下是一个基本的反向代理配置示例，将请求转发到后端服务器：

server {listen 80;server_name example.com;location / {proxy_pass http://backend_server;}
}

4. 实现基于用户的灰度发布

用户标识的获取与传递

假设我们通过 URL 参数 user_id 来区分用户。

Nginx 配置示例

以下是一个基于 URL 参数 user_id 的灰度发布配置示例：

server {listen 80;server_name example.com;location / {if ($arg_user_id = "12345") {proxy_pass http://new_version;}proxy_pass http://old_version;}
}

示例说明

  • if ($arg_user_id = "12345")：检查 URL 参数 user_id 是否等于 12345。
  • proxy_pass http://new_version：如果条件满足，将请求转发到新版本服务器。
  • proxy_pass http://old_version：否则，将请求转发到旧版本服务器。

5. 实现基于 IP 的灰度发布

IP 地址的获取与匹配

假设我们希望将新版本推送给特定 IP 范围内的用户。

Nginx 配置示例

以下是一个基于 IP 地址的灰度发布配置示例：

server {listen 80;server_name example.com;location / {if ($remote_addr ~* "192\.168\.1\.[0-9]+") {proxy_pass http://new_version;}proxy_pass http://old_version;}
}

示例说明

  • if ($remote_addr ~* "192\.168\.1\.[0-9]+")：检查客户端 IP 地址是否匹配 192.168.1.x。
  • proxy_pass http://new_version：如果条件满足，将请求转发到新版本服务器。
  • proxy_pass http://old_version：否则，将请求转发到旧版本服务器。

6. 实现基于 Cookie 的灰度发布

Cookie 的设置与读取

假设我们通过设置一个名为 gray_release 的 Cookie 来区分用户。

Nginx 配置示例

以下是一个基于 Cookie 的灰度发布配置示例：

server {listen 80;server_name example.com;location / {if ($http_cookie ~* "gray_release=true") {proxy_pass http://new_version;}proxy_pass http://old_version;}
}

示例说明

  • if ($http_cookie ~* "gray_release=true")：检查请求头中的 Cookie 是否包含 gray_release=true。
  • proxy_pass http://new_version：如果条件满足，将请求转发到新版本服务器。
  • proxy_pass http://old_version：否则，将请求转发到旧版本服务器。

7. 灰度发布中的监控与日志

监控工具的选择与配置

可以使用 Prometheus 和 Grafana 来监控 Nginx 的性能和流量。

日志记录与分析

确保 Nginx 的访问日志和错误日志已启用，并定期分析日志以发现潜在问题。

http {log_format main '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_referer" ''"$http_user_agent" "$http_x_forwarded_for"';access_log /var/log/nginx/access.log main;error_log /var/log/nginx/error.log;
}

示例说明

  • log_format main：定义了一个日志格式，包含请求的详细信息。
  • access_log /var/log/nginx/access.log main：将访问日志记录到指定文件。
  • error_log /var/log/nginx/error.log：将错误日志记录到指定文件。

8. 灰度发布中的注意事项

版本兼容性检查

在灰度发布前，确保新版本与旧版本之间的兼容性，避免出现不兼容的问题。

回滚策略

制定详细的回滚策略，确保在出现问题时能够快速回滚到旧版本。

9. 案例分析

实际项目中的灰度发布案例

假设我们有一个电商网站，希望通过灰度发布来测试新版本的购物车功能。

成功与失败的经验分享

  • 成功案例：通过基于用户的灰度发布，成功收集到用户反馈，并及时修复了新版本中的几个小问题。
  • 失败案例：由于版本兼容性问题，导致部分用户无法正常使用新版本，最终不得不回滚到旧版本。

10. 总结

灰度发布是一种有效的软件发布策略，可以帮助开发者在降低风险的同时，逐步推出新版本。Nginx 提供了强大的配置功能，使得实现前端灰度发布变得简单而高效。

相关文章：

使用 Nginx 进行前端灰度发布的策略与实践

1. 引言 灰度发布的概念 灰度发布，也称为金丝雀发布，是一种软件发布策略，通过向一小部分用户群体逐步推出新版本，收集反馈并监控性能，以确保新版本在大规模部署前不会出现问题。这种方法可以有效降低发布风险&#x…...

编程日记 2025/8/15 8:41:22

有了大语言模型还需要 RAG 做什么

一、百炼平台简介 阿里云的百炼平台就像是一个超级智能的大厨房，专门为那些想要做出美味AI大餐的企业和个人厨师准备的。你不需要从头开始做每一道菜，因为这个厨房已经为你准备了很多预制食材（预训练模型），你可以根据…...

编程日记 2025/8/15 8:39:49

pytest快速入门 - 目录：半天掌握pytest

1 pytest快速入门 - 目录 本系列文章将快速的带领用户进入pytest领域，通过阅读本专栏，用户将可以熟练掌握pytest的基本用法，同时对测试前置条件的构造、后置条件的清理等有较深入的了解，特别是后置条件的执行完备度有一个认识。 …...

编程日记 2025/8/9 17:42:44

2.4 python网络编程

在当今数字化的时代，网络连接着世界的每一个角落。从简单的网页浏览到复杂的分布式系统，网络编程无处不在。Python 作为一种功能强大且易于学习的编程语言，在网络编程领域占据着重要的地位。它丰富的库和简洁的语法使得开发者能够高效地构建各…...

编程日记 2025/8/12 7:40:06

网络变压器的主要电性参数与测试方法（4）

Hqst盈盛（华强盛）电子导读：网络变压器的主要电性参数与测试方法（4）.. 今天我们继续来看看网络变压器的2个重要电性参数与它的测试方法： 1.反射损耗（Return loss&…...

编程日记 2025/8/15 8:39:50

【Springboot知识】开发属于自己的中间件健康监测HealthIndicate

文章目录 **一、技术栈****二、项目结构****三、依赖配置 (pom.xml)****四、配置文件 (application.yml)****五、自定义健康检查实现****1. Redis健康检查****2. Elasticsearch健康检查****3. Kafka健康检查****4. MySQL健康检查** **六、自定义健康检查接口 (可选)****七、测试…...

编程日记 2025/8/15 8:41:21

蓝桥杯备赛-二分-技能升级

问题描述 小蓝最近正在玩一款 RPG 游戏。他的角色一共有 NN 个可以加攻击力的技能。 其中第 ii 个技能首次升级可以提升 AiAi​ 点攻击力, 以后每次升级增加的点数 都会减少 Bi。「AiBi⌉Bi​。「Bi​Ai​​⌉ (上取整) 次之后, 再升级该技能将不会改变攻击力。 现在小蓝可以…...

编程日记 2025/8/15 8:39:48

【GPT入门】第18课 langchain介绍与API初步体验

【GPT入门】langchain第一课 langchain介绍与API初步体验 1. langchain介绍定义特点1. 模块化与灵活性2. 链式调用机制3. 数据连接能力4. 记忆管理功能5. 提示工程支持6. 可扩展性 2.langchain核心组件架构图3. 最简单的helloworld入门 1. langchain介绍 LangChain 是一个用于…...

编程日记 2025/8/15 8:39:00

Django部署Filemanagement

Pycharm搭建项目安装虚拟环境 mysqlclient对mysql的安装，配置有要求 pymsql伪装成mysqlclient，pymysql可以操纵mysql pip install pymysql操作sql5.7 mysql8.0会出现与pycharm不兼容问题，会报错，所以降到5.7 # 进入mysql 需要…...

编程日记 2025/8/15 8:39:50

Python的types库学习记录

types 库是 Python 标准库中的一部分，它提供了与 Python 对象类型相关的工具和常量，有助于在运行时处理和操作不同类型的对象。 以下是对 types 库的详细介绍： 主要用途 • 类型检查：在运行时判断对象的类型。 • 动态创建和操作…...

编程日记 2025/8/10 12:34:16

C# 表达式树详解

总目录 前言 在 C# 中，表达式树（Expression Trees）是一种强大的特性，允许开发者将代码表示为数据结构。这使得我们可以在运行时动态地创建和操作代码逻辑，广泛应用于 LINQ 查询、动态方法生成以及反射等领域。本文将深…...

编程日记 2025/8/14 5:29:04

分别用树型和UML结构展示java集合框架常见接口和类

树型结构展示java集合框架常见接口和类 Java 集合框架中的接口和子类关系可以用树形结构来展示。以下是一个简化的树形结构，展示了主要的接口和一些重要的实现类： java.util.Collection ├── java.util.List │ ├── java.util.ArrayList │ ├…...

编程日记 2025/8/12 9:30:38

蓝桥杯备赛-二分-青蛙过河

问题描述 小青蛙住在一条河边, 它想到河对岸的学校去学习。小青蛙打算经过河里 的石头跳到对岸。 河里的石头排成了一条直线, 小青蛙每次跳跃必须落在一块石头或者岸上。 不过, 每块石头有一个高度, 每次小青蛙从一块石头起跳, 这块石头的高度就 会下降 1 , 当石头的高度下降…...

编程日记 2025/8/10 11:08:54

uniapp+微信小程序+最简单局部下拉刷新实现

直接上代码 <scroll-view style"height: 27vh;" :scroll-top"scrollTop" scroll-y"true"scrolltolower"onScrollToLower1" lower-threshold"50"refresher-enabled"true" refresherrefresh"onRefresherR…...

编程日记 2025/8/11 14:41:41

Spring Boot 3.x 中 @NotNull 与 @NonNull 的深度解析

在 Java 开发领域&#xff0c;尤其是在 Spring Boot 生态系统中&#xff0c;空指针异常&#xff08;NPEs&#xff09;始终是一个顽固的挑战。这些运行时错误可能导致应用程序崩溃、数据不一致以及糟糕的用户体验。为了应对这一问题&#xff0c;Java 社区开发了各种空安全机制&a…...

编程日记 2025/8/7 12:43:21

SQLark 实战 | 如何从Excel、csv、txt等外部文件进行数据导入

数据导入导出是应用开发者在平时开发中最常用的操作之一&#xff0c;SQLark 里提供了方便的图形化界面来完成导入导出。本文先和大家分享如何从 Excel、csv、txt 等外部文件导入数据到数据库表中。 &#x1f449; 前往 SQLark 官网&#xff1a;www.sqlark.com 下载全功能免费版…...

编程日记 2025/8/12 13:38:26

MATLAB中envelope函数使用

目录 说明 示例 chirp 的解析包络 使用滤波器计算多通道信号的解析包络 录音信号的移动 RMS 包络 语音信号的峰值包络 不对称序列的包络 envelope函数的功能是提取信号的包络。 语法 [yupper,ylower] envelope(x) [yupper,ylower] envelope(x,fl,analytic) [yupper,…...

编程日记 2025/8/12 20:38:26

ES搭建详细指南+常见错误解决方法

Elasticsearch&#xff08;ES&#xff09;是一款开源的、分布式的、RESTful风格的搜索和数据分析引擎。它用于全文搜索、结构化搜索、分析等场景。以下是Elasticsearch的搭建步骤以及处理常见错误的方法。 Elasticsearch搭建步骤&#xff1a; 1.环境准备&#xff1a; 确保你的…...

编程日记 2025/8/8 5:45:57

Unity 封装一个依赖于MonoBehaviour的计时器(上) 基本功能

灵感来自下面这本书的协程部分,因此我就自己尝试写了一个 我的新书Unity3D游戏开发&#xff08;第3版&#xff09; | 雨松MOMO程序研究院 如果你不知道什么是协程:unity保姆级教程之协同程序_unity协同-CSDN博客 一句话概括:协程就是单线程的异步操作,其作用于Unity的主线程 1…...

编程日记 2025/8/12 5:10:10

PostgreSQL数据库版本支持策略

PostgreSQL数据库版本支持策略 主要版本会进行复杂的更改&#xff0c;因此无法以向后兼容的方式维护数据目录的内容。重大升级需要转储/重新加载数据库或使用pg_upgrade应用程序。我们还建议您阅读您计划升级到的主要版本的升级部分。您可以从一个主要版本升级到另一个&#xf…...

编程日记 2025/8/12 5:33:46

应用层之网络应用模型，HTTP/HTTPS协议

应用层是网络协议栈的最顶层&#xff0c;直接为应用程序提供通信服务&#xff0c;定义了不同主机间应用进程交互的规则&#xff0c;包括报文类型、语法、语义及通信时序 一、网络应用模型 1.定义及特点 模型定义核心特点典型应用场景C/S客户端向服务器发起请求&#xff0c;服…...

编程日记 2025/8/15 5:17:03

（七）Spring Boot学习——Redis使用

有部分内容是常用的&#xff0c;为了避免每次都查询数据库&#xff0c;将部分数据存入Redis。 一、 下载并安装 Redis Windows 版的 Redis 官方已不再维护&#xff0c;你可以使用 微软提供的 Redis for Windows 版本 或者 使用 WSL&#xff08;Windows Subsystem for Linux&a…...

编程日记 2025/8/8 11:33:49

11 | 给 Gin 服务器添加中间件

提示&#xff1a; 所有体系课见专栏&#xff1a;Go 项目开发极速入门实战课&#xff1b;欢迎加入 云原生 AI 实战 星球&#xff0c;12 高质量体系课、20 高质量实战项目助你在 AI 时代建立技术竞争力&#xff08;聚焦于 Go、云原生、AI Infra&#xff09;&#xff1b;本节课最终…...

编程日记 2025/8/14 9:20:19

selenium等待

通常代码执行的速度⽐页⾯渲染的速度要快，如果避免因为渲染过慢出现的⾃动化误报的问题呢？可以使⽤selenium中提供的三种等待⽅法： 1. 隐式等待（Implicit Wait） 隐式等待适用于全局，它告诉 WebDriver 在查找元素时等待一定的时间，直到元素出现。 如果超时，WebDriver 不…...

编程日记 2025/8/15 2:23:11

为什么List、Set集合无法在遍历的时候修改内部元素

以常用集合ArrayList为例&#xff0c;ArrayList 在遍历过程中无法直接修改内部元素的结构&#xff08;例如通过 remove() 或 add() 方法修改元素&#xff09;&#xff0c;是因为 遍历的过程中修改结构 可能会导致 不一致的行为、并发修改异常 或 逻辑错误。 注意&#xff1a;和…...

编程日记 2025/8/14 10:42:06

使用 Elasticsearch 构建多模式 RAG 系统：哥谭市的故事

作者&#xff1a;来自 Elastic Alex Salgado 学习如何构建一个多模态检索增强生成 (RAG) 系统&#xff0c;该系统集成文本、音频、视频和图像数据&#xff0c;以提供更丰富的、具有上下文的信息检索。 在这篇博客中&#xff0c;你将学习如何使用 Elasticsearch 构建一个多模态 …...

编程日记 2025/8/11 10:24:07

单一责任原则在Java设计模式中的深度解析

在软件开发中&#xff0c;设计模式提供了一种解决特定问题的思路。在众多的设计原则中&#xff0c;单一责任原则&#xff08;Single Responsibility Principle&#xff0c;SRP&#xff09;是一个非常重要的概念。它主要强调一个类应该只有一个责任&#xff0c;也就是说&#xf…...

编程日记 2025/8/14 10:44:41

设计模式学习记录

设计模式23种 创建型抽象工厂模式工厂模式生成器模式原型模式单例模式 结构型适配器模式桥接模式组合模式装饰模式外观模式享元模式代理模式 行为型责任链模式命令模式解释器模式迭代器模式中介者模式备忘录模式观察者模式状态模式策略模式模版方法模式访问者模式 创建型 与对…...

编程日记 2025/8/1 11:55:28

set_clock_groups

一、命令参数与工具处理逻辑 核心参数定义 参数定义工具行为工具兼容性-asynchronous完全异步时钟组&#xff0c;无任何相位或频率关系&#xff08;如独立晶振、不同时钟树&#xff09;工具完全禁用组间路径的时序分析&#xff0c;但需用户自行处理跨时钟域&#xff08;CDC&a…...

编程日记 2025/8/14 23:39:29

QT创建项目（项目模板、构建系统、选择类、构建套件）

1. 项目模版 项目类型界面技术适用场景核心依赖模块开发语言Qt Widget ApplicationC Widgets传统桌面应用&#xff08;复杂控件&#xff09;Qt WidgetsCQt Console Application无 GUI命令行工具、服务Qt CoreCQt Quick ApplicationQML/Quick现代跨平台应用&#xff08;动画/触…...

编程日记 2025/8/9 20:29:47

麒麟系统利用pycharm生成deb文件

在麒麟系统&#xff08;Kylin OS&#xff09;上使用 PyCharm 进行 Python 开发并生成 .deb 可安装软件包&#xff0c;可以按照以下步骤进行操作&#xff1a; 1. 准备工作 安装 PyCharm&#xff1a;确保已经在麒麟系统上安装了 PyCharm&#xff0c;可以使用官方提供的安装包进…...

编程日记 2025/8/6 14:55:03

超声重建，3D重建 超声三维重建，三维可视化平台 UR 3D Reconstruction

1. 超声波3D重建技术的实现方法与算法 技术概述 3D超声重建是一种基于2D超声图像生成3D体积数据的技术&#xff0c;广泛应用于医学影像领域。通过重建和可视化三维结构&#xff0c;3D超声能够显著提高诊断精度和效率&#xff0c;同时减少医生的脑力负担。本技术文档将详细阐述…...

编程日记 2025/8/11 15:10:58

Qt 信号与槽

目录 Qt信号和槽 connect函数 connect使用方法 自定义信号 与 自定义槽 Qt界面化工具自动生成的槽 自定义信号 带参数的信号和槽 信号与槽的断开 Qt信号和槽 谈到信号&#xff0c;设计3个要素 信号源&#xff1a;谁发出了信号 信号触发条件&#xff1a;哪个控件的哪个…...

编程日记 2025/8/14 6:50:10

卷积神经网络 - 卷积的变种、数学性质

本文我们来学习卷积的变种和相关的数学性质&#xff0c;为后面学习卷积神经网络做准备&#xff0c;有些概念可能不好理解&#xff0c;可以先了解其概念&#xff0c;然后慢慢理解、逐步深入。 在卷积的标准定义基础上&#xff0c;还可以引入卷积核的滑动步长和零填充来增加卷积…...

编程日记 2025/8/9 19:30:29

ubuntu 和 RV1126 交叉编译Mosqutiio-1.6.9

最近需要交叉编译mosquitto&#xff0c;遇到一些小问题记录一下。 1.众所周知使用它自带的Makefile编译的时候&#xff0c;只需要在编译前&#xff0c;指定它config.mk中的变量&#xff1a;CFLAGS头文件路径 和 LDFLAGS库文件路径就ok&#xff0c;例子如下&#xff1a; expor…...

编程日记 2025/8/11 0:50:20

从零开始学习机器人---如何高效学习机械原理

如何高效学习机械原理 1. 理解课程的核心概念2. 结合图形和模型学习3. 掌握公式和计算方法4. 理论与实践相结合5. 总结和复习6. 保持好奇心和探索精神 总结 机械原理是一门理论性和实践性都很强的课程&#xff0c;涉及到机械系统的运动、动力传递、机构设计等内容。快速学习机械…...

编程日记 2025/7/17 9:06:55

STM32 RS232通信开发全解析 | 零基础入门STM32第五十九步

主题内容教学目的/扩展视频RS232串口电路原理&#xff0c;跳线设置&#xff0c;驱动程序。与超级终端通信。了解电路原理和RS232协议。 师从洋桃电子&#xff0c;杜洋老师 &#x1f4d1;文章目录 一、RS232通信系统架构二、RS232核心原理与硬件设计2.1 电气特性对比2.2 典型电路…...

编程日记 2025/8/13 11:23:14

文献分享: 对ColBERT段落多向量的剪枝——基于学习的方法

原论文 1. 导论 & \textbf{\&} &方法 1️⃣要干啥&#xff1a;在 ColBERT \text{ColBERT} ColBERT方法中&#xff0c;限制每个段落要保留的 Token \text{Token} Token的数量&#xff0c;或者说对段落 Token \text{Token} Token进行剪枝 2️⃣怎么干&#xff1a;注…...

编程日记 2025/8/10 10:08:41

(已解决)aws 上 部署Splunk 负载均衡unhealthy

在AWS 部署Splunk 服务，instance 是后端的EC2, 我把splunk 服务起好后，发现port : 8000 是listening: #netstat -an | grep 80 tcp 0 0 127.0.0.1:8065 0.0.0.0:* LISTEN tcp 0 0 0.0.0.0:8089 0.0.0.0:* …...

编程日记 2025/8/12 7:02:06

C# 异步编程

概述 同步&#xff1a;指必须等待前一个操作完成&#xff0c;后续操作才能继续。同步操作会阻塞线程直到任务完成。 异步&#xff1a;异步操作不会阻塞线程&#xff0c;允许程序在等待某个任务完成的同时&#xff0c;继续执行其他任务。 异步编程适用场景&#xff1a; 1、从…...

编程日记 2025/8/10 3:41:52

缓存之美：Guava Cache 相比于 Caffeine 差在哪里？

大家好&#xff0c;我是 方圆。本文将结合 Guava Cache 的源码来分析它的实现原理&#xff0c;并阐述它相比于 Caffeine Cache 在性能上的劣势。为了让大家对 Guava Cache 理解起来更容易&#xff0c;我们还是在开篇介绍它的原理&#xff1a; Guava Cache 通过分段&#xff08;…...

编程日记 2025/8/14 7:49:58

Go string 字符串底层逻辑

在 Go 语言中&#xff0c;string 类型的底层结构是一个结构体&#xff0c;包含两个字段&#xff1a;一个指向字节数组的指针和该字节数组的长度。以下是其在 Go 源码中的大致定义&#xff1a;type stringStruct struct {str unsafe.Pointerlen int } str&#xff1a;这是一个指…...

编程日记 2025/8/8 4:45:57

高效集成聚水潭采购退货数据到MySQL的最佳实践

聚水潭数据集成到MySQL&#xff1a;采购退货单的高效对接方案 在企业的数据管理和分析过程中&#xff0c;数据的准确性和实时性至关重要。本文将分享一个具体的系统对接集成案例&#xff1a;如何通过轻易云数据集成平台&#xff0c;将聚水潭中的采购退货单数据高效地集成到MyS…...

编程日记 2025/8/10 14:50:35

STM32步进电机S型与T型加减速算法

目录 一、基本原理 二、常见类型 三、算法详解 四、应用场合 五、代码实现 1、main...

编程日记 2025/7/13 11:26:17

centos操作系统上传和下载百度网盘内容

探序基因 整理 进入百度网盘官网百度网盘 客户端下载 下载linux的rpm格式的安装包 在linux命令行中输入&#xff1a;rpm -ivh baidunetdisk_4.17.7_x86_64.rpm 出现报错&#xff1a; 错误&#xff1a;依赖检测失败&#xff1a; libXScrnSaver 被 baidunetdisk-4.17.7-1.x8…...

编程日记 2025/8/14 12:58:59

深入 Python 网络爬虫开发：从入门到实战

一、为什么需要爬虫&#xff1f; 在数据驱动的时代&#xff0c;网络爬虫是获取公开数据的重要工具。它可以帮助我们&#xff1a; 监控电商价格变化抓取学术文献构建数据分析样本自动化信息收集 二、基础环境搭建 1. 核心库安装 pip install requests beautifulsoup4 lxml …...

编程日记 2025/8/11 12:01:09

网络爬虫【简介】

我叫补三补四&#xff0c;很高兴见到大家&#xff0c;欢迎一起学习交流和进步 今天来讲一讲爬虫 一、网络爬虫的定义 网络爬虫&#xff08;Web Crawler&#xff09;&#xff0c;又称为网络蜘蛛、网络机器人等&#xff0c;是一种按照一定规则自动抓取互联网信息的程序或脚本。它…...

编程日记 2025/8/8 16:54:17

Linux：Ubuntu server 24.02 上搭建 ollama + dify

一、安装Ubuntu 具体的安装过程可以参见此链接&#xff1a;链接&#xff1a;Ubuntu Server 20.04详细安装教程&#xff0c;这里主要记录一下过程中遇到的问题。 安装时subnet如何填写 在Ubuntu中subnet填写255.255.255.0是错误的&#xff0c;其格式为 xx.xx.xx.xx/yy &#…...

编程日记 2025/8/12 7:51:05

【生日蛋糕——DFS剪枝优化】

题目 分析 代码 #include <bits/stdc.h> using namespace std;const int N 24; const int inf 0x3f3f3f3f;int mins[N], minv[N]; int R[N], H[N]; int n, m, ans inf;void dfs(int u, int v, int s) {if(v minv[u] > n) return;if(s mins[u] > ans) return;…...

编程日记 2025/8/13 10:51:08

RabbitMq C++客户端的使用

1.RabbitMq介绍 RabbitMQ 是一款开源的消息队列中间件&#xff0c;基于 AMQP&#xff08;高级消息队列协议&#xff09;实现&#xff0c;支持多种编程语言和平台。以下是其核心特点和介绍&#xff1a; 核心特点 多语言支持 提供 Java、Python、C#、Go、JavaScript 等语言的客…...

编程日记 2025/8/13 9:48:03