当前位置：首页 > news >正文

尚硅谷爬虫note009

news 来源：原创 2025/9/17 16:26:17

一、jsonpath

1.安装

pip install jsonpath

2.使用

只能解析本地文件

.json文件

{"store": {"book": [{"category": "reference","author": "Nigel Rees","title": "Sayings of the Century","price": 8.95},{"category": "fiction","author": "Evelyn Waugh","title": "Sword of Honour","price": 12.99},{"category": "fiction","author": "Herman Melville","title": "Moby Dick","isbn": "0-553-21311-3","price": 8.99},{"category": "fiction","author": "J. R. R. Tolkien","title": "The Lord of the Rings","isbn": "0-395-19395-8","price": 22.99}],"bicycle": {"color": "red","price": 19.95}},"expensive": 10
}

.py文件

# _*_ coding : utf-8 _*_
# @Time : 2025/2/19 12:34
# @Author : 20250206-里奥
# @File : demo09_jsonpath_淘票票
# @Project : PythonPro17-21#导入
import json
import jsonpath#到文件
obj = json.load(open('test.json','r',encoding = 'utf-8'))
print(obj)#书店所有书的作者
author_list = jsonpath.jsonpath(obj,'$.store.book[*].author')
print(author_list)#所有的作者
author_list1 = jsonpath.jsonpath(obj,'$..author')
print(author_list1)#store下的所有元素
tag_list = jsonpath.jsonpath(obj,'$.store.*')
print(tag_list)# store里面所有东西的价格
price_list = jsonpath.jsonpath(obj,'$.store..price')
print(price_list)#第3本书
book_third = jsonpath.jsonpath(obj,'$..book[2]')
print(book_third)# 最后一本书
book_last = jsonpath.jsonpath(obj,'$..book[(@.length - 1)]')
print(book_last)# 前2本书
book_firstAndSecond = jsonpath.jsonpath(obj,'$..book[0,1]')
print(book_firstAndSecond)
print("\n")
book_firstAndSecondNew = jsonpath.jsonpath(obj,"$..book[:2]")
print(book_firstAndSecondNew)# 过滤出所有包含isbn的书
# 条件过滤： 需要在（）前加？
book_list3 = jsonpath.jsonpath(obj,"$..book[?(@.isbn)]")
print(book_list3)
#超过十块钱的书
book_list4 = jsonpath.jsonpath(obj,"$..book[?(@.price > 10)]")
print(book_list4)# CTRL + alt + L ————》排版生成的.json文件

xpath和jsonpath对比：

jsonpath解析淘票票-城市地址

# _*_ coding : utf-8 _*_
# @Time : 2025/2/19 13:26
# @Author : 20250206-里奥
# @File : demo08_jsonpath_解析淘票票
# @Project : PythonPro17-21import urllib.requesturl = 'https://dianying.taobao.com/cityAction.json?activityId&_ksTS=1739942948773_108&jsoncallback=jsonp109&action=cityAction&n_s=new&event_submit_doGetAllRegion=true'headers = {#请求头中，以“：”符号开头的注释掉。
# ':authority':'dianying.taobao.com',
# ':method':'GET',
# ':path':'/cityAction.json?activityId&_ksTS=1739942948773_108&jsoncallback=jsonp109&action=cityAction&n_s=new&event_submit_doGetAllRegion=true',
# ':scheme':'https',
'accept':'text/javascript, application/javascript, application/ecmascript, application/x-ecmascript, */*; q=0.01',
#默认不支持utf-8的编码格式。   'gzip, deflate, br, zstd'
# 'accept-encoding':'gzip, deflate, br, zstd',
'accept-language':'zh-CN,zh;q=0.9',
'bx-v':'2.5.28',
'cookie':'t=3f22f9c912700c231e2e9e22079d2cec; cookie2=19434e4c86fbda6d54c07ee336bc2027; v=0; _tb_token_=763b7139648b9; cna=CVo8IB2qjWwCAW8CsA6MaAcB; xlly_s=1; isg=BFdXeyfL_BuZhHiX9b7tGjF05suhnCv-ej4MFKmE9SaN2HYasWwNT3T2OnhGMAN2',
'priority':'u=1, i',
'referer':'https://dianying.taobao.com/',
'sec-ch-ua':'"Not(A:Brand";v="99", "Google Chrome";v="133", "Chromium";v="133"',
'sec-ch-ua-mobile':'?0',
'sec-ch-ua-platform':'"Windows"',
'sec-fetch-dest':'empty',
'sec-fetch-mode':'cors',
'sec-fetch-site':'same-origin',
'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/133.0.0.0 Safari/537.36',
'x-requested-with':'XMLHttpRequest',
}#请求对象定制
request = urllib.request.Request(url = url,headers=headers)#模拟浏览器向服务器发送请求
response = urllib.request.urlopen(request)#返回响应内容
content = response.read().decode('utf-8')# 解决jsonpath.用split切割
#[1]表示取第2个元素——》被切割的左边第一个位置的元素没了
#[0]表示取第1个元素————》被切割的右边元素没了
#split( '(' )、split( ')' )分别表示：切割“（”符号左边的数据，和切割“）”符号右边的数据
content = content.split('(')[1].split(')')[0]#打印
print(content)with open('淘票票.json','w',encoding='utf-8') as fp:fp.write(content)# 只要生成文件里的"regionName": "阿拉尔"...，其余的不要
import json
import jsonpath# 加载文件
obj = json.load(open('淘票票.json','r',encoding='utf-8'))city_list = jsonpath.jsonpath(obj,'$..regionName')
print(city_list)#在线
#json.cn--->json在线解析---》赋值打印的运行结果--->
# 粘贴到json在线解析---》删除“jsonxx（” 以及结束的 “）...”   原因：他们不是json字符串中的内容
# ---》

二、BeautifulSopu

简称bs4

功能

解析和提取数据

缺点：

没有lxml效率高

优点：

接口人性化，使用方便

1. 安装

pip install bs4

2. 使用

解析本地文件

解析服务器响应文件

.HTML文件

<!DOCTYPE html>
<html lang="en">
<head><meta charset="UTF-8"><title>Title</title>
</head>
<body>
<div><ul><li id="l1">zs</li><li id="l2">ls</li><li>ww</li><a href="" id="" class="a1">25219</a><span>hhhaa</span></ul></div><ul><li>吃</li><li>喝</li><l>睡</l></ul><a href="" title="a2">百度</a><div id="d1"><span>hhhee</span></div><p id="p1" class="p1">wawww</p>
</body>
</html>

.py文件

# _*_ coding : utf-8 _*_
# @Time : 2025/2/19 16:05
# @Author : 20250206-里奥
# @File : demo10_bs4的基本使用
# @Project : PythonPro17-21#导入
from bs4 import BeautifulSoup# 通过解析本地文件学习bs4的基础语法
# 加载本地文件
# 默认打开的文件，的编码格式是gbk，需要指定编码格式
soup = BeautifulSoup(open('bs4的基本使用.html',encoding='utf-8'),'lxml')
print(soup)#根据标签名查找节点
#找到的是第一个符合条件的数据
print(soup.a)
#获取标签的属性和属性值
print(soup.a.attrs)#bs4的一些函数
#1）find()
#2）find_all()
#3）select()# find()
# 返回第一个符号条件的数据
print(soup.find('a'))
# 根据title的值找到对应的标签对象
print(soup.find('a',title = "a2"))
# 根据class的值找到对应的标签对象
#class是关键字，不能使用。可以加个_————》class_，表示既能代表class，又不是class
print(soup.find('a',class_ = 'a1'))#find_all（）
# 返回所有a标签组成的列表
print(soup.find_all('a'))
#如果想获取多个标签数据，那么在find_all的参数中需要添加列表数据
print(soup.find_all(['a','span']))
#获取所有li标签
print(soup.find_all('li'))
# 获取部分li标签.limit的作用：查找前几个li标签
print(soup.find_all('li',limit=2))#select【推荐】，5个用法
#通过标签获取节点对象，返回的是多个数据的一个列表
print(soup.select('a'))
#类选择器。可以通过”.“符号代表class
print(soup.select('.a1'))
#id.
print(soup.select('#l1'))
# 属性选择器,获取具有id属性的li标签
print(soup.select('li[id]'))
# 查找id为l2的li标签
print(soup.select('li[id = "l2"]'))
# 层级选择器[3个：1：空格；2.大于号>；3.逗号，]#后代选择器。获取div标签下的li标签    [空格]
print(soup.select('div li'))
#子代选择器  [大于号> ]
# 很多计算机编程语言中，如果不加空格————》不会输出内容，但是在bs4中会显示内容，不会报错
print(soup.select('div > ul > li'))
# 组合。   【逗号，】
# 找到a标签和li标签所有对象
print(soup.select('a,li'))# 4）节点信息
#获取节点内容.    select返回值是一个列表，可以通过下标获取列表中内容
obj = soup.select('#d1')[0]
# 如果标签对象中只有内容，string和get_text（）都可以使用
#如果标签对象中不仅有内容，还有标签。那么string获取不到内容，get_text（）能获取内容
#推荐使用get_text（）
print(obj.string)
print(obj.get_text())#节点属性
#select返回值是一个列表，没有name属性。通过下标访问
obj = soup.select('#p1')[0]
# name是标签名
print(obj.name)
#将属性值作为一个字典返回
print(obj.attrs)# 获取节点属性
obj = soup.select('#p1')[0]
# 以下3种获取方式
print(obj.attrs.get('class'))
print(obj.get('class'))
print(obj['class'])

尚硅谷爬虫note009

一、jsonpath 1.安装 pip install jsonpath 2.使用只能解析本地文件 .json文件 {"store": {"book": [{"category": "reference","author": "Nigel Rees","title": "Sayings of the Century&qu…...

编程日记 2025/9/17 16:26:17

C语言（11）-------------＞while循环

一、if与while的区别在C语言中，有三大结构，分别是顺序、选择和循环。在前面的博客文章中，我们解释了if语句的用法，可以参考：C语言（7）------------＞if语句-CSDN博客从文章中&…...

编程日记 2025/9/17 16:21:57

Unity 全局屏幕点击特效

思路： 1、生成一个点击特效实例，每点击屏幕，就调整特效实例的位置并控制特效的显隐状态即可。 2、需要注意要保证在编辑器开发时或手机上运行时都要显示点击效果。方案一 （推荐） using UnityEngine; using UnityEn…...

编程日记 2025/9/17 16:21:27

【数据结构初阶第十二节】设计循环队列

云边有个稻草人-CSDN博客必须有为成功付出代价的决心，然后想办法付出这个代价。还有最后一道关于队列的习题，这题有点难，准备好迎接挑战吧！ 目录 1.【题目】 2.实现循环队列推荐用数组，Why? 3.Q1：如…...

编程日记 2025/9/17 16:23:51

【小白学HTML5】盒模型（一文讲清margin、padding）_第三讲

根据第一讲的内容，我们知道margin是外边距、padding是内边距，那么内外边距该怎么设置呢？ 1、margin：外边距第一种情况：比如设置外边距为上10px、右20px、下30px、左40px 外边距可以分别设置为：margin-t…...

编程日记 2025/9/14 0:29:15

PLC数据采集网关（三格电子）

产品概述 PLC转Modbus网关型号SG-PLC-Private（PLC私有协议网关），是三格电子推出的工业级网关（以下简称网关），主要用于在不需要对PLC编程的情况下将PLC数据映射到Modbus TCP(映射的方式符合PLC工程师使用习惯…...

编程日记 2025/9/13 22:52:19

基于图扑 HT 可视化实现智慧地下采矿可视化

在前端开发领域，不断涌现的新技术为各行业带来了创新变革的可能。今天，让我们聚焦于图扑软件自研的 HT for Web 产品，看看它如何在前端 2D、3D 渲染方面发力，为智慧地下采矿可视化打造令人惊叹的解决方案，为开发者开启…...

编程日记 2025/9/13 6:03:56

【网络】高级IO（2）

或者在某些情况下，它可能是： typedef unsigned int nfds_t; 前言由于select函数有下面几个特别明显的缺点，就推演出了改进版本——poll函数比如select监视的fd是有上限的，我的云服务器内核版本下最大上限是1024个fd&#xf…...

编程日记 2025/9/13 22:43:02

论文解读 | AAAI'25 Cobra：多模态扩展的大型语言模型，以实现高效推理

点击蓝字关注我们 AI TIME欢迎每一位AI爱好者的加入！ 点击阅读原文观看作者讲解回放！ 个人信息作者：赵晗，浙江大学-西湖大学联合培养博士生内容简介近年来，在各个领域应用多模态大语言模型（MLLMs&…...

编程日记 2025/9/15 19:45:28

区块链共识机制详解

区块链共识机制详解 🤝 1. 什么是共识机制？ 共识机制是区块链网络中，所有节点就某个状态（如交易的有效性）达成一致的规则和过程。它解决了在去中心化网络中如何确保数据一致性的问题。 2. 主流共识机制 2.1 工作量证…...

编程日记 2025/9/16 1:17:09

Unity游戏制作中的C#基础（1）界面操作基础

1.脚本有关注意事项 （1）.进入项目之后，一般创建一个文件夹Scripts用来存放c#脚本； （2）.在Scripts中创建脚本，双击脚本，进入VS编辑器，有如下结构： start&#…...

编程日记 2025/9/15 11:14:13

python学习笔记，python处理 Excel、Word、PPT 以及邮件自动化办公

文章目录前言一、环境搭建1. 下载 Python2. 安装 Python 二、处理 Excel 文件（openpyxl库）三、处理 Word 文件（python-docx库）四、处理 PPT 文件（python-pptx库）五、自动发送邮件（smtplib和…...

编程日记 2025/9/14 1:10:51

欢乐力扣：同构字符串

文章目录 1、题目描述2、代码 1、题目描述同构字符串。给定两个字符串 s 和 t ，判断它们是否是同构的。如果 s 中的字符可以按某种映射关系替换得到 t ，那么这两个字符串是同构的。每个出现的字符都应当映射到另一个字符，同时不改变字符…...

编程日记 2025/9/16 4:46:02

近10年气象分析（深度学习）

这是一个气象数据分析程序，主要用于分析和可视化气象数据。以下是该文件的主要功能： 1. 数据加载在线数据：尝试从 GitHub 加载气象数据。示例数据：如果无法加载在线数据，程序会自动生成示例数据。 2. 数据分析 …...

编程日记 2025/9/11 13:08:25

win11系统无法打开软件_组策略无法打开_gpedit.msc不生效_为了对电脑进行保护,已经阻止此应用---Windows工作笔记057

碰到这个问题挺麻烦的,要用的软件打不开了. 其实解决方法就是去组策略中修改一个策略就可以了,但是: 先来说: 而且,使用cmd输入的gpedit.msc也打不开了. 这个怎么解决? @echo off pushd "%~dp0"dir /b C:\Windows\servicing\Packages\Microsoft-Windows-GroupPo…...

编程日记 2025/9/16 7:49:08

【JAVA】封装多线程实现

系列文章目录 java知识点文章目录系列文章目录👉前言👉一、封装的目标👉二、常见的封装方式及原理👉壁纸分享👉总结 👉前言在 Java 中，封装多线程的原理主要围绕着将多线程相关的操作和逻辑…...

编程日记 2025/9/15 9:54:19

长短期记忆网络：从理论到创新应用的深度剖析

一、引言 1.1 研究背景深度学习在人工智能领域的发展可谓突飞猛进，而长短期记忆网络（LSTM）在其中占据着至关重要的地位。随着数据量的不断增长和对时序数据处理需求的增加，传统的神经网络在处理长序列数据时面临着梯度消失和梯…...

编程日记 2025/9/2 1:20:59

过程监督（Process Supervision）融入到 GRPO (Group Relative Policy Optimization)

下面演示如何把“过程监督（Process Supervision）”的思想融入到 GRPO (Group Relative Policy Optimization) 中，从而对每个输出的中间步骤逐一打分、计算相对优势。本文的示例代码与 grpo_train.py （来源见下文）类似&…...

编程日记 2025/9/16 9:34:22

ES6中Object.defineProperty 的详细用法和使用场景以及例子

ES6 Object.defineProperty() 用法总结 Object.defineProperty() 是 ES5 引入的一个方法，ES6 继续强化了该方法的使用，它允许我们为对象的属性定义或修改属性描述符。它能够控制对象属性的行为，如读写权限、可枚举性和可配置性。 1. Objec…...

编程日记 2025/9/14 14:09:22

【服务器与本地互传文件】远端服务器的Linux系统和本地Windows系统互传文件

rz 命令：本地上传到远端 rz 命令：用于从本地主机上传文件到远程服务器 rz 是一个用于在 Linux 系统中通过串口或 SSH 上传文件的命令，它实际上是 lrzsz 工具包中的一个命令。rz 命令可以调用一个图形化的上传窗口，方便用户从本…...

编程日记 2025/9/9 20:24:32

NVIDIA A100 SXM4与NVIDIA A100 PCIe版本区别深度对比：架构、性能与场景解析

NVIDIA A100 SXM4与PCIe版本深度对比：架构、性能与场景解析作为NVIDIA Ampere架构的旗舰级数据中心GPU，A100系列凭借强大的计算能力和显存带宽，已成为人工智能训练、高性能计算（HPC）等领域的核心硬件。然而&#xff…...

编程日记 2025/9/14 0:25:05

RAG基本原理

1.RAG全称是Retrieval-Augmented Generation Generation 的含义是基于用户的输入，生成具有上下文含义的一段文字。 Query 比如说太阳系中，哪个行星拥有的卫星数目最多？ 回答Answer 木星，木星目前有79个卫星这样的回答存在两个…...

编程日记 2025/9/14 12:21:26

WPS接入deepseek-OfficeAI助手插件下载

功能简介 OfficeAI 助手是一款免费的智能AI办公工具软件，专为 Microsoft Office 和 WPS 用户打造。无论你是在寻找如何输入“打勾（√）符号”的方法，还是想知道“怎么在插入表格前添加文字”，或者“该用哪个公式”&a…...

编程日记 2025/9/11 22:01:55

【微中子代理踩坑-前端node-sass安装失败】

微中子代理踩坑-前端node-sass安装失败-windows 1.npm版本2.python2.73.安装Visual Studio 1.npm版本当前使用node版本13.12.0 2.python2.7 安装python2.7.9并配置环境变量 3.安装Visual Studio 安装Visual Studio 我是直接勾选了3个windows的sdk,然后就好了最后 npm in…...

编程日记 2025/9/10 20:52:22

在群晖上使用Docker安装思源笔记

最近一段时间，docker的镜像地址都失效了，在群晖系统中，无论是早期版本的docker，还是最新版本中的Container Manager，注册表中都无法链接到docker的镜像，于是，就花了点时间查找资料&#x…...

编程日记 2025/9/11 7:31:14

后端之路——阿里云OSS云存储

一、何为阿里云OSS 全名叫“阿里云对象存储OSS”，就是云存储，前端发文件到服务器，服务器不用再存到本地磁盘，可以直接传给“阿里云OSS”，存在网上。二、怎么用大体逻辑： 细分的话就是： 1、准…...

编程日记 2025/9/16 0:39:02

华为guass在dbever和springboot配置操作

下面记录华为guass在dbever和springboot配置操作，以备忘。 1、安装dbeaver-ce-23.2.0-x86_64-setup.exe和驱动程序 Download | DBeaver Community 2、配置高斯数据库驱动 3、新建数据库连接 4、操作指引 opengauss官方文档 https://docs-opengauss.osinfra.cn/zh…...

编程日记 2025/9/14 6:48:55

【STM32学习】标准库实现STM32 ADC采集1路、2路、多路

目录 ADC采集 ADC配置步骤 STM32F103C8T6的ADC 输入通道编辑 1路ADC（A4 ADC 通道4） 1路ADC源码代码链接： 2路ADC（A4 ADC 通道4、A5 ADC 通道5）基于DMA实现多路ADC实现采集 ADC采集 ADC配置步骤使能GPIO…...

编程日记 2025/9/14 0:29:09

常用网络工具分析（ping，tcpdump等）

写在前面本文看下常用网络工具。 1：ping 1.1：用途用于检验网络的连通性。 1.2：实战在Linux环境中执行：ping www.sina.com.cn： [rootlocalhost ~]# ping www.sina.com.cn PING spool.grid.sinaedge.com (111.…...

编程日记 2025/9/9 4:24:40

计算机视觉：主流数据集整理

第一章：计算机视觉中图像的基础认知第二章：计算机视觉：卷积神经网络(CNN)基本概念(一) 第三章：计算机视觉：卷积神经网络(CNN)基本概念(二) 第四章：搭建一个经典的LeNet5神经网络(附代码) 第五章&#xff1…...

编程日记 2025/9/14 0:29:08

1.1 go环境搭建及基本使用

golang下载地址： Download and install - The Go Programming Language (google.cn) 验证安装是否成功： go version 查看go环境 go env 注意：Go1.11版本之后无需手动配置环境变量,使用go mod 管理项目，也不需要把项目放到GO…...

编程日记 2025/9/9 4:00:01

《深入理解JVM》实战笔记（一）：内存区域、对象布局与OOM排查指南

JVM发展史与Java内存区域深度解析 Java虚拟机（JVM）是Java编程语言的核心部分，它允许Java程序跨平台运行，提供了一个抽象层，使得Java代码能够在不同操作系统和硬件平台上运行。本文将从JVM的发展历程开始，深…...

编程日记 2025/9/17 7:53:46

《筑牢元宇宙根基：AI与区块链的安全信任密码》

在科技浪潮汹涌澎湃的当下，元宇宙已不再是科幻作品中的遥远构想，而是逐渐步入现实，成为人们热议与探索的前沿领域。从沉浸式的虚拟社交，到创新的数字经济模式，元宇宙的发展前景广阔，潜力无限。但要让元宇宙…...

编程日记 2025/9/14 22:34:32

Docker构建时，设定默认进入的工作目录的方法

在 Docker 中，你可以通过不同的方式来设定容器默认进入的目录，以下针对不同场景分别介绍具体方法： 1. 使用 Dockerfile 设定工作目录如果你是通过构建镜像的方式来运行容器，那么可以在 Dockerfile 中使用 WORKDIR 指令来设置容器启动时的默认工作目录。以下是具体步骤：…...

编程日记 2025/9/16 3:53:22

Linux nohup

nohup 是 Linux 系统中一个非常实用的命令，它的英文全称是 “no hang up”（不挂断），主要用于在用户退出登录或者终端会话关闭后，让指定的程序在后台持续运行，而不会受到 HUP（hangup）…...

编程日记 2025/9/6 18:33:54

【Linux探索学习】第二十七弹——信号（上）：Linux 信号基础详解

Linux学习笔记： https://blog.csdn.net/2301_80220607/category_12805278.html?spm1001.2014.3001.5482 前言： 前面我们已经将进程通信部分讲完了，现在我们来讲一个进程部分也非常重要的知识点——信号，信号也是进程间通信的一…...

编程日记 2025/9/14 16:34:21

ok113i平台——usb触摸屏驱动开发

在嵌入式Linux系统中，如果USB触摸屏能够检测到并且在手指移动时有数据，但点击无法触发，这可能是因为触摸屏驱动或配置的问题。以下是一些可能的解决方法： 1. 确认驱动支持首先，确保您使用的触摸屏驱动程序完全支持您…...

编程日记 2025/9/9 20:28:16

接着上一篇【Bluedroid】AVRCP 连接源码分析（一）-CSDN博客，继续AVRCP连接的源码分析。 getcapabilities_cmd packages/modules/Bluetooth/system/btif/src/btif_rc.cc /***************************************************************************** Function …...

编程日记 2025/9/17 14:22:09

Jenkins 自动构建Job

1.创建Job 登录Jenkins,点击新建Item,创建项目选择Pipeline，然后点击确定接下来主要在Pipeline script中编写脚本 2.签出Git仓库 2.1配置Git账号 Manage Jenkins->Security->Credentials 在凭据界面，选择全局添加凭据，添加Git用…...

编程日记 2025/9/12 17:31:59

现代企业软件测试人员需求与发展方向深度解析

引言现代互联网软件行业是不断创新的引擎。应用程序越来越复杂，部署周期越来越短，用户期望越来越高，运营规模也越来越庞大。在这种动态环境中，软件测试人员的角色不再仅限于在发布前阶段“查找错误”。相反，测试人员…...

编程日记 2025/9/15 19:04:46

2.19学习（php文件后缀）

misc buu-后门查杀下载附件，我们用火绒安全扫一下然后点击详情进入该文件所在文件夹，再用记事本打开该文件，搜索flag无果，再试试pass（由题目中的密码联系到pass，password，key等）&a…...

编程日记 2025/9/13 14:48:33

AI Agent实战：打造京东广告主的超级助手 | 京东零售技术实践

前言自2022年末ChatGPT的问世，大语言模型（LLM）技术引发全球关注。在大模型技术落地的最佳实践中，智能体（Agent）架构显现出巨大潜力，成为业界的普遍共识，各大公司也纷纷启动Agent技…...

编程日记 2025/9/16 5:10:09

将Google文档导入WordPress：简单实用的几种方法

Google文档是内容创作者非常实用的写作工具。它支持在线编辑、多人协作，并能够自动保存内容。但当我们想把Google文档中的内容导入WordPress网站时，可能会遇到一些小麻烦，比如格式错乱、图片丢失等问题。本文将为大家介绍几种简单实用的方法&…...

编程日记 2025/9/12 11:38:57

Spring的过滤器获取请求体中JSON参数，同时解决Controller获取不到请求体参数的问题。

Spring的过滤器获取请求体中JSON参数，同时解决Controller获取不到请求体参数的问题。文章目录前言一、需求场景描述二、原因解析三、自定义 HttpServletRequestWrapper 来保存数据解决Controller获取不到的问题。四、案例(要注意的点) 前言 Spring的过滤器获取请…...

编程日记 2025/9/9 14:28:44

全链路优化：如何让单点登录认证接口并发性能翻倍？

背景最近针对一个单点登录认证项目进行性能优化，在 8核 16G 环境下的认证并发能力从每秒800次提升至每秒1600次，性能提升一倍，整理此次优化过程中的相关性能优化操作总结和大家分享一下。 Nginx配置优化在并发认证场景下，Ngi…...

编程日记 2025/9/16 2:17:37

基于大语言模型的推荐系统（1）

推荐系统（recommendation system）非常重要。事实上，搜索引擎，电子商务，视频，音乐平台，社交网络等等，几乎所有互联网应用的核心就是向用户推荐内容，商品，电影&…...

编程日记 2025/9/14 0:29:04

嵌入式八股文（四）计算机网络篇

目录第一章基础概念 1. 服务 2. 协议 3. 接口 4. 网络体系结构 5. OSI七层模型 6. TCP/IP四层参考模型 7. 最大传输单元MTU及分片操作 8. 流量控制 9. 数据链路层提供的功能 10. 汇集树 11. 生成树协议 12. 拥塞控制及途径 6. 包调度 7. 隧道 8. 抖动 9. 逆…...

编程日记 2025/9/13 21:22:16

【龙智】Confluence到期日提醒插件Data Center v1.8.0发布：Confluence 9兼容、表格提醒强化，Slack通知升级

还在为Confluence中重要内容的逾期而焦头烂额？ 还在苦于手动核查任务的截止日期？ 不仅效率低下，还时常遗漏关键信息？ 别担心，你的帮手来了！ Confluence到期日提醒插件——由Atlassian全球白金合作伙伴龙…...

编程日记 2025/9/15 9:09:18

Luckfox Pico Max运行RKNN-Toolkit2中的Yolov5 adb USB仿真

1：下载rknn-toolkit2 git clone https://github.com/rockchip-linux/rknn-toolkit2 2：修改onnx目录下的yolov5的test.py的代码 # pre-process config print(--> Config model) rknn.config(mean_values[[0, 0, 0]], std_values[[255, 255, …...

编程日记 2025/9/9 22:18:35

AI IDE - Trae -学习与实践

1.应用场景主要用于使用AI IDE进行快速的开发，提高开发效率；节约开发时间； 额外话：可以预见搞出来的东西终将取代了我们自身； 2.学习/操作 1.文档阅读 Trae - Ship Faster with Trae -- 官网，下载安装 …...

编程日记 2025/9/9 0:32:17

一、jsonpath

.json文件

.py文件

xpath和jsonpath对比：

jsonpath解析淘票票-城市地址

二、BeautifulSopu

.HTML文件

.py文件

相关文章：