当前位置：首页 > news >正文

Python爬虫（10）Python数据存储实战：基于pymongo的MongoDB开发深度指南

news 来源：原创 2025/5/22 15:13:00

- - 一、为什么需要文档型数据库？
  - - 1.1 数据存储的范式变革
    - 1.2 pymongo的核心优势
  - 二、pymongo核心操作全解析
  - - 2.1 环境准备
    - 2.2 数据库连接与CRUD操作
    - 2.3 聚合管道实战
    - 2.4 分批次插入百万级数据（进阶）
    - 2.5 分批次插入百万级数据（进阶）
  - 三、生产环境进阶配置
  - - 3.1 性能优化关键措施
    - 3.2 高可用架构配置
    - 3.3 安全加固方案
  - 四、总结与最佳实践
  - - 4.1 技术选型对比‌：
    - 4.2 性能优化原则‌：
    - 4‌.3 避坑指南‌：
    - Python爬虫相关文章（推荐）

一、为什么需要文档型数据库？

1.1 数据存储的范式变革

在移动互联网与物联网时代，‌非结构化数据占比超过80%‌（IDC报告）。传统关系型数据库（如MySQL）的固定表结构难以应对以下场景：

‌动态字段需求‌：用户画像标签频繁增减
‌海量数据写入‌：物联网设备每秒万级数据写入
‌复杂嵌套结构‌：一篇电商商品信息包含多级评论、规格参数

‌MongoDB作为文档型数据库的代表‌，采用BSON（Binary JSON）格式存储数据，支持动态模式、水平扩展和地理空间查询，成为大数据场景的核心基础设施。

1.2 pymongo的核心优势

作为MongoDB官方Python驱动，pymongo提供：

‌原生BSON支持‌：无缝处理Python字典与BSON的转换
‌连接池管理‌：自动管理TCP连接复用
‌聚合管道封装‌：支持复杂数据分析操作
‌完善的API‌：覆盖索引管理、副本集操作等高级功能

二、pymongo核心操作全解析

2.1 环境准备

# 安装MongoDB社区版（以Ubuntu为例）
wget -qO - https://www.mongodb.org/static/pgp/server-6.0.asc | sudo apt-key add -
echo "deb [ arch=amd64,arm64 ] https://repo.mongodb.org/apt/ubuntu focal/mongodb-org/6.0 multiverse" | sudo tee /etc/apt/sources.list.d/mongodb-org-6.0.list
sudo apt-get update
sudo apt-get install -y mongodb-org# 安装pymongo
pip install pymongo

2.2 数据库连接与CRUD操作

from pymongo import MongoClient
from pymongo.errors import ConnectionFailure# 建立连接（默认连接池大小100）
client = MongoClient(host="localhost",port=27017,username="admin",  # 启用身份验证时必填password="securepassword",authSource="admin"
)try:# 心跳检测client.admin.command('ping')print("Successfully connected to MongoDB!")
except ConnectionFailure:print("Server not available")# 选择数据库与集合（自动懒创建）
db = client["ecommerce"]
products_col = db["products"]# 插入文档（自动生成_id）
product_data = {"name": "Wireless Mouse","price": 49.99,"tags": ["electronics", "computer"],"stock": {"warehouse_A": 100, "warehouse_B": 50},"last_modified": datetime.now()
}
insert_result = products_col.insert_one(product_data)
print(f"Inserted ID: {insert_result.inserted_id}")# 查询文档（支持嵌套查询）
query = {"price": {"$lt": 60}, "tags": "electronics"}
projection = {"name": 1, "price": 1}  # 类似SQL SELECT
cursor = products_col.find(query, projection).limit(5)
for doc in cursor:print(doc)# 更新文档（原子操作）
update_filter = {"name": "Wireless Mouse"}
update_data = {"$inc": {"stock.warehouse_A": -10}, "$set": {"last_modified": datetime.now()}}
update_result = products_col.update_one(update_filter, update_data)
print(f"Modified count: {update_result.modified_count}")# 删除文档
delete_result = products_col.delete_many({"price": {"$gt": 200}})
print(f"Deleted count: {delete_result.deleted_count}")

2.3 聚合管道实战

# 统计各仓库库存总量
pipeline = [{"$unwind": "$stock"},  # 展开嵌套文档{"$group": {"_id": "$stock.warehouse","total_stock": {"$sum": "$stock.quantity"}}},{"$sort": {"total_stock": -1}}
]
results = products_col.aggregate(pipeline)
for res in results:print(f"Warehouse {res['_id']}: {res['total_stock']} units")

2.4 分批次插入百万级数据（进阶）

from pymongo import MongoClient
from faker import Faker
import timeclient = MongoClient('mongodb://localhost:27017/')
db = client['bigdata']
collection = db['user_profiles']fake = Faker()
batch_size = 5000  # 分批次插入减少内存压力def generate_batch(batch_size):return [{"name": fake.name(),"email": fake.email(),"last_login": fake.date_time_this_year()} for _ in range(batch_size)]start_time = time.time()
for _ in range(200):  # 总数据量100万batch_data = generate_batch(batch_size)collection.insert_many(batch_data, ordered=False)  # 无序插入提升速度print(f"已插入 {(i+1)*batch_size} 条数据")print(f"总耗时: {time.time()-start_time:.2f}秒")

2.5 分批次插入百万级数据（进阶）

# 分析电商订单数据（含嵌套结构）
pipeline = [{"$unwind": "$items"},  # 展开订单中的商品数组{"$match": {"status": "completed"}},  # 筛选已完成订单{"$group": {"_id": "$items.category","total_sales": {"$sum": "$items.price"},"avg_quantity": {"$avg": "$items.quantity"},"top_product": {"$max": "$items.name"}}},{"$sort": {"total_sales": -1}},{"$limit": 10}
]orders_col = db["orders"]
results = orders_col.aggregate(pipeline)for res in results:print(f"品类 {res['_id']}: 销售额{res['total_sales']}元")

三、生产环境进阶配置

3.1 性能优化关键措施

# 创建索引（提升查询速度）
products_col.create_index([("name", pymongo.ASCENDING)], unique=True)
products_col.create_index([("price", pymongo.ASCENDING), ("tags", pymongo.ASCENDING)])# 批量写入提升吞吐量
bulk_ops = [pymongo.InsertOne({"name": "Keyboard", "price": 89.99}),pymongo.UpdateOne({"name": "Mouse"}, {"$set": {"price": 59.99}}),pymongo.DeleteOne({"name": "Earphones"})
]
results = products_col.bulk_write(bulk_ops)

3.2 高可用架构配置

# MongoDB副本集配置（3节点）
replication:replSetName: "rs0"members:- _id: 0, host: "mongo1:27017"- _id: 1, host: "mongo2:27017"- _id: 2, host: "mongo3:27017", arbiterOnly: true

3.3 安全加固方案

# 启用身份验证
use admin
db.createUser({user: "admin",pwd: "securepassword",roles: [ { role: "userAdminAnyDatabase", db: "admin" } ]
})# 配置网络加密
net:tls:mode: requireTLScertificateKeyFile: /etc/ssl/mongo.pem

四、总结与最佳实践

4.1 技术选型对比‌：

特性	MongoDB	MySQL
数据模型	动态文档	固定表结构
扩展方式	水平分片	垂直扩展
事务支持	4.0+版本支持	原生完善支持
适用场景	日志/用户行为数据	金融交易系统

4.2 性能优化原则‌：

‌Working Set‌原则：确保常用数据能放入内存
‌索引覆盖‌：通过组合索引避免回表查询
‌分片键设计‌：选择高基数、易分散的字段

4‌.3 避坑指南‌：

避免文档无限制增长（推荐设置capped collection）
慎用$where操作符（导致全表扫描）
生产环境必须配置副本集与定期备份

Python爬虫相关文章（推荐）


Python爬虫介绍	Python爬虫（1）Python爬虫：从原理到实战，一文掌握数据采集核心技术
HTTP协议解析	Python爬虫（2）Python爬虫入门：从HTTP协议解析到豆瓣电影数据抓取实战
HTML核心技巧	Python爬虫（3）HTML核心技巧：从零掌握class与id选择器，精准定位网页元素
CSS核心机制	Python爬虫（4）CSS核心机制：全面解析选择器分类、用法与实战应用
静态页面抓取实战	Python爬虫（5）静态页面抓取实战：requests库请求头配置与反反爬策略详解
静态页面解析实战	Python爬虫（6）静态页面解析实战：BeautifulSoup与lxml（XPath）高效提取数据指南
Python数据存储实战 CSV文件	Python爬虫（7）Python数据存储实战：CSV文件读写与复杂数据处理指南
Python数据存储实战 JSON文件	Python爬虫（8）Python数据存储实战：JSON文件读写与复杂结构化数据处理指南
Python数据存储实战 MySQL数据库	Python爬虫（9）Python数据存储实战：基于pymysql的MySQL数据库操作详解

Python爬虫（10）Python数据存储实战：基于pymongo的MongoDB开发深度指南

目录一、为什么需要文档型数据库？1.1 数据存储的范式变革1.2 pymongo的核心优势二、pymongo核心操作全解析2.1 环境准备2.2 数据库连接与CRUD操作2.3 聚合管道实战2.4 分批次插入百万级数据（进阶）2.5 分批次插入百万级数据（进阶…...

编程日记 2025/5/22 15:13:00

从遍历序列构造二叉树：前序+中序与中序+后序的递归解法详解

文章目录 1. 问题背景2. 核心思路3. 从前序与中序遍历序列构造二叉树3.1 递归分治思路3.2 代码实现与注释 4. 从中序与后序遍历序列构造二叉树4.1 递归分治思路4.2 代码实现与注释 5. 复杂度分析6. 总结 1. 问题背景二叉树的遍历方式包括前序（根-左-右&#xff09…...

编程日记 2025/5/22 14:54:14

数据挖掘专栏介绍：用 Python + 大语言模型 (LLM) 重塑电商数据价值

写在前面 —— 不止于挖掘，更要智能涌现：用 Python + 大语言模型 (LLM) 重塑电商数据价值或许你已经跟随我们之前的 “零基础上手Python数据分析” 专栏，掌握了 Pandas 的数据操纵、Matplotlib/Seaborn 的可视化呈现，甚至对传统的数据挖掘技术如聚类、分类、回归有了初步…...

编程日记 2025/5/22 14:55:24

CSS Transition入门指南

CSS Transition 完全指南目录 Transition 的作用核心属性代码示例使用场景性能优化常见问题思维导图 1. Transition 的作用 CSS Transition 用于在属性值变化时创建平滑的过渡效果。例如： 鼠标悬停时按钮放大元素颜色渐变切换位置移动的缓动效果 2. 核心属性…...

编程日记 2025/5/22 14:12:47

Nginx 核心功能

目录一、基于授权的访问控制 （1）使用htpasswd 生成用户认证文件 （2）修改密码文件权限为400，将所有者改为nginx ，设置 Nginx 的运行用户能够读取 （3）修改主配置文件 nginx.conf&…...

编程日记 2025/5/22 14:56:47

姓名研究方向电子邮箱办公电话办公地点曹培根代数cao2024ustc.edu.cn　新楼412陈洪佳代数hjchenustc.edu.cn0551-636076931529陈小伍代数xwchenmail.ustc.edu.cn0551-636062351321梁永祺代数yqliangustc.edu.cn0551-636006171613欧阳毅代数yiouyangustc.edu.cn0551-63600337…...

编程日记 2025/5/22 14:45:21

AI国学智慧语录视频，条条视频10W+播放量

家人们！图书类带货玩法真的非常多，之前也分享过蛮多，例如情感语录、育儿教育、爆款图书金句类、AI历史人物解说类等等。本期继续来分享一个对于普通人来说，上手相当简单，容易起号，可作为长线深耕的AI带货…...

编程日记 2025/4/30 5:42:57

RN 获取视频封面，获取视频第一帧

严格的说，没有解决这个问题，实际上是绕过了这个问题，严格的说获取的也不是第一帧。 RN的video 视频应用，大多是这样的 1、安装 yarn add react-native-video 2、导入 import Video from react-native-video; 3、使用 …...

编程日记 2025/4/30 5:42:56

缓存分片哈希 vs 一致性哈希：优缺点、区别对比及适用场景（图示版）

📜 引言在分布式缓存系统中，数据分布策略是设计的关键之一。缓存分片哈希和一致性哈希是两种常见的数据分布算法，它们各有优缺点和适用场景。本文将通过图示对比表格，深入解析这两种算法的核心原理、优缺点及适用场景。 &#x…...

编程日记 2025/5/22 14:07:52

iOS - 音频: Core Audio - 播放

环境 iOS 18 Xcode 16.3 swift-driver version: 1.120.5 Apple Swift version 6.1 (swiftlang-6.1.0.110.21 clang-1700.0.13.3) Target: x86_64-apple-macosx15.0 Core Audio 的架构声音数据的描述 sample: 一个声道采样的值,采样率定义了每秒从连续信号中提取并组成离散信号…...

编程日记 2025/5/22 13:55:57

Nerfstudio 环境配置与自有数据集（图片和视频）测试全方位全流程实战【2025最新版！！】

一、引言神经辐射场(Neural Radiance Fields，简称NeRF)是近年来计算机视觉和图形学领域的一项革命性技术，它能够从2D图像中学习复杂的3D场景表示。然而，NeRF技术的实现和应用门槛较高，需要较为专业的计算机视觉和深度学习知识。…...

编程日记 2025/5/11 7:55:45

【Java学习】动态代理有哪些形式？

Java动态代理的两种主要形式动态代理在Java中有两种主要的实现方式，它们各有特点和使用场景： 1. JDK动态代理 (基于接口) 特点： Java标准库自带的功能（java.lang.reflect.Proxy）只能代理接口，不能代理…...

编程日记 2025/4/30 5:42:53

Android Studio 中实现方法和参数显示一行

Android Studio 中实现方法和参数显示一行，可通过以下步骤配置： 一、基础格式化设置 ‌快捷键格式化‌ 选中代码后使用 Ctrl Alt L（Windows/Linux）或 Cmd Option L（Mac）进行快速格式化27。 ‌菜单操作…...

编程日记 2025/5/22 14:07:52

SQLyog中DELIMITER执行存储过程时出现的前置缩进问题

在SQLyog中执行存储过程时出现的前置缩进问题，实际上反映了SQLyog对SQL语句解析的一个特殊行为。以下是详细解释和解决方案： 问题根源 SQLyog的语句分隔逻辑： SQLyog默认会根据分号(;)和换行自动分隔SQL语句当代码有缩进时，SQLy…...

编程日记 2025/5/22 14:52:30

基于Spring Boot 3.0、ShardingSphere、PostgreSQL或达梦数据库的分库分表

要实现基于Spring Boot 3.0、ShardingSphere、PostgreSQL或达梦数据库的分库分表，首先需要对ShardingSphere进行一些基本配置。你提到的溯源码、批次号等数据需要考虑到跨年数据的存储，因此要设计一个能够动态扩展的分表策略添加ShardingSphere依赖在…...

编程日记 2025/4/30 5:40:49

vscode chrome调试怎么在所有浏览器都好使

chrome调试时只能在打开的浏览器里进行调试，其它打开的chrome浏览器就不能调试了，怎么解决。右键点击 Chrome 的快捷方式图标，选择属性在目标一栏，最后加上--remote-debugging-port9222 注意要用空格隔开 lanch.json 文件配置 …...

编程日记 2025/4/30 5:40:48

20250429在Ubuntu 20.04.6下安装VMware Workstation16

20250429在Ubuntu 20.04.6下安装VMware Workstation16 2025/4/29 20:16 缘起：1、在ubuntu14.04下git clone异常该如何处理呢？ 2、请问现在编译NanoPi NEO的FriendlyCore系统使用ubuntu哪一个版本比较好？ ubuntu14.04 编译异常/下载不了&am…...

编程日记 2025/5/22 14:55:25

Java高频面试之并发编程-10

hello啊，各位观众姥爷们！！！本baby今天来报道了！哈哈哈哈哈嗝🐶 面试官：ThreadLocalMap 怎么解决 Hash 冲突的？ ThreadLocalMap 是 ThreadLocal 的核心实现，它采用开放…...

编程日记 2025/4/30 5:40:47

【Tauri2】035——sql和sqlx

前言这篇就来看看插件sql SQL | Taurihttps://tauri.app/plugin/sql/ 正文准备添加依赖 tauri-plugin-sql {version "2.2.0",features ["sqlite"]} features可以是mysql、sqlite、postsql 进去features看看 sqlite ["sqlx/sqlite&quo…...

编程日记 2025/5/22 14:09:43

C++/SDL 进阶游戏开发 —— 双人塔防（代号：村庄保卫战 16）

🎁个人主页：工藤新一 🔍系列专栏：C面向对象（类和对象篇） 🌟心中的天空之城，终会照亮我前方的路 🎉欢迎大家点赞👍评论📝收藏⭐文章文章目录 […...

编程日记 2025/5/22 15:08:54

VScode与远端服务器SSH链接

这里写自定义目录标题简介步骤简介这里是使用密钥文件链接步骤首先在windows CMD中运行 ssh-keygen -t rsa，生成本机的公钥和私钥这里id rsa.pub就是公钥，在服务器端使用，id rsa是私钥在用户端使用;通常目录在C:/Users/Your name/…...

编程日记 2025/5/22 14:12:47

数据结构入门：详解顺序表的实现与操作

目录 1.线性表 2.顺序表 2.1概念与结构 2.2分类 2.2.1静态顺序表 2.2.2动态顺序表 3.动态顺序表的实现 3.1.SeqList.h 3.2.SeqList.c 3.2.1初始化 3.2.2销毁 3.2.3打印 3.2.4顺序表扩容 3.2.5尾部插入及尾部删除 3.2.6头部插入及头部删除 3.2.7特定位置插入…...

编程日记 2025/4/30 5:39:43

Reactor框架介绍

Reactor（反应器模式）是一种事件驱动的设计模式，广泛用于高性能网络编程和异步I/O处理。它的核心思想是将事件分发与业务逻辑解耦，通过统一的机制处理多路I/O事件。这个在android蓝牙中大量使用，如果这里不懂，那么很难看懂底层的逻辑，所以我们在这片文章中做一个介绍 …...

编程日记 2025/5/22 14:03:58

Nacos 3.0 正式发布：MCP Registry、安全零信任、链接更多生态

Nacos 3.0 正式版本发布啦！升级 MCP Registry，围绕着 MCP 服务管理，MCP 多种类型注册，包含 MCP Server 注册、编排、动态调试和管理，并且提供 Nacos-MCP-Router 可以进行 MCP 动态发现，可以自动安装、代理 …...

编程日记 2025/4/30 5:39:41

前端安全中的XSS（跨站脚本攻击）

XSS 类型存储型 XSS 特征：恶意脚本存储在服务器（如数据库），用户访问受感染页面时触发。场景：用户评论、论坛帖子等持久化内容。影响范围：所有访问该页面的用户。反射型 XSS 特征：恶意脚本通过…...

编程日记 2025/5/22 14:47:06

go单向链表

需求实现单向链表的节点顺序添加、顺序遍历。实现 package mainimport ("fmt" )type zodiac_sign struct {number intdizhi stringanimal stringyear intnext *zodiac_sign }// 添加 // func add_node_by_order(previous_node zodiac_sign, current_node z…...

编程日记 2025/4/30 5:39:40

Python小程序：上班该做点摸鱼的事情

系统提醒上班会忘记一些自己的事，所以你需要在上班的的时候突然给你弹窗，你就知道要做啥了源码 # -*- coding:utf-8 -*- """ 作者:杨桃清日期: 2025年04日29 21:51:24 """ import datetime import time import thre…...

编程日记 2025/4/30 5:39:39

uni-app中使用RenderJs 使用原生js

RenderJs运行的层叫【视图层】，Uniapp原生Script叫【逻辑层】，逻辑层要调用视图层需要使用一个叫【watcher】，具体怎么调用呢为了实现这两层之间的通信，uniapp提供了一些特定的机制。以下是对这些通信机制的详细解释&#xff0c…...

编程日记 2025/5/22 8:39:15

51c自动驾驶~合集37

我自己的原文哦~ https://blog.51cto.com/whaosoft/13878933 #DETR->DETR3D->Sparse4D 走向长时序稀疏3D目标检测一、DETR 图1 DETR架构 DETR是第一篇将Transformer应用到目标检测方向的算法。DETR是一个经典的Encoder-Decoder结构的算法，它的骨干网…...

编程日记 2025/5/22 14:28:02

uniapp 小程序安卓苹果短视频解决方案

需求要做类似抖音小程序的功能思路 uniapp 使用swiper滑块实现滑动使用video播放视频遇到的问题 1 video组件在小程序可以使用 uni.createVideoContext api控制 2 但是在app端会有层级问题（因为使用的原生组件具体看官方文档）导致无法正常滑动…...

编程日记 2025/5/22 14:23:26

LeetCode58_最后一个单词的长度

LeetCode58_最后一个单词的长度标签：#字符串Ⅰ. 题目Ⅱ. 示例 0. 个人方法标签：#字符串 Ⅰ. 题目给你一个字符串 s，由若干单词组成，单词前后用一些空格字符隔开。返回字符串中最后一个单词的长度。单词是指仅由字母组成、…...

编程日记 2025/5/22 15:07:21

深入理解Spring AI框架的核心概念

深入理解Spring AI框架的核心概念前言在当今人工智能飞速发展的时代，将AI技术集成到应用程序中已成为众多开发者关注的焦点。Spring AI框架为Java开发者提供了便捷的途径来实现这一目标。理解其核心概念对于充分发挥框架的潜力至关重要。本文将详细探讨Spring A…...

编程日记 2025/5/7 19:58:12

技术驱动与模式创新：开源AI大模型与S2B2C商城重构零售生态

摘要：在移动互联网与人工智能技术深度融合的背景下，零售行业正经历从“人找货”到“货找人”的范式转移。本文以开源AI大模型、AI智能名片、S2B2C商城小程序源码为核心技术要素，结合无人便利店、盒马鲜生、王府井二次元业态等商业实践&#x…...

编程日记 2025/5/7 19:58:14

精益数据分析（30/126）：电商商业模式的深度剖析与关键指标解读

精益数据分析（30/126）：电商商业模式的深度剖析与关键指标解读在创业与数据分析的漫漫征途中，我们都在不断探寻如何更好地理解和运用商业数据，以实现业务的蓬勃发展。今天，我依旧带着和大家共同进步的初心…...

编程日记 2025/5/7 19:58:08

玩玩OCR

一、Tesseract: 1.下载windows版： tesseract 2. 安装并记下路径，等会要填 3.保存.py文件 import pytesseract from PIL import Image def ocr_local_image(image_path):try:pytesseract.pytesseract.tesseract_cmd rD:\Programs\Tesseract-OCR\tesse…...

编程日记 2025/5/22 14:43:21

gradle 下载的tencent的镜像

distributionUrlhttps://mirrors.cloud.tencent.com/gradle/gradle-5.4.1-all.zip distributionUrlhttps://mirrors.aliyun.com/gradle/distributions/v5.4.1/gradle-5.4.1-all.zip 参考： gradle 镜像地址,解决 AS 下载缓慢或者下不下来的问题-CSDN博客...

编程日记 2025/5/22 14:05:49

【含文档+PPT+源码】基于微信小程序的乡村振兴民宿管理系统

项目介绍本课程演示的是一款基于微信小程序的乡村振兴民宿管理系统，主要针对计算机相关专业的正在做毕设的学生与需要项目实战练习的 Java 学习者。 1.包含：项目源码、项目文档、数据库脚本、软件工具等所有资料 2.带你从零开始部署运行本套系统 3.该…...

编程日记 2025/5/22 15:01:44

【Redis——数据类型和内部编码和Redis使用单线程模型的分析】

文章目录 Redis的数据类型和内部编码单线程模型的工作过程Redis虽然是一个单线程模型，为啥效率那么高，速度快呢？ 总而言之，Redis提供的哈希表容器并不一定真的是真的哈希表，而是在特点的场景下，用别的容器去…...

编程日记 2025/5/22 14:41:57

leetcode day37 474

474 一和零给你一个二进制字符串数组 strs 和两个整数 m 和 n 。请你找出并返回 strs 的最大子集的长度，该子集中最多有 m 个 0 和 n 个 1 。如果 x 的所有元素也是 y 的元素，集合 x 是集合 y 的子集。示例 1： 输入：s…...

编程日记 2025/5/22 14:52:30

【计算机视觉】目标检测：深度解析YOLOv9：下一代实时目标检测架构的创新与实战

深度解析YOLOv9：下一代实时目标检测架构的创新与实战架构演进与技术创新YOLOv9的设计哲学核心创新解析1. 可编程梯度信息（PGI）2. 广义高效层聚合网络（GELAN）3. 轻量级设计环境配置与快速开始硬件需求建议详细安装步骤…...

编程日记 2025/5/22 14:58:41

Android Studio Profiler

1.我们想要查看自己方法的调用链，或者分析方法耗时的情况，可以选择Android Studio的Profiler，比较方便快捷。如下： 2.基本的面板参数讲解： 3.可以通过搜索，查看对应的方法，以及方法的调用链…...

编程日记 2025/5/22 14:20:04

Android Studio for Platform（ASFP）真机调试

连接设备由于ubuntu连接adb设备每次都需要配置usb权限，很麻烦。并且每次换设备还要重新配置，我多数设备都是用wifi的adb方式连接。开发板显示连接显示器配合usb鼠标或者遥控器操作（因为开发板默认开启了adb，我这里是使用有线…...

编程日记 2025/5/7 19:58:06

如何个人HA服务器地址和长期密钥

下面分两步说明如何获取你的 Home Assistant 服务器地址以及创建“长期访问令牌”（Long-Lived Access Token），并给出一个简单的 Python 调用示例。一、获取 Home Assistant 服务器地址默认域名/端口如果你在本机或局域网内安装并使用默认设…...

编程日记 2025/5/7 19:58:11

生物化学笔记：神经生物学概论04 视觉通路简介视网膜视网膜神经细胞大小神经节细胞(视错觉)

视觉通路简介神经节细胞的胞体构成一明确的解剖层次，其外邻神经纤维层，内接内丛状层，该层在鼻侧厚约10～20μm，最厚在黄斑区约60～80μm。全部细胞数约为120万个(1000000左右)。每个细胞有一轴突&#xff…...

编程日记 2025/5/22 14:43:22

C++——调用OpenCV和NVIDIA Video Codec SDK库实现使用GPU硬解码MP4视频文件

系列文章目录参考博客参考博客参考博客文章目录系列文章目录前言一、下载安装NVIDIA Video Codec SDK1、下载NVIDIA Video Codec SDK2、安装NVIDIA Video Codec SDK 二、下载编译安装OpenCV1、下载OpenCV2、编译安装OpenCV3、配置环境变量4、报错解决报错一： …...

编程日记 2025/5/22 14:29:43

dify升级最新版本（保留已创建内容）

dify安装参考文章： DeepSeek＋Dify本地部署私有化知识库如果之前安装的时候，是通过docker镜像的方式。从网上下载最新的dify包，下载地址： https://github.com/langgenius/dify 下载完成后，把文件覆盖原…...

编程日记 2025/5/22 14:31:13

4、RabbitMQ的七种工作模式介绍

目录一、Simple(简单模式) 1.1 概念 1.2 代码实现消费者运行结果二、Work Queue（工作队列） 2.1 概念 1.2 代码实现生产者消费者运行结果三、Publish/Subscribe（发布/订阅模式） 3.1 概念 3.2 代码实现生产者…...

编程日记 2025/5/22 14:18:22

React Three Fiber 详解：现代 Web3D 的利器

React Three Fiber 详解：现代 Web3D 的利器随着 Web 技术的发展，3D 场景与交互已经不再是游戏开发者的专利。越来越多的网站、产品页、交互动画，开始大量引入 3D 元素。要在 React 项目中高效使用 WebGL，React Three Fiber（简称 R3F）成为了目前最主流的选择。今天这篇…...