当前位置： 首页 > news >正文

基于Kubernetes的Apache Pulsar云原生架构解析与集群部署指南（上）

news 来源：原创 2025/8/13 23:40:48

#作者：闫乾苓

文章目录

  • 概念和架构
    • 概述
    • 主要特点
    • 消息传递
    • 核心概念
    • Pulsar 的消息模型
    • Pulsar 的消息存储与分发
    • Pulsar 的高级特性
    • 架构
      • Broker
      • BookKeeper
      • ZooKeeper

概念和架构

概述

Pulsar 是一个多租户、高性能的服务器到服务器消息传递解决方案。Pulsar 最初由雅虎开发，目前由Apache 软件基金会管理。

主要特点

  1. 原生支持 Pulsar 实例中的多个集群，并可跨集群实现消息的无缝地理复制。
  2. 发布和端到端延迟非常低。
  3. 无缝扩展到超过一百万个主题。
  4. 一个简单的客户端 API，具有Java、Go、Python和C ++的绑定。
  5. 主题的多种订阅类型（独占、共享和故障转移）。
  6. Apache BookKeeper提供持久消息存储，保证消息传递。无服务器轻量级计算框架Pulsar Functions提供流原生数据处理能力。
  7. 基于 Pulsar Functions 构建的无服务器连接器框架Pulsar IO可以更轻松地将数据移入和移出 Apache Pulsar。
  8. 当数据老化时，分层存储会将数据从热/温存储卸载到冷/长期存储（例如 S3 和 GCS）。

消息传递

Pulsar 基于发布-订阅模式（通常缩写为 pub-sub）。在此模式下，生产者向主题发布消息；消费者 订阅这些主题，处理传入的消息，并在处理完成后向代理发送确认。

订阅创建后，Pulsar会保留所有消息，即使消费者断开连接也是如此。只有当消费者确认所有消息均已成功处理时，保留的消息才会被丢弃。

如果某条消息消费失败，你希望该消息再次被消费，你可以启用消息重投机制，请求broker重新发送该消息。

核心概念

消息
消息是 Pulsar 的基本“单位”。下表列出了消息的组成部分

成分描述
值/数据有效载荷消息携带的数据。
键消息可以选择用键进行标记，这对于主题压缩等操作很有用。
特性用户定义属性的可选键/值映射。
生产者名称生成消息的生产者的名称。如果未指定生产者名称，则使用默认名称。
主题名称发布消息的主题的名称。
架构版本生成消息的模式的版本号。
序列 ID每条 Pulsar 消息都属于其主题上的一个有序序列。消息的序列 ID 最初由其生产者分配，指示其在该序列中的顺序，也可以自定义。
序列 ID可用于消息去重。如果brokerDeduplicationEnabled设置为true，则每条消息的序列 ID 在主题（非分区）或分区的生产者中都是唯一的。
消息 ID消息持久化存储后，bookies 会立即为其分配消息 ID。消息 ID 指示消息在账本中的特定位置，并且在 Pulsar 集群中是唯一的。
发布时间消息发布的时间戳。该时间戳由生产者自动应用。
活动时间应用程序附加到消息的可选时间戳。例如，应用程序会在消息处理时附加时间戳。如果事件时间未设置任何内容，则值为0。

消息默认大小为 5MB。您可以通过以下配置来设置消息的最大大小
在broker.conf文件中

# The max size of a message (in bytes).
maxMessageSize=5242880

在bookkeeper.conf文件中

# The max size of the netty frame (in bytes). Any messages received larger than this value are rejected. The default value is 5 MB.
nettyMaxFrameSizeBytes=5253120

主题（Topic）
主题是消息传递的基本单元，生产者将消息发送到主题，消费者从主题中消费消息。
Pulsar 支持两种类型的主题：

  • 持久化主题（Persistent Topic）：消息存储在持久化存储中（如 Apache BookKeeper），确保消息不会丢失。
  • 非持久化主题（Non-Persistent Topic）：消息不存储在持久化存储中，适合对可靠性要求较低但性能要求高的场景。

生产者（Producer）

  • 生产者是负责向主题发布消息的客户端。
  • 生产者可以选择同步或异步的方式发送消息。
    Pulsar 支持消息批处理（Batching）和压缩（Compression），以提高消息传输效率。

消费者（Consumer）

  • 消费者是从主题中读取消息的客户端。

  • 消费者可以以多种模式订阅主题：

    • 独占模式（Exclusive）：只有一个消费者可以消费消息。
    • 共享模式（Shared）：多个消费者共享消息，每个消息只被一个消费者消费。
    • 故障转移模式（Failover）：主消费者消费消息，如果主消费者失败，则备用消费者接管。
    • 键共享模式（Key_Shared）：根据消息的键（Key）分配给不同的消费者。

订阅（Subscription）
订阅定义了消费者如何从主题中消费消息。
Pulsar 支持两种订阅类型：

  • 独占订阅（Exclusive Subscription）：只有一个消费者可以消费消息。
  • 共享订阅（Shared Subscription）：多个消费者可以同时消费消息。
  • 故障转移订阅（Failover Subscription）：主消费者消费消息，备用消费者在主消费者失败时接管。

Pulsar 的消息模型

Pulsar 提供了两种主要的消息模型：
队列模型（Queue Model）

  • 在队列模型中，消息被多个消费者共享，每个消息只被一个消费者消费。
  • 这种模型适用于负载均衡的场景，例如任务分发。
    流模型（Stream Model）
  • 在流模型中，每个消费者独立消费消息流，所有消费者都能接收到完整的消息流。
  • 这种模型适用于需要广播消息的场景，例如实时数据分析。

Pulsar 的消息存储与分发

分布式架构
Pulsar 的架构分为两层：

  • Broker 层：负责接收和分发消息。
  • BookKeeper 层：负责持久化存储消息。

这种分离设计使得 Pulsar 能够扩展到大规模集群，同时保证高性能和高可靠性。

消息分片（Segmentation）

Pulsar 将主题划分为多个分片（Segment），每个分片由 BookKeeper 中的不同节点存储。

这种分片机制提高了存储效率和容错能力。

消息保留与过期
Pulsar 支持灵活的消息保留策略：

  • 基于时间的保留：消息在指定时间后自动删除。
  • 基于大小的保留：当主题的总消息大小超过限制时，旧消息会被删除。
    这些策略可以通过配置进行调整。

Pulsar 的高级特性

消息确认（Acknowledgment）
消费者在成功处理消息后，会向 Pulsar 发送确认（Ack）。
如果消费者未能确认消息，Pulsar 会重新传递该消息。

消息去重（Deduplication）
Pulsar 支持消息去重功能，确保即使生产者重复发送消息，消费者也不会收到重复的消息。

延迟消息（Delayed Messages）
Pulsar 支持延迟消息功能，允许生产者指定消息的投递时间。
例如，可以设置消息在 10 秒后才被消费者接收。

消息压缩（Compression）
Pulsar 支持多种压缩算法（如 LZ4、Zlib 等），以减少消息在网络中的传输开销。

消息 TTL（Time-to-Live）
Pulsar 支持为消息设置 TTL，超时未被消费的消息会被自动丢弃。

架构

Apache Pulsar 是一个分布式发布/订阅消息系统，其架构设计非常独特且高效，结合了传统消息队列和流处理系统的优点。Pulsar 的架构分为两层：Broker 层 和 BookKeeper层，并通过多租户、跨地域复制等特性支持大规模分布式部署。
Pulsar 的架构可以概括为以下三个核心组件：
在这里插入图片描述

Broker

Broker 的职责

  • 消息接收与分发：
  • 生产者将消息发送到 Broker，Broker 将消息写入 BookKeeper。
  • 消费者从 Broker 请求消息，Broker 从 BookKeeper 中读取消息并返回。
  • 主题管理：
  • 创建、删除和管理主题。
  • 支持分区主题（Partitioned Topic），即将一个主题划分为多个分区以提高吞吐量。
  • 订阅管理：
  • 管理消费者的订阅模式（如独占、共享、故障转移等）。
  • 跟踪消费者的消费进度（Cursor）。

Broker 的高可用性

  • 多个 Broker 节点组成一个集群，通过负载均衡器分配流量。
  • 如果某个 Broker 节点失效，其他节点会接管其工作，确保服务不中断。

BookKeeper

BookKeeper 的职责

  • 消息持久化：
  • 每条消息被存储为一个日志条目（Ledger Entry）。
  • 每个主题的消息被分割成多个日志（Ledger），以便于管理和扩展。
  • 数据分片与副本：
  • 每个 Ledger 被分成多个片段（Segment），分布存储在不同的 BookKeeper 节点上。
  • 每个 Segment 默认有三个副本，分布在不同的物理节点上，确保数据的高可用性。
  • 数据一致性：
  • 使用 Quorum 机制（例如 2/3 副本写入成功）保证数据的一致性和可靠性。

BookKeeper 的性能优化

  • 读写分离：
  • 写操作由 Leader 节点负责，读操作可以从任意副本节点执行。
  • 缓存机制：
  • BookKeeper 节点会缓存最近的数据，减少磁盘 I/O 开销。

ZooKeeper

ZooKeeper 的职责

  • 元数据管理：
  • 存储主题、分区、订阅、消费者组等元数据。
  • 记录每个消费者的消费偏移量（Offset）。
  • 集群协调：
  • 管理 Broker 和 BookKeeper 节点的状态。
  • 实现分布式锁和选举机制。

ZooKeeper 的高可用性

  • 使用多个 ZooKeeper 节点组成一个集群（Ensemble），通过 ZAB 协议实现一致性。
  • 如果某个 ZooKeeper 节点失效，其他节点会接管其工作。

相关文章：

基于Kubernetes的Apache Pulsar云原生架构解析与集群部署指南（上）

#作者：闫乾苓 文章目录 概念和架构概述主要特点消息传递核心概念Pulsar 的消息模型Pulsar 的消息存储与分发Pulsar 的高级特性架构BrokerBookKeeperZooKeeper 概念和架构 概述 Pulsar 是一个多租户、高性能的服务器到服务器消息传递解决方案。Pulsar 最初由雅虎开…...

编程日记 2025/8/13 23:40:48

信创生态核心技术栈：数据库与中间件

🧑 博主简介：CSDN博客专家、CSDN平台优质创作者，高级开发工程师，数学专业，10年以上C/C, C#, Java等多种编程语言开发经验，拥有高级工程师证书；擅长C/C、C#等开发语言，熟悉Java常用开…...

编程日记 2025/6/29 4:59:43

CMU-15445(3)——PROJECT#1-BufferPoolManager-Task#1

PROJECT#1-BufferPoolManager 在完成了前面基础的PROJECT#0后，从本节开始才正式进入了CMU-15445的学习，最终目的是构建一个面向磁盘的数据库管理系统。 PROJECT#1 的主要任务是实现数据库管理系统的缓冲池管理器，缓冲池负责在主存缓冲区与持…...

编程日记 2025/8/13 23:37:48

《数据结构初阶》【链式二叉树】

《数据结构初阶》【链式二叉树】 前言：---------------树---------------什么是树？📌爱心❤小贴士：树与非树？树的基本术语有哪些？关于节点的一些定义：关于树的一些定义：关于森林的定…...

编程日记 2025/6/29 3:08:06

Oracle免费认证来袭

1、Oracle Cloud Infrastructure 2025 Foundations Associate” 🔗 考证地址：https://mylearn.oracle.com/ou/exam-unproctored/oracle-cloud-infrastructure-2025-foundations-associate-1z0-1085-25/148056/241954 2、Oracle Cloud Infrastructure 2…...

编程日记 2025/6/29 4:09:43

Vim 编辑器常用快捷键速查表

Vim 编辑器常用快捷键速查表 Vim 快捷键大全 **1. 基础操作****2. 光标移动****3. 编辑文本****4. 查找替换****5. 分屏操作****6. 可视化模式** **附：Vim 模式切换流程图** 1. 基础操作 快捷键功能说明i进入插入模式（光标前）a进入插入模式&…...

编程日记 2025/8/13 23:38:07

从父类到子类：C++ 继承的奇妙旅程（1）

前言： 在前文，小编讲述了C模板的进阶内容，下面我们就要结束C初阶的旅行，开始进入C进阶容的旅c程，今天旅程的第一站就是C三大特性之一——继承的旅程，各位扶好扶手，开始我们今天的C继承的奇妙旅程…...

编程日记 2025/8/13 23:37:48

HTML9：页面结构分析

页面结构分析 元素名描述header标题头部区域的内容（用于页面或页面中的一块区域）footer标记脚部区域的内容（用于整个页面或页面的一块区域）sectionWeb页面的一块独立区域article独立的文章内容aside相关的内容或应用（…...

编程日记 2025/8/13 23:36:07

LabVIEW超声波液位计检定

在工业生产、运输和存储等环节，液位计的应用十分广泛，其中超声波液位计作为非接触式液位测量设备备受青睐。然而，传统立式水槽式液位计检定装置存在受建筑高度影响、量程范围受限、流程耗时长等问题，无法满足大量程超声波液位计的…...

编程日记 2025/8/13 23:37:07

maven 安装 本地 jar

命令： mvn install:install-file -DgroupIdnet.pingfang.application -DartifactIdjna -Dversion5.1.0 -Dpackagingjar -DfileD:\maven\repository1\jna\5.1.0\jna-5.1.0.jarmvn：这是Maven的执行命令。 install:install-file：这是Maven插件目…...

编程日记 2025/8/13 23:39:16

leetcode 141. Linked List Cycle

题目描述： 代码： 用哈希表也可以解决，但真正考察的是用快慢指针法。 /*** Definition for singly-linked list.* struct ListNode {* int val;* ListNode *next;* ListNode(int x) : val(x), next(NULL) {}* };*/ class Soluti…...

编程日记 2025/8/11 13:33:50

【Python】通过`Editable Install`模式详解，解决Python开发总是import出错的问题

摘要 田辛老师在很久以前，写过一篇关于Python的模块、包之间的内部关系的博客，叫做【Python】__init__.py 文件详解。 虽然我觉得这篇文章已经足够了， 但是还是有很多朋友碰到开发的过程中import包报错的问题。 今天， 田辛老师想…...

编程日记 2025/6/29 2:34:56

C 语言网络编程问题：E1696 无法打开 源 文件 “sys/socket.h“

#include <sys/socket.h> #include <netinet/in.h> #include <arpa/inet.h>在 C 语言网络编程中&#xff0c;上述代码报如下错误 E1696 无法打开 源 文件 "sys/socket.h"E1696 无法打开 源 文件 "netinet/in.h" E1696 无法打开 源 文件…...

编程日记 2025/8/13 23:38:07

操作指南*

任务1: 环境搭建 1.1 创建Spring Boot项目 操作步骤&#xff1a; 使用IDEA创建项目&#xff1a; 打开IDEA → File → New → Project选择 Spring Initializr → 设置项目信息&#xff08;Group、Artifact、Java版本&#xff09;选择依赖&#xff1a;Spring Web、MySQL Drive…...

编程日记 2025/8/13 23:31:14

VRM Add-on for Blender 学习笔记

VRM Add-on for Blender 使用教程-CSDN博客 VRM Add-on for Blender 是 Blender 的一个官方插件&#xff0c;主要用于 导入和导出 VRM 格式的 3D 模型。VRM&#xff08;Virtual Reality Model&#xff09;是一种开放标准的 3D 人形角色模型格式&#xff0c;起源于日本&#xf…...

编程日记 2025/8/13 23:35:44

C++ 完美转发

C 完美转发逐步详解 1. 问题背景与核心目标 在 C 模板编程中&#xff0c;若直接将参数传递给其他函数&#xff0c;参数的 值类别&#xff08;左值/右值&#xff09;和 类型信息&#xff08;如 const&#xff09;可能会丢失。例如&#xff1a; template<typename T> voi…...

编程日记 2025/8/13 23:39:33

学习记录：DAY23

项目开发与学习记录&#xff1a;字段注入优化 前言 我总有一种什么大的要来了的危机感。还是尽快把项目做起来吧&#xff0c;现在全在弄底层的框架。这是一个两天的blog&#xff0c;前一天bug没修好&#xff0c;气到连blog都没写。 日程 5月7日 晚上7点&#xff1a;本来想玩…...

编程日记 2025/8/13 23:36:07

Linux 信号（下篇）

Linux 信号-CSDN博客&#xff08;上篇&#xff09; 前言&#xff1a;在我上一篇博客写到了信号产生的三种条件分别是键盘组合键、kill命令、系统调用接口&#xff1b; 接下来我要把信号产生剩余的两个条件介绍完毕并理解信号的保存&#xff0c;和信号从产生到保存到处理整个过…...

编程日记 2025/8/9 22:28:33

hadoop中的序列化和反序列化（1）

1. 什么是序列化和反序列化 序列化&#xff08;Serialization&#xff09; 是将对象的状态信息转换为可以存储或传输的格式的过程。序列化后的对象可以保存到文件中&#xff0c;或者通过网络传输。 反序列化&#xff08;Deserialization&#xff09; 是序列化的逆过程&#x…...

编程日记 2025/8/13 23:37:47

linux查java进程CPU高的原因

问题&#xff1a;linux查java进程CPU高的原因 解决&#xff1a;用jdk带的工具分析 被查的java最好也使用jdk启动 systemctl启动的注意要去掉PrivateTmptrue /opt/jdk1.8.0_441/bin/jps -l top -Hp 8156 printf "%x" 8533 /opt/jdk1.8.0_441/bin/jstack 8156 |…...

编程日记 2025/8/13 23:37:48

鸿蒙开发——3.ArkTS声明式开发:构建第一个ArkTS应用

鸿蒙开发——3.ArkTS声明式开发:构建第一个ArkTS应用 一、创建ArkTS工程二、ArkTS工程目录结构&#xff08;Stage模型&#xff09;三、构建第一个页面四、构建第二个页面五、实现页面之间的跳转六、模拟器运行 一、创建ArkTS工程 1、若首次打开DevEco Studio&#xff0c;请点击…...

编程日记 2025/8/13 14:30:49

vue3+ts的watch全解！

vue3中的watch只能监听以下四种数据&#xff1a; 1.ref定义的数据 2.reactive定义的数据 3.函数返回一个值&#xff08;getter函数&#xff09; 4.一个包含上述内容的数组 通常我们在使用watch的时候&#xff0c;通常会遇到以下几种情况&#xff1a; 情况一&#xff1a; …...

编程日记 2025/8/13 23:39:17

yarn的概述

1.Yarn的定义 2.Yarn的三大组件 3.Yarn的调度策略 1. YARN的定义 YARN&#xff08;Yet Another Resource Negotiator&#xff09; 是Hadoop生态系统中的一个资源管理框架&#xff0c;用于管理和调度集群中的计算资源。它允许多个应用程序在同一个集群上高效地运行&#xff0c;…...

编程日记 2025/8/13 23:39:34

C++初阶-string类4

目录 1.String operations 1.1string::c_str 1.2string::data 1.3string::copy 1.4string::find 1.5string::rfind 1.6string::find_first_of 1.7string::find_last_of 1.8string::find_first_not_of和string::find_last_not_of find_first_not_of 功能 典型用途 f…...

编程日记 2025/6/29 4:34:14

HarmonyOS NEXT深度解析：自研框架ArkUI-X的技术革命与跨平台实践

HarmonyOS NEXT&#xff5e;深度解析&#xff1a;自研框架ArkUI-X的技术革命与跨平台实践 引言&#xff1a;ArkUI-X的诞生背景与战略意义 在HarmonyOS NEXT全面摒弃AOSP代码的历史性转折点上&#xff0c;华为推出的ArkUI-X框架标志着国产操作系统研发进入深水区。根据华为202…...

编程日记 2025/8/13 17:23:50

CUDA：out of memory的解决方法（实测有效）

一、问题概述 1.问题分析 CUDA out of memory问题通常发生在深度学习训练过程中&#xff0c;当GPU的显存不足以容纳模型、输入数据以及中间计算结果时就会触发。这个问题可能由几个因素引起&#xff1a; 模型和数据规模&#xff1a;深度学习模型尤其是大型模…...

编程日记 2025/8/13 23:35:42

canal mysqltomysql增加同步的库操作

例如增加库 online 1、停止canal.adapter 服务。 ./bin/stop.sh2、备份数据库online&#xff0c;导入目标mysql 备份 mysqldump -h 127.0.0.1 -P 3307 --single-transaction -uroot -p -B online > online.sql导入 mysql -h 127.0.0.1 -P 3308 -uroot -p < onl…...

编程日记 2025/8/13 19:44:10

【AI】模型与权重的基本概念

在 ModelScope 平台上&#xff0c;「模型」和「权重」的定义与工程实践紧密结合&#xff0c;理解它们的区别需要从实际的文件结构和加载逻辑入手。以下是一个典型 ModelScope 模型仓库的组成及其概念解析&#xff1a; 1. ModelScope 模型仓库的典型结构 以 deepseek-ai/deepse…...

编程日记 2025/8/13 18:29:16

k8s 中 deployment 管理的多个 pod 构成集群吗

在 Kubernetes (k8s) 中&#xff0c;通过 Deployment 创建的多个 Pod 本身并不构成一个“集群”&#xff0c;而是属于同一个 工作负载&#xff08;Workload&#xff09; 的多个副本实例。它们的角色是 无状态服务副本&#xff0c;而非独立的集群节点。以下是详细解释&#xff1…...

编程日记 2025/6/29 9:00:55

「动态规划」线性DP：股票问题合集 / LeetCode 121|122|123|188 （C++）

目录 概述 Question1 思路 算法过程 Code 复杂度 Question2 思路 解题过程 Code 复杂度 Question3 思路 解题过程 Code 复杂度 Question4 思路 解题过程 Code 复杂度 总结 概述 我们已经了解过了线性DP&#xff1a; 「动态规划」线性DP&#xff1a;最长…...

编程日记 2025/8/13 21:27:13

【Python os模块完全指南】从基础到高效文件操作

目录 &#x1f31f; 前言&#x1f9e9; 技术背景与价值&#x1f6a7; 当前技术痛点&#x1f6e0;️ 解决方案概述&#x1f465; 目标读者说明 &#x1f4da; 一、技术原理剖析&#x1f3a8; 核心概念图解&#x1f4a1; 核心作用讲解&#x1f511; 关键技术模块说明⚖️ 技术选型…...

编程日记 2025/8/13 23:34:20

Ubuntu 安装 Keepalived、LVS

Keepalived Keepalived 是什么&#xff08;高可用&#xff09; Keepalived 是一个用于实现 高可用 性&#xff08;High Availability, HA&#xff09;的服务&#xff0c;是一款基于 VRRP 协议的高可用软件&#xff0c;常用于主备切换和虚拟IP漂移&#xff0c;在服务故障时自动…...

编程日记 2025/6/29 3:50:20

记录一个rabbitmq因为linux主机名服务无法启动的问题

https://g.co/gemini/share/fb5a55644f6f 过程因为主机名为数字导致之间无法进行网络访问&#xff0c;导致无法开启。修改主机名解决这一问题&#xff0c;debian在系统安装时会指定一个用户名&#xff0c;一般为IP地址的第一块&#xff0c;数字导致了无法访问。 #使用命令查看…...

编程日记 2025/8/13 23:39:33

打造个人知识库，wsl+ollama部署deepseek与vscode集成

目前大模型应用如火如荼，各大LLM如Deepseek也都提供了在线的助手服务，结合mcp-server还可以进一步拓展到本地的工具能力。 但对于一些和本地业务和数据强相关的资料，在线的大模型训练数据集一般并不能涵盖，特别还有一些敏感或对安全要求很高的数据，使用在线大模型并不现实…...

编程日记 2025/8/13 23:37:08

Spring 项目无法连接 MySQL：Nacos 配置误区排查与解决

在开发过程中&#xff0c;我们使用 Nacos 来管理 Spring Boot 项目的配置&#xff0c;其中包括数据库连接配置。然而&#xff0c;在实际操作中&#xff0c;由于一些概念的混淆&#xff0c;我们遇到了一些连接问题。本文将分享我的故障排查过程&#xff0c;帮助大家避免类似的错…...

编程日记 2025/6/29 4:39:14

P值、置信度与置信区间的关系：统计推断的三大支柱

目录 引言一、P值是什么&#xff1f;——假设检验的“证据强度”1.1 定义1.2 判断标准&#xff1a;显著性水平 α \alpha α&#xff08;阿尔法&#xff09;1.3 示例说明 二、置信区间与置信度&#xff1a;参数估计的“不确定性范围”2.1 置信区间的定义2.2 置信度的含义 三、显…...

编程日记 2025/6/29 2:39:37

探索智能仓颉：Cangjie Magic开发体验

探索智能仓颉：Cangjie Magic 的开发体验与技术革新 在大型语言模型（LLM）驱动的智能体开发领域，2025年3月开源的 Cangjie Magic 以其独特的原生仓颉语言基因和三大核心技术突破，为开发者提供了一种全新的开发范式。本文将从技术架构、实际应用、开发体验及未来潜力等角度，…...

编程日记 2025/6/29 4:32:41

$在R语言中的作用

在 R 语言中&#xff0c;$ 是一个非常重要的操作符&#xff0c;主要用于访问对象的成员或组件。它的用途非常广泛&#xff0c;不仅限于数据框&#xff08;data frame&#xff09;&#xff0c;还可以用于列表&#xff08;list&#xff09;、环境&#xff08;environment&#xf…...

编程日记 2025/8/12 4:29:43

【Pandas】pandas DataFrame rolling

Pandas2.2 DataFrame Function application, GroupBy & window 方法描述DataFrame.apply(func[, axis, raw, …])用于沿 DataFrame 的轴&#xff08;行或列&#xff09;应用一个函数DataFrame.map(func[, na_action])用于对 DataFrame 的每个元素应用一个函数DataFrame.a…...

编程日记 2025/6/29 4:39:36

新疆地区主要灾害链总结

新疆地处亚欧大陆腹地，拥有高山（如天山、昆仑山）、盆地（如塔里木盆地、准噶尔盆地）、沙漠（如塔克拉玛干沙漠）、绿洲、内陆河流和冰川等复杂多样的地貌单元。其气候极端，干旱少雨是常态，但山区夏季暴雨集中、冬季积雪深厚，地质构造活跃，地震风险高。这些特点共同决定…...

编程日记 2025/6/29 4:12:16

在 Vue 2 中使用 qrcode 库生成二维码

&#x1f31f; 前言 欢迎来到我的技术小宇宙&#xff01;&#x1f30c; 这里不仅是我记录技术点滴的后花园&#xff0c;也是我分享学习心得和项目经验的乐园。&#x1f4da; 无论你是技术小白还是资深大牛&#xff0c;这里总有一些内容能触动你的好奇心。&#x1f50d; &#x…...

编程日记 2025/8/9 7:25:35

在 Ubuntu 系统中，挂起（Suspend）和休眠（Hibernate）

在 Ubuntu 系统中&#xff0c;挂起&#xff08;Suspend&#xff09;和休眠&#xff08;Hibernate&#xff09;是两种常见的电源管理模式。以下是相关命令及说明&#xff1a; --- ### **1. 挂起&#xff08;Suspend&#xff09;** 挂起会将当前系统状态保存到内存中&#xff0…...

编程日记 2025/8/12 8:36:37

什么是声明式UI什么是命令式UI？鸿蒙ArkTS为什么是声明式UI-优雅草卓伊凡

什么是声明式UI什么是命令式UI&#xff1f;鸿蒙ArkTS为什么是声明式UI-优雅草卓伊凡 一、UI编程范式的根本分野 在软件开发领域&#xff0c;用户界面(UI)构建方式经历了三次重大范式转换。作为优雅草科技CTO&#xff0c;卓伊凡在多个操作系统开发实践中发现&#xff0c;UI框架…...

编程日记 2025/6/29 4:33:19

nRF Connect SDK system off模式介绍

目录 概述 1. 软硬件环境 1.1 软件开发环境 1.2 硬件环境 2 System Off 模式 2.1 模式介绍 2.2 注意事项 3 功能实现 3.1 框架结构介绍 3.2 代码介绍 4 功能验证 4.1 编译和下载代码 4.2 测试 4.3 使能CONFIG_APP_USE_RETAINED_MEM的测试 5 main.c的源代码文件…...

编程日记 2025/8/12 13:33:32

node.js 实战——餐厅静态主页编写（express+node+ejs+bootstrap）

ejs页面 <!DOCTYPE html> <html> <head><title><% title %></title><link relstylesheet href/stylesheets/style.css/><link relstylesheet href/stylesheets/font-awesome.css/><link relstylesheet href/stylesheets/f…...

编程日记 2025/8/13 20:37:11

晶体布局布线

1Clock时钟电路 时钟电路就是类似像时钟一样准确运动的震荡电路&#xff0c;任何工作都是依照时间顺序&#xff0c;那么产生这个时间的电路就是时钟电路&#xff0c;时钟电路一般是由晶体振荡器、晶振、控制芯片以及匹配电容组成 2.时钟电路布局 晶体电路布局需要优先考虑&…...

编程日记 2025/6/29 3:11:55

数据结构--树

一、树的概念 树是由n(n≥0)个节点组成的有限集合&#xff0c;它满足以下条件&#xff1a; 1. 当n0时&#xff0c;称为空树 2. 当n>0时&#xff0c;有且仅有一个特定的节点称为根节点(root) 3. 其余节点可分为m(m≥0)个互不相交的有限集合&#xff0c;每个集合本身又是一…...

编程日记 2025/6/29 4:06:36

5月7号.

flex布局: 表单标签: 表单标签-表单项:...

编程日记 2025/6/29 3:50:06

Spark 之 YarnCoarseGrainedExecutorBackend

YarnCoarseGrainedExecutorBackend executor ID ， 在日志里也有体现。 25/05/06 12:41:58 INFO YarnCoarseGrainedExecutorBackend: Successfully registered with driver 25/05...

编程日记 2025/6/29 5:03:38

Webug4.0靶场通关笔记19- 第24关邮箱轰炸

目录 第24关 邮箱轰炸 1.配置环境 2.打开靶场 3.源码分析 4.邮箱轰炸 &#xff08;1&#xff09;注册界面bp抓包 &#xff08;2&#xff09;发送到intruder &#xff08;3&#xff09;配置position &#xff08;4&#xff09;配置payload &#xff08;5&#xff09;开…...

编程日记 2025/6/29 3:27:40