当前位置： 首页 > news >正文

Apache Pulsar 消息、流、存储的融合

news 来源：原创 2025/6/28 6:14:26

Apache Pulsar 消息、流、存储的融合

消息队列在大层面有两种不同类型的应用，一种是在线系统的message queue，一种是流计算，data pipeline的streaming高throughout，一致性较低，延迟较差的过程。

存算分离 扩容和缩容快速

segment 打散（时间和容量切分）多机器能力

多租户的能力，配额

原来的架构，多种消息中间件不同场景不同选型

统一兼容旧系统协议，统一存储bookkeeper

内部二级分层存储，统一批存储和流存储（之前外部系统计算存储到HDFS）

统一抽象管理，统一视图topic抽象，但是优化存储位置历史数据列存等

云原生的能力

Apache BookKeeper：Apache Pulsar的高可用强一致低延迟的存储实现

可调整（带宽，灾备等级，一致性等级）

新起一份fragment承载写

writer变成master，底层存储是对等节点（区别raft一致性）

两个writer有点像paxos

磁盘隔离WAL，数据盘隔离（可变换）

PMEM，快，容量小，寿命高，比SSD更适合做journal

Apache Pulsar 依赖的 Apache BookKeeper 作为其底层存储引擎，其架构设计与优化机制具有鲜明的分布式系统特征。以下从架构概念、适用场景、高可用优化及一致性保障等维度进行结构化解析：

一、核心架构概念

  1. ‌存储单元与数据结构‌

    • ‌Entry‌：最小存储单元，每个 Entry 包含唯一递增的序列号，支持随机访问和批量读取2。
    • ‌Ledger‌：由多个 Entry 组成的有序日志段，具有不可变性（一旦关闭无法追加）和原子性（写入成功或全失败）26。
    • ‌Stream‌：逻辑上的无限数据流，由多个 Ledger 组成；当单个 Ledger 达到空间或时间阈值时，自动创建新 Ledger2。
    • ‌Bookie 节点‌：存储节点，每个节点包含 Journal（预写日志）、Entry Log（Entry 持久化文件）和 Index Files（索引文件）6。

  2. ‌分片存储架构‌
    Pulsar 将 Topic 分区的数据切分为多个 Segment（即 BookKeeper Ledger），每个 Segment 独立存储于不同 Bookie 节点，实现细粒度负载均衡和扩展性37。

二、适用场景

  • ‌消息系统‌：为 Pulsar 提供持久化存储，支持低延迟（<5ms）的流式追尾写入25。
  • ‌分布式日志‌：适用于需要强一致性与容错的日志存储（如 HDFS NameNode 的 Edit Log）6。
  • ‌WAL（预写日志）‌：为数据库或分布式系统提供事务日志的高可靠存储6。
  • ‌跨数据中心复制‌：支持多集群间的数据同步与一致性保障2。

三、读写高可用优化

  1. ‌Quorum 机制‌
    写入时客户端并行发送 Entry 至多个 Bookie 节点，需多数节点（例如 3/5）确认成功，确保数据冗余且容忍节点故障1。
  2. ‌动态 Ensemble 调整‌
    根据负载动态调整写入的 Bookie 节点组合，避免热点问题并提升吞吐量1。
  3. ‌并行读取优化‌
    读操作可并发从多个副本获取数据，优先返回最快响应，降低延迟16。
  4. ‌分片存储负载均衡‌
    通过 Segment 切分策略，将数据均匀分布至集群，避免单节点瓶颈37。

四、一致性保障机制

  1. ‌写入一致性‌
    基于 Quorum 的多数确认策略，保证至少多数副本持久化成功后才返回客户端确认16。
  2. ‌LastAddConfirmed (LAC)‌
    客户端通过 LAC 标记追踪已持久化的最新 Entry，确保读操作仅访问已确认数据18。
  3. ‌Fencing 机制‌
    当检测到旧 Writer 可能异常时，新 Writer 通过 fencing 操作标记旧 Ledger 为不可写，避免多 Writer 冲突（脑裂）18。
  4. ‌Ledger 不可变性‌
    已关闭的 Ledger 不可修改，防止数据篡改并简化一致性管理2。

五、Writer 脑裂避免

  • ‌Fencing 流程‌：新 Writer 启动时会对旧 Ledger 发起 fencing 请求，通过元数据服务（如 ZooKeeper）验证所有权，确保同一时刻仅一个有效 Writer18。（实际上也就是用外部选主，简化存储层设计，达到对等节点）
  • ‌原子性元数据更新‌：Ledger 元数据（如状态、Owner）需通过原子操作更新，避免并发冲突6。

六、其他重要概念

  • ‌跨机房复制‌：通过异步复制机制实现多集群间数据同步，支持地理容灾2。
  • ‌分层存储‌：支持将冷数据迁移至廉价存储（如 HDFS），降低存储成本6。
  • ‌计算存储分离‌：Pulsar Broker 处理计算逻辑，BookKeeper 专注存储，提升系统弹性与扩展性37。

通过上述设计，BookKeeper 在高吞吐、低延迟与强一致性之间取得平衡，成为云原生场景下可靠的分布式存储基石。

深入对比 Apache Pulsar 与 Kafka

kafka横向扩展困难，以及kafka的弹性伸缩困难

以下从追尾读、切Segment、容错恢复迁移速度、存算分离等角度对Kafka与Pulsar进行深度对比分析：

一、追尾读（Tailing Reads）

  1. ‌Kafka‌

    • 采用消费者主动拉取机制，尾部读取延迟受消费者轮询频率影响。在高吞吐场景下，若Topic分区数过多或消费者组协调复杂，可能出现尾部延迟波动现象25。
    • Broker同时承担计算与存储职责，尾部读取可能因磁盘IO压力导致性能下降8。

  2. ‌Pulsar‌

    • 通过无状态Broker和预读缓存机制优化尾部读取性能，在同等负载下延迟可稳定低于5ms5。
    • 存储与计算分离架构减少了Broker的磁盘IO竞争，结合BookKeeper的条带化写入策略，尾部读取吞吐量更高38。

二、切Segment机制

  1. ‌Kafka‌

    • 每个分区由多个Segment文件组成，按时间或大小拆分。切Segment时需同步更新索引文件，若写入速率极高可能导致短暂写入阻塞3。
    • Segment文件本地存储，扩容时需跨节点迁移数据，影响集群整体性能6。

  2. ‌Pulsar‌

    • 基于BookKeeper存储层，Segment（Ledger）以分布式副本形式存储在多个Bookie节点上，切Segment仅需关闭当前Ledger并创建新Ledger，过程无阻塞38。
    • 新Segment写入直接分配到可用Bookie节点，天然支持水平扩展，无需数据迁移3。

三、容错恢复与迁移速度

  1. ‌Kafka‌

    • 副本恢复依赖ISR（In-Sync Replicas）机制，副本同步过程需全量复制数据，迁移速度受网络带宽和磁盘I/O限制6。
    • 分区再平衡时需重新选举Leader并同步数据，大规模集群下耗时显著增长3。

  2. ‌Pulsar‌

    • 存储层BookKeeper采用多副本Quorum写入（Write Quorum + Ack Quorum），单Bookie故障时自动切换至健康节点，恢复无需数据拷贝，仅需重放未确认的Entry8。
    • Broker无状态设计，故障节点可快速替换，Topic分区自动迁移至新Broker，延迟仅取决于ZooKeeper元数据同步时间36。

四、存算分离架构

  1. ‌Kafka‌

    • 存算一体架构，Broker同时负责消息处理和存储，扩容需同时调整计算与存储资源，难以独立扩展6。
    • 云原生适配性较弱，需依赖外部工具（如Kubernetes StatefulSets）实现动态扩缩容3。

  2. ‌Pulsar‌

    • ‌计算层（Broker）与存储层（Bookie）完全解耦‌，支持独立扩缩容。Broker无状态，可快速水平扩展；Bookie节点动态增减不影响数据一致性38。
    • 原生适配云原生环境，结合Kubernetes可实现秒级弹性伸缩，资源利用率提升30%以上36。
    • 数据存储采用分层设计，冷热数据可分离至不同存储介质（如SSD/HDD），进一步降低成本8。

五、其他关键差异

维度KafkaPulsar
‌多租户支持‌需手动隔离，依赖外部管控工具7原生支持租户级资源配额及Namespace隔离3
‌Topic扩展性‌单集群支持约数万Topic6单集群支持超50万Topic且性能稳定3
‌数据一致性‌依赖ISR机制，极端场景可能丢数8Quorum写入+强一致性模型，金融级可靠性8

总结

  • ‌Kafka‌更适合对吞吐量要求极高且集群规模相对固定的场景，但运维复杂度较高。
  • ‌Pulsar‌在动态扩缩容、低延迟追尾读、快速容错恢复等方面优势显著，尤其适合云原生环境及需要强一致性的金融级应用35。

相关文章：

Apache Pulsar 消息、流、存储的融合

Apache Pulsar 消息、流、存储的融合 消息队列在大层面有两种不同类型的应用&#xff0c;一种是在线系统的message queue&#xff0c;一种是流计算&#xff0c;data pipeline的streaming高throughout&#xff0c;一致性较低&#xff0c;延迟较差的过程。 存算分离 扩容和缩容快…...

编程日记 2025/6/28 6:14:26

从零实现一个高并发内存池 - 2

上一篇https://blog.csdn.net/Small_entreprene/article/details/147904650?fromshareblogdetail&sharetypeblogdetail&sharerId147904650&sharereferPC&sharesourceSmall_entreprene&sharefromfrom_link 高并发内存池 - thread cache 一、基本结构与原…...

编程日记 2025/6/28 22:53:05

promise

handleFileChange(event) {var that this;// 处理文件上传并传递回调函数this.$commonJS.handleFileUpload(event, function (tables) {console.log(tables at line 786:, tables);// 使用 Promise.all 等待所有表格解析完成Promise.all(tables.map((table) > {return new …...

编程日记 2025/6/28 23:33:15

Django + Celery 打造企业级大模型异步任务管理平台 —— 从需求到完整实践（含全模板源码）

如需完整工程文件（含所有模板），可回复获取详细模板代码。 面向人群：自动化测试工程师、企业中后台开发人员、希望提升效率的 AI 业务从业者 核心收获：掌握 Django 三表关系设计、Celery 异步任务实践、基础 Web 交互与前后端分离思路，源码可直接落地，方便二次扩展 一、系…...

编程日记 2025/6/29 1:06:07

从零开始完成“大模型在牙科诊所青少年拉新系统中RAG与ReACT功能实现”的路线图

项目核心目标&#xff1a; 构建一个智能系统&#xff0c;利用大型语言模型&#xff08;LLM&#xff09;、检索增强生成&#xff08;RAG&#xff09;和推理与行动&#xff08;ReACT&#xff09;技术&#xff0c;通过七个专门的知识向量库&#xff0c;为牙科诊所精准吸引青少年客…...

编程日记 2025/6/28 16:50:09

c# 倒序方法

在C#中&#xff0c;有几种方法可以对List进行倒序排列&#xff1a; 1. 使用List的Reverse()方法&#xff08;原地反转&#xff09; List<int> numbers new List<int> { 1, 2, 3, 4, 5 };numbers.Reverse(); // 直接修改原列表// 结果&#xff1a;5, 4, 3, 2, 1 …...

编程日记 2025/6/29 0:36:01

【！！！！终极 Java 中间件实战课：从 0 到 1 构建亿级流量电商系统全链路解决方案！！！！保姆级教程---超细】

终极 Java 中间件实战课&#xff1a;电商系统架构实战教程 电商系统架构实战教程1. 系统架构设计1.1 系统模块划分1.2 技术选型 2. 环境搭建2.1 开发环境准备2.2 基础设施部署 3. 用户服务开发3.1 创建Maven项目3.2 创建用户服务模块3.3 配置文件3.4 实体类与数据库设计3.5 DAO…...

编程日记 2025/6/28 1:39:30

HarmonyOs开发之———使用HTTP访问网络资源

谢谢关注&#xff01;&#xff01; 前言&#xff1a;上一篇文章主要介绍HarmonyOs开发之———Video组件的使用:HarmonyOs开发之———Video组件的使用_华为 video标签查看-CSDN博客 HarmonyOS 网络开发入门&#xff1a;使用 HTTP 访问网络资源 HarmonyOS 作为新一代智能终端…...

编程日记 2025/6/29 0:29:30

Java Queue 接口实现

Date: 2025.05.14 20:46:38 author: lijianzhan Java中的Queue接口是位于java.util包中&#xff0c;它是一个用于表示队列的接口。队列是一种先进先出&#xff08;First-In-First-Out, 简称为FIFO&#xff09;的数据结构&#xff0c;其中元素被添加到队列的尾部&#xff0c;并从…...

编程日记 2025/6/28 22:53:06

【IDEA】注释配置

1. IDEA注释调整&#xff0c;去掉默认在第一列显示 修改为如下&#xff1a; 2. IDEA中修改代码中的注释颜色...

编程日记 2025/6/28 23:45:49

day25 python异常处理

目录 Python 的异常处理机制 核心概念 常见的异常处理结构 try-except try-except-else 常见异常类型 SyntaxError&#xff08;语法错误&#xff09; NameError&#xff08;名称错误&#xff09; TypeError&#xff08;类型错误&#xff09; ValueError&#xff08;值…...

编程日记 2025/6/28 22:53:17

【测试】BUG

目录 1、描述BUG的要素&#xff1a; 2、BUG的级别 3、BUG的状态的流转 4、与开发产⽣争执怎么办&#xff08;⾼频考题&#xff09; 什么是BUG&#xff1f;&#xff1f;&#xff1f; 程序与规格说明之间的不匹配才是错误 1、描述BUG的要素&#xff1a; 问题出现的版本、问…...

编程日记 2025/6/29 5:28:05

Java面向对象三大特性深度解析

Java面向对象三大特性封装继承多态深度解析 前言一、封装&#xff1a;数据隐藏与访问控制的艺术1.1 封装的本质与作用1.2 封装的实现方式1.2.1 属性私有化与方法公开化1.2.2 封装的访问修饰符 二、继承&#xff1a;代码复用与类型扩展的核心机制2.1 继承的定义与语法2.2 继承的…...

编程日记 2025/6/29 0:58:23

C 语言学习笔记（8）

内容提要 数组 数组的概念一维数组 数组 数组的概念 什么是数组 数组是相同类型&#xff0c;有序数据的集和 数组的特征 数组中的数据被称之为数组的元素&#xff08;所谓的元素&#xff0c;其实就是数组的每一个匿名的变量空间&#xff09;&#xff0c;是同构。数组中的…...

编程日记 2025/6/28 13:10:32

Screen Mirroring App：轻松实现手机与电视的无缝投屏

Screen Mirroring App 是一款由2kit consulting发行的电视投屏软件&#xff0c;专为用户提供便捷的投屏解决方案。它支持将手机和平板屏幕上的内容实时投射到大电视上&#xff0c;无论是观看影视作品、玩游戏、浏览照片还是阅读电子书&#xff0c;都能提供清晰、稳定的画质和流…...

编程日记 2025/6/29 1:13:13

html js 原生实现web组件、web公共组件、template模版插槽

在现代浏览器中&#xff0c;通过 class 继承 HTMLElement 可以轻松创建原生 Web Components&#xff08;自定义元素&#xff09;&#xff0c;并能享受与普通 HTML 元素同等的语义和性能优势。下面将从核心概念、生命周期方法、Shadow DOM、表单关联、自定义属性、以及与 Vue 3 …...

编程日记 2025/6/28 23:51:24

【爬虫】DrissionPage-2

之前的三个对象是4.0版本&#xff0c;看到的是网上大佬们网上的文章&#xff0c;因为看到官网更新了4.1&#xff0c;我觉得有必要了解一下&#xff1a;文档地址&#xff1a;&#x1f4a5; 4.1 功能介绍 | DrissionPage官网 点击链接看官网就行&#xff0c;下面一样的。 4.1 的…...

编程日记 2025/6/28 23:31:54

鸿蒙OSUniApp 制作个人信息编辑界面与头像上传功能#三方框架 #Uniapp

UniApp 制作个人信息编辑界面与头像上传功能 前言 最近在做一个社交类小程序时&#xff0c;遇到了需要实现用户资料编辑和头像上传的需求。这个功能看似简单&#xff0c;但要做好用户体验和兼容多端&#xff0c;还是有不少细节需要处理。经过一番摸索&#xff0c;总结出了一套…...

编程日记 2025/6/28 22:53:07

系统漏洞扫描服务：维护网络安全的关键与服务原理？

系统漏洞扫描服务是维护网络安全的关键措施&#xff0c;能够迅速发现系统中的潜在风险&#xff0c;有效预防可能的风险和损失。面对网络攻击手段的日益复杂化&#xff0c;这一服务的重要性日益显著。 服务原理 系统漏洞扫描服务犹如一名恪尽职守的安全守护者。它运用各类扫描…...

编程日记 2025/6/28 23:48:41

[原创](现代C++ Builder 12指南): 在界面开发中, 如何利用C++高级特性“折叠表达式“?.

[序言] 在现代C++编程中, 现代C++引入的折叠表达式(Fold Expressions)是一项极具价值的特性, 它为模板编程带来了更高的灵活性和简洁性. 折叠表达式允许在参数包上执行简洁的折叠操作, 从而减少冗余代码, 提升代码的可读性与维护性. 在界面开发领域, 特别是使用C++ Builder 12进…...

编程日记 2025/6/29 0:41:56

KUKA机器人中断编程3—暂停功能的编程

在KUKA机器人的使用过程中&#xff0c;对于调试一个项目&#xff0c;当遇到特殊情况时需要暂停机器人&#xff0c;等异常情况处理完成后再继续机器人的程序运行。wait for指令是等待一个输入信号指令&#xff0c;没有输入信号&#xff0c;机器人一直等待。在一定程度上程序也不…...

编程日记 2025/6/28 23:33:36

【LeetCode 热题 100】反转链表 / 回文链表 / 有序链表转换二叉搜索树 / LRU 缓存

⭐️个人主页&#xff1a;小羊 ⭐️所属专栏&#xff1a;LeetCode 热题 100 很荣幸您能阅读我的文章&#xff0c;诚请评论指点&#xff0c;欢迎欢迎 ~ 目录 相交链表反转链表回文链表环形链表环形链表 II合并两个有序链表两数相加删除链表的倒数第 N 个结点两两交换链表中的…...

编程日记 2025/6/28 6:50:40

Seata源码—1.Seata分布式事务的模式简介

大纲 1.Seata分布式事务框架简介 2.Seata AT模式实现分布式事务的机制 3.Seata AT模式下的写隔离机制 4.Seata AT模式下的读隔离机制 5.官网示例说明Seata AT模式的工作机制 6.Seata TCC模式的介绍以及与AT模式区别 7.Seata Saga模式的介绍 8.单服务多个库的分布式事务…...

编程日记 2025/6/28 22:53:09

牛客——签到题

分析 我拿到题就去看了示例&#xff0c;可以发现&#xff0c;并非是让难度最小&#xff0c;或者难度系数出现次数最多的成为签到题的难度。那我就有点懵了。。。。。。 但仔细观察题目本身的特定条件和目标&#xff0c;即在满足选择 m 道题的前提下&#xff0c;尽可能多地选择…...

编程日记 2025/6/29 0:53:08

【idea】调试篇 idea调试技巧合集

前言&#xff1a;之前博主写过一篇idea技巧合集的文章&#xff0c;由于技巧过于多了&#xff0c;文章很庞大&#xff0c;所以特地将调试相关的技巧单独成章, 调试和我们日常开发是息息相关的&#xff0c;用好调试可以事半功倍 文章目录 1. idea调试异步线程2. idea调试stream流…...

编程日记 2025/6/28 23:30:56

k8s监控方案实践补充（一）：部署Metrics Server实现kubectl top和HPA支持

k8s监控方案实践补充&#xff08;一&#xff09;&#xff1a;部署Metrics Server实现kubectl top和HPA支持 文章目录 k8s监控方案实践补充&#xff08;一&#xff09;&#xff1a;部署Metrics Server实现kubectl top和HPA支持一、Metrics Server简介二、Metrics Server实战部署…...

编程日记 2025/6/28 23:46:44

直流电机风速仪

在处理直流电机风速仪的 ADC 读取问题时&#xff0c;下面为你详细介绍实现方法。 硬件连接 风速仪的输出通常是模拟信号&#xff0c;所以需要把它连接到微控制器的 ADC 输入引脚。比如&#xff0c;在 Arduino 上可以连接到 A0 - A5 这类模拟输入引脚。 ADC 读取原理 风速仪…...

编程日记 2025/6/28 22:53:10

dify 连接不上ollama An error occurred during credentials validation:

三大报错 An error occurred during credentials validation: HTTPConnectionPool(hosthost.docker.internal, port11434): Max retries exceeded with url: /api/chat (Caused by NameResolutionError("<urllib3.connection.HTTPConnection object at 0x7f26fc3c00b0&…...

编程日记 2025/6/29 0:38:11

19、云端工业物联网生态组件 - 工厂能效与预测维护 - /数据与物联网组件/cloud-iiot-factory-analysis

76个工业组件库示例汇总 云端工业物联网生态组件 - 工厂能效与预测维护 (模拟) 概述 这是一个交互式的 Web 组件&#xff0c;旨在模拟一个云端工业物联网 (IIoT) 平台的核心界面&#xff0c;专注于工厂层面的能效分析和基于传感器数据的预测性维护概念。用户可以监控模拟的设…...

编程日记 2025/6/28 22:54:06

python打卡day25

python的异常处理机制 知识点回顾&#xff1a; 异常处理机制debug过程中的各类报错try-except机制try-except-else-finally机制 在即将进入深度学习专题学习前&#xff0c;我们最后差缺补漏&#xff0c;把一些常见且重要的知识点给他们补上&#xff0c;加深对代码和流程的理解。…...

编程日记 2025/6/29 0:36:08

Jmeter变量传递介绍

文章目录 一、Jmeter变量类型及作用域二、变量传递方式1. 用户定义变量&#xff08;User Defined Variables&#xff09;2. CSV 数据文件&#xff08;CSV Data Set Config&#xff09;3.正则表达式提取器4.后置处理器&#xff08;Post Processor)4.1BeanShell/JSR223 后置处理器…...

编程日记 2025/6/28 22:53:18

机器学习 Day16 聚类算法 ，数据降维

聚类算法 1.简介 1.1 聚类概念 无监督学习&#xff1a;聚类是一种无监督学习算法&#xff0c;不需要预先标记的训练数据 相似性分组&#xff1a;根据样本之间的相似性自动将样本归到不同类别 相似度度量&#xff1a;常用欧式距离作为相似度计算方法 1.2 聚类vs分类 聚类&…...

编程日记 2025/6/28 23:10:42

白日梦：一个方便快捷的将故事制作成视频的工具

我有故事&#xff0c;但我想把它制作成视频&#xff0c;有没有什么好用的工具可以使用呢&#xff1f;如果你也被类似的问题困扰&#xff0c;那么今天分享的这个工具将会解决这个问题。从需求来看&#xff0c;我们希望的是纯文本的故事输入&#xff0c;完整的故事视频输出&#…...

编程日记 2025/6/28 23:20:04

ultralytics中tasks.py---parse_model函数解析

一、根据scale获取对应的深度、宽度和最大通道数 具体例如yaml文件内容如下： depth=0.33,那么重复的模块例如C2f原本重复次数是3，6，6，3，那么T对应的模型重复次数就是三分之一即1，1，2，1次。这个在后面定义的： width=0.25，max_channels=1024 原本c2=64,但经过make_div…...

编程日记 2025/6/28 23:12:56

Codeforces Round 1003 (Div. 4)

A. Skibidus and Amog’u 题目大意 给你一个字符串&#xff0c;把末尾的us换成i 解题思路 删掉最后两个加上“i”即可 代码实现 #include <bits/stdc.h>using i64 long long;int main() {std::ios::sync_with_stdio(false);std::cin.tie(0);std::cout.tie(0);int …...

编程日记 2025/6/28 23:47:56

基于RFSOC ZU28DR+DSP 6U VPX处理板

板卡概述 基于RFSOC ZU28DRDSP 6U VPX处理板&#xff0c;是一款基于6U VPX总线架构的高速信号处理平台&#xff0c;数模混合信号处理卡&#xff0c;采用 Xilinx ZYNQ UltraScale RFSoC ZU28DR和TI DSP TMS320C6678组合设计&#xff0c;两者之间通过4x 5G SRIO互联。本板卡可实…...

编程日记 2025/6/28 23:43:07

C# 通过脚本实现接口

以前C#脚本用的委托注入模式&#xff0c;今天在AI提示下&#xff0c;尝试用脚本直接实现接口&#xff0c;然后C#可以动态或指定新类型创建接口实现对象。从代码角度看&#xff0c;稍显复杂&#xff0c;但脚本方面显得更简洁和有条理。 引用包需要Microsoft.CodeAnalysis、Micro…...

编程日记 2025/6/29 0:03:21

代码随想录算法训练营Day58

力扣695.岛屿的最大面积【medium】 力扣827.最大人工岛【hard】 一、力扣695.岛屿的最大面积【medium】 题目链接&#xff1a;力扣695.岛屿的最大面积 视频链接&#xff1a;代码随想录 1、思路 和岛屿数量那道题很像&#xff0c;只是递归这边要多一个怎么计算面积&#xff0c…...

编程日记 2025/6/29 0:19:23

若依框架页面

1.页面地址 若依管理系统 2.账号和密码 管理员 账号admin 密码admin123 运维 账号yuwei 密码123456 自己搭建的地址方便大家学习&#xff0c;不要攻击哦&#xff0c;谢谢啊...

编程日记 2025/6/29 0:20:45

redis 缓存穿透，缓存击穿，缓存雪崩

一&#xff1a;什么是缓存 &#xff08;1&#xff09;计算机&#xff1a;cpu、内存、磁盘&#xff0c;cpu任何需要的数据都要从内容中读入数据放入cpu,从cup内部添加一个缓存 &#xff08;2&#xff09;web开发的每个阶段都可以添加缓存 &#xff08;3&#xff09;缓存优缺点&a…...

编程日记 2025/6/29 0:20:39

ORACLE查看归档是否打开

一、使用V$DATABASE视图 SELECT log_mode FROM v$database; 结果说明&#xff1a; ARCHIVELOG - 数据库处于归档模式 NOARCHIVELOG - 数据库处于非归档模式 二、 使用v$instance视图 SELECT archiver FROM v$instance; 结果说明&#xff1a; STARTED - 归档进程已启动(归档模…...

编程日记 2025/6/28 22:53:11

Python环境管理工具深度指南：pip、Poetry、uv、Conda

Python环境管理工具深度指南&#xff1a;pip、Poetry、uv、Conda Python开发中&#xff0c;环境管理和依赖管理是不可避开的重要话题。合理地管理项目的Python环境&#xff08;尤其是虚拟环境&#xff09;有助于隔离不同项目的依赖&#xff0c;避免版本冲突&#xff0c;并确保…...

编程日记 2025/6/28 22:53:13

高等数学第七章---微分方程（§7.4-§7.5可降阶的高阶微分方程、二阶线性微分方程）

7.4 可降阶的高阶微分方程 某些类型的高阶微分方程可以通过适当的变量代换&#xff0c;将其阶数降低&#xff0c;从而化为阶数较低的方程进行求解。 一、 y ( n ) f ( x ) y^{(n)}f(x) y(n)f(x) 型方程 特征&#xff1a;方程的左端是 y y y 的 n n n 阶导数&#xff0c;右…...

编程日记 2025/6/28 1:47:58

Jmeter对服务端进行压测快速上手

安装 下载 安装jmeter的之前必须先装有JDK 官网下载地址&#xff1a;https://archive.apache.org/dist/jmeter/binaries/ jmeter3.0的对应jdk1.7&#xff0c;jmeter4.0对应jdk1.8以上&#xff0c;否者启用jmeter也会报错 配置 配置环境变量 在系统变量PATH上加上: %JMET…...

编程日记 2025/6/28 22:54:15

【嵌入模型与向量数据库】

目录 一、什么是向量&#xff1f; 二、为什么需要向量数据库&#xff1f; 三、向量数据库的特点 四、常见的向量数据库产品 FAISS 支持的索引类型 vs 相似度 五、常见向量相似度方法对比 六、应该用哪种 七、向量数据库的核心逻辑 &#x1f50d; 示例任务&#xff1a;…...

编程日记 2025/6/28 22:53:12

鸿蒙OSUniApp 开发实时聊天页面的最佳实践与实现#三方框架 #Uniapp

使用 UniApp 开发实时聊天页面的最佳实践与实现 在移动应用开发领域&#xff0c;实时聊天功能已经成为许多应用不可或缺的组成部分。本文将深入探讨如何使用 UniApp 框架开发一个功能完善的实时聊天页面&#xff0c;从布局设计到核心逻辑实现&#xff0c;带领大家一步步打造专…...

编程日记 2025/6/29 0:03:57

React构建组件

React构建组件 React 组件构建方式详解 React 组件的构建方式随着版本迭代不断演进&#xff0c;目前主要有 函数组件 和 类组件 两种核心模式&#xff0c;并衍生出多种高级组件设计模式。以下是完整的构建方式指南&#xff1a; 文章目录 React构建组件React 组件构建方式详解…...

编程日记 2025/6/29 0:23:47

auto.js面试题及答案

以下是常见的 Auto.js 面试题及参考答案&#xff0c;涵盖基础知识、脚本编写、运行机制、权限、安全等方面&#xff0c;适合开发岗位的技术面试准备&#xff1a; 一、基础类问题 什么是 Auto.js&#xff1f;它的主要用途是什么&#xff1f; 答案&#xff1a; Auto.js 是一个…...

编程日记 2025/6/28 22:53:14

OPC UA + ABP vNext 企业级实战：高可用数据采集框架指南

&#x1f680;&#x1f4ca; OPC UA ABP vNext 企业级实战&#xff1a;高可用数据采集框架指南 &#x1f680; &#x1f4d1; 目录 &#x1f680;&#x1f4ca; OPC UA ABP vNext 企业级实战&#xff1a;高可用数据采集框架指南 &#x1f680;一、前言 &#x1f3af;二、系统…...

编程日记 2025/6/28 22:54:44

【springcloud学习(dalston.sr1)】Ribbon负载均衡（七）

该系列项目整体介绍及源代码请参照前面写的一篇文章【springcloud学习(dalston.sr1)】项目整体介绍&#xff08;含源代码&#xff09;&#xff08;一&#xff09; &#xff08;一&#xff09;Ribbon 负载均衡的理解 ribbon是一种客户端的负载均衡。类似于比如我们在火车站窗口…...

编程日记 2025/6/28 22:53:15