当前位置： 首页 > news >正文

kafka学习笔记（四、生产者（客户端）深入研究(二)——消费者协调器与_consumer_offsets剖析）

news 来源：原创 2025/5/12 4:20:12

在这里插入图片描述

1.消费者协调器和组协调器

如果消费者客户端中配置了多个分配策略，则多消费者的分区分配交由消费者协调器和组协调器来完成，他们之间使用一套组协调协议进行交互。

1.1.在均衡原理

将全部消费者分成多个子集，每个消费者组的子集在服务中对应一个GroupCoordinator对起进行管理，GroupCoordinator是kafka服务端中用于管理消费组的组件。而消费者客户端中的ConsumerCoordinator组件负责与GroupCoordinator进行交互。

GroupCoordinator+ConsumerCoordinator组重要的职责就是负责执行消费者在均衡操作。

1.1.1.触发在均衡情形

  • 有新的消费者加入消费组
  • 有消费者宏机下线
  • 有消费者主动退出消费组
  • 消费组对应的ConsumerCoordinator节点发生了变更
  • 消费组内所订阅的任意主题或主题的分区数发生变化
1.1.2.在均衡操作的主要内容

  1. 第一阶段： FINO_COORDINATOR
    消费者需要确认它所属的消费组对应的GroupCoordinator所在的broker，并创建与该broker相互通信的网络连接。如消费者已经保存了与消费者组对应的GroupCoordinator节点的信息，并且与他的网络连接是正常的，那么可进入第二阶段。否则就要想集群中的某个节点（负载最小的节点）发送FindCoordinatorRequest请求来查找对应的GroupCoordinator。

    在这里插入图片描述

    • coordinator_key：在这里就是消费组的名称，即groupId
    • coordinator_type：置为0

    kafka在收到FindCoordinatorRequest请求后会根据coordinator_key查找对应的GroupCoordinator节点，如果找到对应的GroupCoordinator则会返回其相对应的node_id、host和port信息。

    具体查找GroupCoordinator的方式：

    • 先根据消费组groupId的哈希值计算_consumer_offfsets中的分区编号，具体算法：Utils.abs(groupId.hashCode) % groupMetadataTopicPartitionCount

      groupMetadataTopicPartitionCount为主题_consumer_offsets的分区个数，可以通过broker端参数offsets.topic.num.partitions来配置，默认为50.

    • 然后根据_consumer_offsets对应的分区寻找此分区leader副本所在的broker节点，该borker节点即为这个groupId对应的GroupCoordinator节点

      消费者groupId最终的分区分配方案计组内消费者所提交的消费位移信息都会发送给此分区leader副本所在的broker节点，让此broker节点即扮演GroupCoordinator的角色，有扮演保存分区分配方案和组内消费者位移的角色，以此可省去很多不必要的中间轮转所带来的消耗。

  2. 第二阶段： JOIN_GROUP
    在成功找到消费组所对应的GroupCoordinator之后就进入加入消费组的阶段，在此阶段的消费者会向GroupCoordinator发送JoinGroupRequest请求并处理响应。
    选举消费组的leader：

    GroupCoordinator需要为消费组内的消费者选举出一个leader，选举算法分为两种情况。

    1. 消费组内无leader，则第一个加入的为leader
    2. 如果某一时刻leader消费者由于某些原因退出了消费组，则会重新选举一个新的leader，方法为随机选举

    选举分区分配策略：

    每个消费者都可以设置自己的分区分配策略，则组内最终选举的分配策略基本上可以看作被各个消费者支持的最多的策略，具体过程如下

    1. 收集各个消费者支持的所有分配策略组成候选集candidates
    2. 每个消费者从候选集candidates中找出第一个自身支持的策略，为每个策略投上一票
    3. 计算候选集中各个策略的选票数，选票最多的策略即为当前消费组的分配策略

    如有消费者不支持选出的分配策略，则抛出异常

  3. 第三阶段：SYNC_GROUP
    leader消费者根据在第二阶段中选举出来的分区分配策略来实施具体的分区分配。在此之后需将分配的方案同步给各个消费者，此时leader消费者并不是直接和其余的普通消费者同步分配方案，而是通过GroupCoordinator这个“中间人”来负责转发同步分配方案的。在第三阶段，也就是同步阶段，各个消费者会向GroupCoordinator发送SyncGroupRequest请求来同步分配方案。
    SyncGroupRequest具体结构：

    在这里插入图片描述

    group_assignment是一个数组类型，其中包含了各个消费者对应的具体分配方案：member_id表示消费者的唯一标识，member_assignment是与消费者对应的分配方案，还可以做更具体的划分。

    member_assignment结构图：

    在这里插入图片描述

    服务端在接受到消费者发送的SyncGroupRequest请求后会交给GroupCoordinator来负责具体的的逻辑处理。

    GroupCoordinator处理逻辑：

    1. 对SyncGroupRequest请求做合法性校验
    2. 提取leader消费者发送过来的分配方案并连同整个消费组的元数据信息一起存入Kafka的_consumer_offsets主题中
    3. 最后发送响应(SyncGroupResponse)给各个消费者以提供个各个消费者各自所属的分配方案

  4. 第四阶段：HEARTBEAT
    进入这个阶段后，消费组中的所有消费者就会处于正常工作状态。在正式消费之前，消费者还需要确定拉取信息的起始位置（上次提交的位置）。
    消费者通过向GroupCoordinator发送心跳来维持它们与消费组的从属关系，以及它们对分区的所有权关系

    心跳线程是一个独立的线程，可以在轮询消息的空挡发送心跳。只要消费者以正常的时间间隔发送心跳，就被认为是活跃的，说明它还在读取分区中的消息。

    心跳间隔时间由参数heartbeaat.interval.ms指定，默认值为3000（3秒）。

    这个时间必须比session.timeout.ms参数设定的值要小，一般设定不能超过其1/3，也可以设定的更小，以控制正常重新平衡的逾期时间。

    max.poll.interval.ms参数用来指定消费者组管理时poll()方法调用之间的最大延迟，也就是消费者在获取更多消息之前可以空闲的时间上限。

    如果此超时时间期满之前poll()没有调用，则消费者被认为失败，并且分组将重新平衡，以便将分区重新分配给别的成员。

    LeaveGroupRequest请求可以主动退出消费组，如客户端调用unsubscrible()方法取消对某些主题的订阅。

2._consumer_offsets剖析

_consumer_offsets是Kafka的内部主题，用于存储消费者组的偏移量（offset）信息，是Kafka实现消息可靠传递的关键组件。

一般情况下，当集群中第一次有消费者消费消息时会自动创建主题__consumer_offsets，其副本因子还受offsets.topic.num.partitions.factor参数的约束，此参数默认为3，分区数可以通过offsets.topic.num.partitons参数设置，默认为50。

  • 作用和背景
  • 偏移量管理：消费者需要记录消费进度（即分区中已处理的最新消息位置），__consumer_offsets负责持久化这些信息，确保消费者重启或故障后能恢复进度。
  • 替代ZooKeeper：早期Kafka版本将偏移量存储在ZooKeeper中，但随消费者规模增长，ZooKeeper的写入瓶颈显现。从Kafka 0.9版本起，偏移量迁移至__consumer_offsets，利用Kafka自身的高吞吐和分区能力提升扩展性。

2.1.OffsetCommitRequest

客户端提交消费位移是使用OffsetCommitRequest请求实现的，其UML图如下：

contains
contains (topics)
contains (partitions)
OffsetCommitRequest
+int16 apiKey = 0x0008
+int16 apiVersion
+int32 correlationId
+string clientId
+RequestBody requestBody
RequestBody
+string groupId
+int32 generationId
+string memberId
+int64 retentionTime
+List<TopicData> topics
TopicData
+string topic
+List<PartitionData> partitions
PartitionData
+int32 partition
+int64 offset
+int32 leaderEpoch
+string metadata
+int64 timestamp

  • 类关系：

    • OffsetCommitRequest 包含一个 RequestBody。
    • RequestBody 包含多个 TopicData（通过 topics 字段）。
    • 每个 TopicData 包含多个 PartitionData（通过 partitions 字段）。

  • 字段类型：

    • 基本类型（如 int32, string）直接标注。
    • 集合类型用 ListT 表示（例如 ListTopicData）。

  • 关键字段：

    1. 公共头部字段
      API Key： 固定为0x0008，标识这是一个OffsetCommit请求。
      API Version： 决定请求的格式兼容性（不同版本的Kafka可能扩展字段）。
      Correlation ID： 客户端生成的唯一ID，用于跟踪请求与响应的对应关系。
      Client ID： 客户端的逻辑标识，用于服务端日志监控。
    2. 请求体字段
      group_id： 消费者组唯一标识，对应group.id配置。
      generation_id： 消费者组的“年代号”，在Rebalance操作后递增。用于防止已退组的消费者提交过期偏移量。
      member_id： 消费者在组内的唯一ID，由Broker分配。
      retention_time： 旧版本（如v0, v1）中用于指定偏移量保留时间，新版本中由Broker配置决定。
      topics： 待提交偏移量的主题列表，每个主题包含多个分区的偏移量数据。
    3. PartitionData字段
      partition： 目标分区编号。
      offset： 消费者提交的当前消费进度（即下一条待处理消息的位置）。
      leader_epoch： 用于处理副本故障恢复时的数据一致性（Kafka 0.11+引入）。
      metadata： 可选的附加信息（如提交者的客户端版本）。
      timestamp： 旧版本中用于指定偏移量时间戳，新版本由Broker自动填充。

不同版本的OffsetCommitRequest可能有字段变化：

版本重要变化
v0基础版本，无leader_epoch字段
v1 新增retention_time字段
v2引入leader_epoch，删除timestamp字段
v3+优化字段编码，支持更严格的校验

2.2.请求流程

  1. 消费者提交偏移量
    消费者调用commitSync()或commitAsync()时，构造OffsetCommitRequest，按上述格式编码为二进制数据，发送给Broker。

  2. Broker处理逻辑
    Broker将偏移量写入内部主题__consumer_offsets，并根据请求中的generation_id和member_id验证提交合法性。

  3. 响应返回客户端
    Broker返回OffsetCommitResponse，包含每个分区的提交结果（成功或错误码）。

相关文章：

kafka学习笔记（四、生产者（客户端）深入研究(二)——消费者协调器与_consumer_offsets剖析）

1.消费者协调器和组协调器 如果消费者客户端中配置了多个分配策略&#xff0c;则多消费者的分区分配交由消费者协调器和组协调器来完成&#xff0c;他们之间使用一套组协调协议进行交互。 1.1.在均衡原理 将全部消费者分成多个子集&#xff0c;每个消费者组的子集在服务中对…...

编程日记 2025/5/12 4:20:12

stm32基础001(串口)

文章目录 通信的基本概念串行通信和并行通信单工&#xff0c;半双工和全双工串口的硬件连接 stm32的串口原理图CPU的芯片手册stm32串口的库函数实现通过串口实现printf函数使用中断实现串口的接收 通信的基本概念 串行通信和并行通信 串行通信一个方向只有一个数据通道&#x…...

编程日记 2025/5/12 4:12:42

5G技术如何提升智能家居体验：让家更聪明，生活更智能

5G技术如何提升智能家居体验&#xff1a;让家更聪明&#xff0c;生活更智能 一、引言&#xff1a;智能家居的新纪元 近年来&#xff0c;智能家居已经逐渐走入我们的生活&#xff0c;家电、照明、安全设备、环境监控等产品&#xff0c;都在逐步实现智能化&#xff0c;让我们可以…...

编程日记 2025/5/12 3:58:39

在项目中如何对Map List等对象序列化及反序列化

我们知道&#xff0c;在自定义类中&#xff0c;若想完成序列化必须要实现Serializable接口。 那么在实现后如何进行序列化呢&#xff1f; 一.普通对象 序列化&#xff1a; 1.首先我们要定义一个 序列化所需要的工具类 ObjectMapper //定义序列化所需要的工具类 转化机器…...

编程日记 2025/5/12 4:04:05

指针与算法的双人舞：蓝桥杯两道趣味题的降维打击

蓝桥杯奇趣挑战&#xff1a;如何用指针和算法“驯服”无序数组与环形迷宫&#xff1f; &#x1f3a9; 博客引言 "你是否有过这样的体验&#xff1f;面对一段看似混乱的数组&#xff0c;像解开一团纠缠的耳机线&#xff0c;想用最优雅的方式让它乖乖听话&#xff1f;又或者…...

编程日记 2025/5/12 4:05:08

C语言 指针(2)

目录 1.指针运算 2.const修饰指针 3.野指针 我们在上篇文章中初步了解了关于指针的基础内容&#xff0c;包括内存地址以及指针变量类型。这篇我们来 讲关于指针的运算以及const修饰指针和野指针相关内容。 1. 指针运算 指针的基本运算有三种&#xff0c;分别是: - 指针-…...

编程日记 2025/5/12 3:57:23

使用Python和Pandas实现的Azure Synapse Dedicated SQL pool权限检查与SQL生成用于IT审计

下面是使用 Python Pandas 来提取和展示 Azure Synapse Dedicated SQL Pool 中权限信息的完整过程&#xff0c;同时将其功能以自然语言描述&#xff0c;并自动构造所有权限设置的 SQL 语句&#xff1a; ✅ 步骤 1&#xff1a;从数据库读取权限信息 我们从数据库中提取与用户、…...

编程日记 2025/5/9 15:03:04

Python基本语法(控制语句)

#控制语句 Python语言的控制语句和其他编程语言类似&#xff0c;常用的有if…else、while、for语句。 案例2一7控制语句 第1组代码&#xff0c;说明if-else语句&#xff1a; #1 print(\n1,if) x,y,z10,20,5 if x>y:print(x>y) else:print(x<y)输出结果: 1,if x<…...

编程日记 2025/5/12 4:03:01

Linux btop 使用教程

简介 btop 是一个基于终端的现代系统资源监控器&#xff0c;具有美观的图形界面、响应快、功能丰富等特点。它支持查看 CPU、内存、磁盘、网络、进程&#xff0c;并可以方便地筛选和管理进程。 功能总览 启动命令&#xff1a; btop界面分为以下几部分&#xff1a; CPU 区域…...

编程日记 2025/5/2 5:34:44

高并发场景下的MySQL生存指南

引言 在2025年全球数字经济峰会上&#xff0c;阿里云披露其核心交易系统单日处理请求量突破万亿次&#xff0c;其中MySQL集群承载了78%的OLTP业务。这标志着数据库系统已进入百万级QPS时代&#xff0c;传统优化手段面临三大挑战&#xff1a; 一、硬件与架构优化&#xff1a;构…...

编程日记 2025/5/12 4:07:15

Ethan独立开发产品日报 | 2025-04-30

1. Daytona 安全且灵活的基础设施&#xff0c;用于运行你的人工智能生成代码。 Daytona Cloud重新定义了AI代理的基础设施&#xff0c;具备低于90毫秒的启动时间、原生性能和有状态执行能力&#xff0c;这些是传统云服务无法比拟的。您可以以前所未有的速度和灵活性来创建、管…...

编程日记 2025/5/12 4:10:28

Mysql常用函数解析

字符串函数 CONCAT(str1, str2, …) 将多个字符串连接成一个字符串。 SELECT CONCAT(Hello, , World); -- 输出: Hello World​​SUBSTRING(str, start, length) 截取字符串的子串&#xff08;起始位置从1开始&#xff09;。 SELECT SUBSTRING(MySQL, 3, 2); -- 输出: SQ…...

编程日记 2025/5/2 5:33:40

donet使用指定版本sdk

ps:来自微软官方方案,实测可行,就是在项目任意目录下在新建 global.json,并配置sdk版本 SDK 使用最新安装的版本 SDK 命令包括 dotnet new 和 dotnet run。 .NET CLI 必须为每个 dotnet 命令选择一个 SDK 版本。 即使在以下情况下&#xff0c;它也会默认使用计算机上安装的最新…...

编程日记 2025/5/12 4:01:49

Android短信监控技术实现：合法合规的远程采集方案

一年经验的全栈程序员&#xff0c;目前头发健在&#xff0c;但不知道能撑多久。 该项目已成功部署并稳定运行于企业生产环境&#xff0c;如需个性化定制方案&#xff0c;欢迎联系作者进行深度合作。 文章目录 前言 一、页面设计 1.页面显示 2.代码实现 二、具体代码实现 1.添加…...

编程日记 2025/5/12 4:06:11

前端项目实践：打造响应式个人简历与实时天气预报应用

在当今前端开发领域&#xff0c;构建实际项目是提升技能的最佳方式。本文将带你完成两个极具实用价值的前端项目&#xff1a;响应式个人简历页面和天气预报Web应用。这两个项目不仅能够丰富你的作品集&#xff0c;还能帮助你掌握现代前端开发的核心技术。 一、响应式个人简历页…...

编程日记 2025/5/2 5:32:38

【C++】extern

本文介绍一些extern在C中的用法 声明与定义分离 C程序员应该都知道单一定义规则ODR 在任何一个翻译单元中&#xff0c;只允许存在任何变量、函数、类类型、枚举类型 、概念 (自 C20 起) 或模板的一个定义&#xff08;其中一些可能具有多个声明&#xff0c;但只允许一个定义&a…...

编程日记 2025/5/12 4:10:28

力扣——23合并升序链表

目录 1:题目描述&#xff1a; 2.算法思想&#xff1a; 3.代码展示&#xff1a; 1:题目描述&#xff1a; 给你一个链表数组&#xff0c;每个链表都已经按升序排列。 请你将所有链表合并到一个升序链表中&#xff0c;返回合并后的链表。 示例 1&#xff1a; 输入&#xff…...

编程日记 2025/5/2 5:32:36

Java 泛型参数问题：‘ResponseData.this‘ cannot be referenced from a static contex

问题与处理策略 问题描述 Data AllArgsConstructor NoArgsConstructor public class ResponseData<T> {private Integer code;private String msg;private T data;public static final int CODE_SUCCESS 2001;public static final int CODE_FAIL 3001;public static …...

编程日记 2025/5/12 4:01:49

21 课时精通生成式 AI：微软官方入门指南详解

21课时精通生成式AI&#xff1a;微软官方入门指南详解 引言项目概述分析基本信息项目定位与目标 核心功能详解1. 全面的课程结构2. 多样化的学习内容3. 技术亮点与创新点 安装和使用教程环境要求安装步骤基本使用方法示例代码 应用场景和实际价值适用业务场景实际应用价值效益可…...

编程日记 2025/5/2 5:31:34

WPF嵌入webapi服务器，充当微服务角色

WPF嵌入WebAPI服务器实现微服务角色 一、方案概述 在WPF应用程序中嵌入WebAPI服务器，使其能够同时作为桌面客户端和微服务提供者。这种架构允许WPF应用既作为用户界面，又作为后端服务，适合需要本地处理能力同时又能提供API接口的场景。 二、技术选型 ​​WebAPI框架​​：…...

编程日记 2025/5/2 5:31:34

构建现代分布式云架构的三大支柱：服务化、Service Mesh 与 Serverless

目录 前言1. 服务化架构模式&#xff1a;构建可扩展的基础单元1.1 服务化的定义与演进1.2 在分布式云中的价值1.3 面临的挑战 2. Service Mesh 架构&#xff1a;服务通信的治理中枢2.1 什么是 Service Mesh&#xff1f;2.2 功能与优势2.3 在分布式云中的角色2.4 落地难点 3. Se…...

编程日记 2025/5/11 16:42:35

2025华东杯数学建模B题完整分析论文（共36页）（含模型、代码、数据）

2025华东杯数学建模B题完整分析论文 摘要 一、问题重述 二、问题分析 三、模型假设 四、 模型建立与求解 4.1问题1 4.1.1问题1思路分析 4.1.2问题1模型建立 4.1.3问题1代码 4.1.4问题1求解结果 4.2问题2 4.2.1问题2思路分析 4.2.2问题2模型建立 4.2…...

编程日记 2025/5/12 4:07:15

K8S - 零基础掌握 RBAC - 命名空间安全实战

一、为什么需要 RBAC 权限管理&#xff1f; 真实场景 在企业级 K8S 集群中&#xff0c;不同团队共享同一集群&#xff0c;容易发生权限管理问题&#xff0c;例如&#xff1a; 测试人员误删了生产数据库。 实习生看到了财务系统的敏感配置。 核心需求 确保不同用户 只能在自…...

编程日记 2025/5/2 5:29:31

OpenGL-ES 学习(13) ---- Shader 编译和程序对象

目录 概述创建和编译Shader链接程序对象绘制一个最简单的三角形示例代码 概述 在本节中&#xff0c;我们提供创建 Shader对象&#xff0c;并且编译链接到一个程序对象的完整流程&#xff0c;主要内容如下&#xff1a; Shader 和程序对象概述创建和编译Shader创建和链接程序对…...

编程日记 2025/5/2 5:29:31

今天的python练习题

目录 一、每日一言 二、练习题 三、效果展示 四、下次题目 五、总结 一、每日一言 晚上8点到的&#xff0c;还是会被感动到&#xff0c;有一位列车员同志在检票期间&#xff0c;叫我到列车员专座位上去坐&#xff0c;我很感激他&#xff0c;温暖人心&#xff0c;所以人间填我…...

编程日记 2025/5/2 5:29:30

HarmonyOS应用开发中实现本地化存储的几种方式

Preferences 存储 适用于存储简单的键值对数据&#xff0c;如用户设置、配置信息等。其特点是轻量级、使用简单&#xff0c;适合频繁读取和少量更新的场景&#xff0c;数据存储在本地沙盒中&#xff0c;应用重启后数据保持不变。 获取 Preferences 实例 &#xff1a;使用 data…...

编程日记 2025/5/2 5:29:29

【C++指南】vector（三）：迭代器失效问题详解

. &#x1f493; 博客主页&#xff1a;倔强的石头的CSDN主页 &#x1f4dd;Gitee主页&#xff1a;倔强的石头的gitee主页 ⏩ 文章专栏&#xff1a;《C指南》 期待您的关注 文章目录 一、引言二、reserve 扩容引发的迭代器失效2.1 问题现象2.2 正确实现 三、insert 插入引发的…...

编程日记 2025/5/2 5:28:28

Android面试总结之GC算法篇

一、GC 机制核心原理与算法 面试题 1&#xff1a;Android 中为什么采用分代回收&#xff1f;分代策略如何优化 GC 效率&#xff1f; 标准答案&#xff1a; 分代回收基于对象生命周期的差异&#xff0c;将堆分为年轻代&#xff08;Young Gen&#xff09;和老年代&#xff08;Ol…...

编程日记 2025/5/2 5:28:28

驱动开发系列55 - Linux Graphics QXL显卡驱动代码分析（二）显存管理

一：概述 前面介绍了当内核检测到匹配的PCI设备后，会调用 qxl_pci_probe 初始化设备，其中会调用qxl_device_init 来初始化设备，为QXL设备进行内存映射，资源分配，环形缓冲区初始化，IRQ注册等操作，本文展开说说这些细节，以及介绍下QXL的显存管理。 二：QXL设备初始化细节…...

编程日记 2025/5/2 5:28:27

javaScript——DOM续（六）

滚轮事件 在 Web 开发中监听鼠标滚轮事件时&#xff0c;不同浏览器存在差异。下面是对 onmousewheel、DOMMouseScroll 和标准 wheel 事件的完整说明和兼容写法。 &#x1f300; onmousewheel 事件概览 onmousewheel 是早期浏览器&#xff08;如 IE 和 Chrome&#xff09;支持…...

编程日记 2025/5/2 5:27:25

MySQL 服务搭建

&#x1f4a2;欢迎来到张翊尘的开源技术站 &#x1f4a5;开源如江河&#xff0c;汇聚众志成。代码似星辰&#xff0c;照亮行征程。开源精神长&#xff0c;传承永不忘。携手共前行&#xff0c;未来更辉煌&#x1f4a5; 文章目录 在线安装Ubuntu/Debian更新系统包索引安装 MySQL …...

编程日记 2025/5/2 5:26:23

Eigen的使用

https://github.com/PX4/eigen Eigen在Qt中的配置&#xff08;博主亲测&#xff09; 1、Qt中调用 //.pro中-------- INCLUDEPATH \$$PWD/eigen-master//.cpp中------- #include <Eigen/Dense> using namespace Eigen;Matrix2d a; MatrixXd b(2,2); Vector3d v(1,2,3);…...

编程日记 2025/5/12 3:56:20

【云原生】基于Centos7 搭建Redis 6.2 操作实战详解

目录 一、前言 二、Redis 6.2 安装过程 2.1 下载安装包 2.2 安装包解压 2.3 安装包编译 2.3 安装 2.4 启动redis 2.4.1 前台启动&#xff08;不推荐&#xff09; 2.4.2 后启动&#xff08;推荐&#xff09; 2.4.3 关闭redis服务 2.4.4 设置客户端连接 三、写在最后 …...

编程日记 2025/5/12 4:15:52

《TCP/IP详解 卷1：协议》之第九章：IP选路

目录 一、IP选路之IP层工作流程 二、选路原理 三、路由表中的五种不同的标志&#xff08;flag&#xff09; 四、路由表的初始化 1、静态路由表初始化 ①、手动配置 ②、默认网关配置 2、动态路由表初始化 ①、路由协议的作用 ②、直接连接网络的自动发现 五、没有到达…...

编程日记 2025/5/2 5:26:21

HTTP知识速通

一.HTTP的基础概念 首先了解HTTP协议&#xff0c;他是目前主要使用在应用层的一种协议 http被称为超文本传输协议 而https则是安全的超文本传输协议 本章节的内容首先就是对http做一个简单的了解。 HTTP是一种应用层协议&#xff0c;是基于TCP/IP协议来传递信息的。 其中…...

编程日记 2025/5/2 5:25:20

npm命令介绍（Node Package Manager）

文章目录 npm命令全解析简介基础命令安装npm&#xff08;npm -v检插版本&#xff09;初始化项目&#xff08;npm init&#xff09;安装依赖包&#xff08;npm install xxx、npm i xxx&#xff09; 依赖管理精解依赖类型区分&#xff08;生产环境依赖dependencies、开发环境依赖…...

编程日记 2025/5/2 5:25:20

在 Windows 上启用 Telnet 命令

在 Windows 上启用打开 Telnet 命令 Telnet 是一种用于远程访问和管理计算机的协议。尽管存在安全漏洞&#xff0c;Telnet 仍然被广泛用于初始网络硬件配置、远程访问、端口测试等任务。在 Windows 10 和 11 上&#xff0c;可以通过多种方法启用 Telnet 客户端。 使用控制面板…...

编程日记 2025/5/2 5:25:19

网络安全零基础培训 L1-9 PHP连接MySQL数据库

使用MySQLi扩展 MySQLi 是 “MySQL Improved Extension” 的缩写&#xff0c;它是 PHP 用于与 MySQL 数据库进行交互的扩展。 step1&#xff1a;连接数据库 <?php// 定义数据库服务器的地址&#xff0c;通常 localhost 表示本地服务器$servername "服务器地址&quo…...

编程日记 2025/5/2 5:25:18

Python生活手册-文件二进制：从快递柜到生鲜冷链的数据保鲜术

一、快递柜与冷链运输&#xff1a;两种存取哲学 1. 普通快递柜&#xff08;文本模式&#xff09; 日常存取包裹的智能快递柜就像文本模式&#xff0c;系统会自动处理包裹的包装&#xff1a; with open(快递单.txt, r, encodingutf-8) as 快递柜:包裹内容 快递柜.read() # …...

编程日记 2025/5/2 5:25:17

CUDA从入门到放弃

1 CUDA简介 GPU为图形处理器, 也是显卡的“大脑”显卡集成了GPU, 显存和其他电路的硬件GPU: 计算密集型CPU: 逻辑流控制GPU性能指标: 核心数GPU显存容量GPU计算峰值显存带宽 GPU不能单独计算, CPUGPU组成异构计算架构CPU起到控制作用, 一般成为主机(Host), GPU可以看作CPU的协…...

编程日记 2025/5/2 5:24:16

Golang多人在线坦克对战游戏(帧同步)

以下是一个简化但完整的同步帧游戏示例——实现一个多人在线坦克对战游戏。代码分为服务器和客户端两部分，使用UDP协议通信。我们将重点讲解核心同步机制。 项目结构 sync-frame-game/ ├── server/ │ ├── main.go # 游戏服务器主逻辑 │ └── game_stat…...

编程日记 2025/5/2 5:24:15

MySQL | DQL语句-连接查询

MySQL | DQL语句-连接查询 &#x1fa84;个人博客&#xff1a;https://vite.xingji.fun 什么是连接查询 从一张表中查询数据称为单表查询。从两张或更多张表中联合查询数据称为多表查询&#xff0c;又叫做连接查询。什么时候需要使用连接查询&#xff1f; 比如这样的需求&…...

编程日记 2025/5/2 5:24:14

JVM——Java 虚拟机是如何加载 Java 类的？

引入 在 Java 世界的底层运作中&#xff0c;类加载机制扮演着一个既神秘又关键的角色。它就像是一个精心设计的舞台幕后 machinery&#xff0c;确保了 Java 程序能够顺利运行。今天&#xff0c;我们就深入探索 Java 虚拟机&#xff08;JVM&#xff09;是如何加载 Java 类的。 …...

编程日记 2025/5/10 4:00:45

Sigmoid函数导数推导详解

Sigmoid函数导数推导详解 在逻辑回归中&#xff0c;Sigmoid函数的导数推导是一个关键步骤&#xff0c;它使得梯度下降算法能够高效地计算。 1. Sigmoid函数定义 首先回顾Sigmoid函数的定义&#xff1a; g ( z ) 1 1 e − z g(z) \frac{1}{1 e^{-z}} g(z)1e−z1​ 2. 导…...

编程日记 2025/5/12 2:07:29

运维工作中，Ansible常用模块有哪些？

Ansible是一个强大的自动化运维工具&#xff0c;他通过模块来执行各种任务。Ansible的模块库非常丰富&#xff0c;涵盖了系统管理、文件操作、软件包管理、网络配置、云服务等多个领域。以下是Ansible中常见的模块分类及具体模块详细介绍&#xff1a; 系统管理模块 主要用于管…...

编程日记 2025/5/2 5:23:11

内存安全的攻防战：工具链与语言特性的协同突围

一、内存安全&#xff1a;C 开发者永恒的达摩克利斯之剑 在操作系统内核、游戏引擎、金融交易系统等对稳定性要求苛刻的领域&#xff0c;内存安全问题始终是 C 开发者的核心挑战。缓冲区溢出、悬空指针、双重释放等经典漏洞&#xff0c;每年在全球范围内造成数千亿美元的损失。…...

编程日记 2025/5/9 23:58:14

Linux-04-搜索查找类命令

一、find查找文件或目录: 1.基本语法: find指令将从指定目录向下递归地遍历其各个子目录1&#xff0c;将满足条件的文件显示在终端 find[搜索范围] [选项] 2.选项说明: 选项功能-name <查询方式>按照指定的文件名查找模式查找文件-user <用户名>查找属于指定用…...

编程日记 2025/5/12 4:09:21

移动光猫 UNG853H 获取超级管理员账号密码

注&#xff1a;电脑连接光猫&#xff0c;网线不要接2口&#xff08;2口一般是IPTV网口&#xff09; 首先浏览器打开 192.168.1.1&#xff0c;使用光猫背面的用户名密码登录。&#xff08;user用户名&#xff09; 然后在浏览器中另开一个窗口打开以下地址&#xff1a; http://…...

编程日记 2025/5/2 5:21:07

健康生活新主张：全方位养生指南

在追求高品质生活的今天&#xff0c;健康养生早已不是老年人的专属话题&#xff0c;而是每个人都该掌握的生活技能。科学养生不需要复杂的程序&#xff0c;而是通过日常习惯的优化&#xff0c;为身体注入源源不断的活力。 饮食管理是健康的根基。选择天然、少加工的食材&#x…...

编程日记 2025/5/2 5:21:07

py使用uniad原生sdk 3, 放弃Buildozer，使用BeeWare

目前&#xff0c;Buildozer 支持打包&#xff1a; Android&#xff1a;通过 Python for Android。您必须有 Linux 或 OSX computer 才能为 Android 进行编译。 iOS&#xff1a;通过 Kivy iOS。您必须拥有 OSX computer 才能为 iOS 进行编译。 支持其他平台在路线图中&#xf…...

编程日记 2025/5/2 5:21:06