当前位置： 首页 > news >正文

kafka零拷贝技术的底层实现

news 来源：原创 2025/7/21 17:50:46

什么是 Sendfile？

sendfile 是一种操作系统提供的系统调用（system call），用于在两个文件描述符（file descriptor）之间高效传输数据。它最初由 Linux 内核引入（从 2.1 版本开始），旨在优化文件数据从磁盘到网络的传输过程。sendfile 的核心优势是零拷贝（zero-copy），即避免用户空间和内核空间之间的多次数据拷贝，从而提升性能。

系统调用定义

在 Linux 中，sendfile 的函数签名如下（C 语言）：

ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);
  • out_fd：目标文件描述符，通常是网络套接字（socket）。
  • in_fd：源文件描述符，通常是磁盘文件。
  • offset：源文件的偏移量（可以为空，表示从当前位置开始）。
  • count：要传输的字节数。
  • 返回值：实际传输的字节数，或错误码。

Sendfile 的工作原理

传统的数据传输（不使用 sendfile）涉及以下步骤：

  1. 应用程序调用 read()，将文件数据从磁盘读取到内核缓冲区。
  2. 数据从内核缓冲区拷贝到用户空间的应用程序缓冲区。
  3. 应用程序调用 write()，将数据从用户空间缓冲区拷贝回内核的 socket 缓冲区。
  4. 内核通过网络栈将 socket 缓冲区的数据发送出去。

这个过程有 4 次上下文切换（用户态 ↔ 内核态）和 2 次数据拷贝（内核 → 用户 → 内核）。

使用 Sendfile 的优化

sendfile 将上述过程简化为：

  1. 内核直接从磁盘文件读取数据到内核缓冲区（页面缓存）。
  2. 内核将数据从页面缓存直接传输到 socket 缓冲区（通过 DMA，Direct Memory Access）。
  3. 内核通过网络栈发送数据。

优化结果：

  • 零拷贝：数据无需经过用户空间，完全在内核态完成。
  • 减少上下文切换：只需 2 次切换（调用 sendfile 和返回）。

Kafka 如何使用 Sendfile

Kafka 的高性能设计大量依赖顺序 I/O 和零拷贝技术，其中 sendfile 是关键组件之一。Kafka 在以下场景中使用 sendfile：

1. 日志文件传输
  • Kafka 的 Broker 将存储在磁盘上的日志文件（.log 文件）发送给消费者或 Follower 时，使用 sendfile。
  • 数据从日志文件直接传输到网络 socket，避免了传统拷贝的开销。
2. Java 中的实现
  • Kafka 使用 Java NIO（New I/O）中的 FileChannel.transferTo() 方法，该方法底层调用了操作系统的 sendfile（在支持的系统上）。
  • 示例代码（简化的 Kafka 数据传输逻辑）： 
    import java.io.File;
import java.nio.channels.FileChannel;
import java.nio.channels.SocketChannel;public class SendfileExample {public static void main(String[] args) throws Exception {File file = new File("data.log");FileChannel fileChannel = FileChannel.open(file.toPath());SocketChannel socketChannel = SocketChannel.open();// 使用 transferTo 实现零拷贝传输long position = 0;long count = fileChannel.size();fileChannel.transferTo(position, count, socketChannel);fileChannel.close();socketChannel.close();}
}
    • transferTo() 在 Linux 上会映射到 sendfile，实现从文件到 socket 的高效传输。
3. Kafka 的优化点
  • 顺序读取：Kafka 的日志文件是顺序写入的，读取时也是顺序的，与 sendfile 的顺序传输特性完美匹配。
  • 批量传输：Kafka 将多条消息批量发送，sendfile 可以一次性传输大块数据，进一步减少系统调用开销。

Sendfile 的优势

Kafka 利用 sendfile 获得以下好处：

  1. 高吞吐量：减少数据拷贝和上下文切换，提升了数据传输效率。
  2. 低 CPU 使用率：DMA 处理数据移动，释放 CPU 资源。
  3. 低延迟：直接传输减少了中间环节的时间。

在基准测试中，Kafka 单节点可以达到每秒百万级消息的吞吐量，sendfile 是这一性能的重要支撑。

Sendfile 的局限性

尽管 sendfile 非常高效，但也有局限性：

  1. 仅限文件到 socket：sendfile 只能将数据从文件传输到网络，无法处理内存到网络的场景。
  2. 操作系统依赖：需要底层操作系统支持（Linux 支持，Windows 通过其他机制模拟）。
  3. 无数据处理：sendfile 不支持在传输过程中修改数据，适合 Kafka 这种直接转发日志的场景。

对于需要处理数据的场景（例如加密或压缩），Kafka 会结合其他技术（如用户空间缓冲）。

总结

  • sendfile 是什么：一种零拷贝的系统调用，用于高效传输文件数据到网络。
  • Kafka 如何使用：通过 FileChannel.transferTo() 调用 sendfile，将日志文件直接发送给消费者或 Follower。
  • 作用：提升吞吐量、降低 CPU 负载，是 Kafka 高性能的关键技术之一。

如果你想深入探讨 sendfile 在 Kafka 中的具体实现细节（例如源码分析），或者有其他疑问，请告诉我！

相关文章：

kafka零拷贝技术的底层实现

什么是 Sendfile？ sendfile 是一种操作系统提供的系统调用（system call），用于在两个文件描述符（file descriptor）之间高效传输数据。它最初由 Linux 内核引入（从 2.1 版本开始）&…...

编程日记 2025/7/21 17:50:46

Win11+VS2022+CGAL5.6配置

1. CGAL库简介 CGAL（Computational Geometry Algorithms Library）是一个开源的计算几何算法库，主要用于处理几何问题和相关算法的实现。它提供了丰富的几何数据结构和高效算法，覆盖点、线、多边形、曲面等基本几何对象的表示与操…...

编程日记 2025/7/21 17:31:34

Linux编译器gcc/g++使用完全指南：从编译原理到动静态链接

一、gcc/g基础认知 在Linux开发环境中，gcc和g是我们最常用的编译器工具： gcc：GNU C Compiler，专门用于编译C语言程序g：GNU C Compiler，用于编译C程序（也可编译C语言） &#x1f4cc…...

编程日记 2025/7/15 9:02:35

Vue3项目中的.vscode文件夹

.vscode 文件夹主要用于存放与 Visual Studio Code（VS Code）编辑器相关的项目配置文件，这些文件能让项目在 VS Code 里的开发体验更加个性化和高效。 extensions.json 在 .vscode 文件夹中，extensions.json 文件的作用是列出项目…...

编程日记 2025/7/17 15:17:01

蓝桥杯嵌入式十六届模拟三

由硬件框图可以知道我们要配置LED 和按键 一.LED 先配置LED的八个引脚为GPIO_OutPut，锁存器PD2也是，然后都设置为起始高电平，生成代码时还要去解决引脚冲突问题 二.按键 按键配置，由原理图按键所对引脚要GPIO_Input 生成代码，在文件夹中添加code文件夹，code中添加fun.…...

编程日记 2025/7/16 18:42:32

造成服务器网络连接不稳定的原因是什么？

服务器的稳定性会影响到网络的响应速度和用户的体验感，当服务器网络连接不稳定时，会到时用户在浏览网站的过程中出现页面卡顿或页面消失等情况，给企业造成一定的经济损失，本文就来介绍一下造成服务器网络连接不稳定的因素都有哪些…...

编程日记 2025/7/21 17:47:40

[FPGA基础学习]加法器、三八译码器及DE2-115基本使用方法和数码管显示

软件安装：QuartusLite安装说明及驱动更新 DE2-115上电及程序烧录 1.用包装盒里的USB 电缆将PC的USB端口和DE2-115开发板的USB Blaster连接器连接 起来，为了实现主机和开发板之间的通讯，必须安装USB Blaster 驱动软件 鼠标右击“USB-Blaster…...

编程日记 2025/7/21 13:58:37

VSCode 市场发现恶意扩展正在传播勒索软件！

在VSCode 市场中发现了两个隐藏着勒索软件的恶意扩展。其中一个于去年 10 月出现在微软商店，但很长时间没有引起注意。 这些是扩展ahban.shiba 和 ahban.cychelloworld，目前已从商店中删除。 此外，ahban.cychelloworld 扩展于 2024 年 10 月…...

编程日记 2025/7/21 4:41:54

树状数组 3 ：区间修改，区间查询

【题目描述】 这是一道模板题。 给定数列 a[1],a[2],…,a[n]，你需要依次进行q个操作，操作有两类： 1lrx：给定 l,r,x对于所有 i∈[l,r]，将a[i]加上x（换言之，将 a[l],a[l1],…a[r] 分别加上 x&a…...

编程日记 2025/7/20 13:16:56

C++的IO流

1. C语言的输入与输出 C语言中我们用到的最频繁的输入输出方式就是scanf ()与printf()。 scanf(): 从标准输入设备(键盘)读取数据，并将值存放在变量中。printf(): 将指定的文字/字符串输出到标准输出设备(屏幕)。 注意宽度输出和精度输出控制。C语言借助了相应的缓…...

编程日记 2025/7/19 14:35:25

QLoRA和LoRA 微调

QLoRA 其实是一种结合了量化和 LoRA 微调技术的统一方法，而不是同时使用两种不同的微调方式。换句话说，QLoRA 的意思就是：先把大模型的主权重用低精度（例如 4-bit）量化，从而大幅减少存储需求；然…...

编程日记 2025/7/16 1:50:12

Android电话监听器的设计与实现：深入解析Service与TelephonyManager

目录 一、引言 二、Service核心机制解析 1. Service的本质特性 2. 生命周期管理 3. 服务类型全景 三、Service实战开发 1. 启动式Service开发（lesson1） 2. 绑定式Service开发 四、电话监听器完整实现（lesson3） 1. 系统架…...

编程日记 2025/7/19 14:01:49

java学习笔记7——面向对象

关键字：static 类变量 静态变量的内存解析： 相关代码： public class ChineseTest {public static void main(String[] args) {System.out.println(Chinese.nation); //null 没赋值前System.out.println(Chinese.nation); //中国 静态变量赋值…...

编程日记 2025/7/18 1:10:39

java学习——函数式编程（1）

函数式编程 Java 的函数式编程是一种以函数为核心构建逻辑的编程范式，强调不可变性、声明式代码和无副作用的操作。它通过Lambda表达式、函数式接口（如Function、Predicate、Consumer等）和Stream API等特性实现，将计算过程抽象为函数的组合与转换，而非传统的命令式步骤。…...

编程日记 2025/7/12 10:45:33

java 批量下载doc\excle\pdf

指定图片集合 下载到指定文件夹 import java.io.*; import java.net.HttpURLConnection; import java.net.URL; import java.util.Arrays; import java.util.List;public class OfficeFileDownloader {/*** 需要下载的Office文档URL列表*/private static final List<Strin…...

编程日记 2025/7/17 7:43:46

Python爬虫：Feapder 的详细使用和案例

更多内容请见： 爬虫和逆向教程-专栏介绍和目录 文章目录 1. Feapder 概述1.1 Feapder介绍1.2 Feapder 核心特点1.3 Feapder 主要组件1.4 Feapder的安装2. 基础爬虫编写2.1 创建爬虫2.2 运行爬虫3. 数据采集案例3.1 新闻网站采集3.2 电商商品采集3.3 使用 Spider 类创建更强大爬…...

编程日记 2025/7/16 17:29:16

【江协科技STM32】读写备份寄存器RTC实时时钟（学习笔记）

参考相关文章理解&#xff1a; 【江协科技STM32】Unix时间戳&#xff08;学习笔记&#xff09;-CSDN博客 【江协科技STM32】BKP备寄存器&RTC实时时钟&#xff08;学习笔记&#xff09;_stm32断电保存时钟-CSDN博客 读写备份寄存器 接线图&#xff1a;VBAT是从STLINK的…...

编程日记 2025/7/21 17:34:13

Linux touch命令

参考资料 Linux 常用命令 - touch 【创建空文件与修改时间戳】 目录 一. 用法简介二. 配合扩展字符&#xff0c;批量创建文件三. 修改文件的时间戳3.1 -t 配置项3.2 -d 配置项3.3 配合find命令实现批量时间戳修改 四. 结合 find 批量创建相同时间的新文件 一. 用法简介 ⏹当指…...

编程日记 2025/7/20 20:46:11

PyTorch图像预处理--Compose

torchvision.transforms.Compose 是 PyTorch 中用于图像预处理的核心工具&#xff0c;可将多个图像变换操作组合成一个顺序执行的流水线。 ‌1. 定义与作用‌ ‌功能‌&#xff1a;将多个图像处理步骤&#xff08;如缩放、裁剪、归一化等&#xff09;串联为一个整体&#xff…...

编程日记 2025/7/18 15:46:31

CSP历年题解

CSP历年题解 csp历年题解&#xff0c;csp.cpp内容涵盖从2023年12月开始一直持续到第一次认证的所有前4题。所有的题解均为满分&#xff0c;在其中&#xff0c;有四道题非本人编写&#xff0c;而从网上搜集优质解答&#xff0c;并且已在文中附上了来源链接。其余则为自己编写&a…...

编程日记 2025/7/21 6:35:23

《索引江湖：B树索引与哈希索引的风云对决》

在数据库的神秘世界里&#xff0c;索引宛如一把把神奇的钥匙&#xff0c;帮助我们在海量数据中快速找到所需信息。而B树索引与哈希索引&#xff0c;则是其中两把最为耀眼的利刃&#xff0c;各自凭借独特的“武功秘籍”&#xff0c;在不同的应用场景中大放异彩。今天&#xff0c…...

编程日记 2025/7/18 17:11:28

java八股文之JVM

1.什么是程序计数器 程序计数器是 JVM 管理线程执行的“定位器”&#xff0c;记录每个线程当前执行的指令位置&#xff0c;确保程序流程的连续性和线程切换的准确性。线程私有的&#xff0c;每个线程一份&#xff0c;内部保存的字节码的行号。用于记录正在执行的字节码指令的地…...

编程日记 2025/7/16 17:06:43

学习爬虫的第二天——分页爬取并存入表中

阅读提示&#xff1a;我现在还在尝试爬静态页面 一、分页爬取模式 以豆瓣Top250为例&#xff1a; 基础url:豆瓣电影 Top 250https://movie.douban.com/top250 分页参数:?start0&#xff08;第一页&#xff09;、?start25&#xff08;第二页&#xff09;等 每页显示25条数…...

编程日记 2025/7/17 12:18:36

Ubuntu与Windows之间相互复制粘贴的方法

一、打开Ubuntu终端 二、卸载已有的工具 sudo apt-get autoremove open-vm-tools 三、安装工具 sudo apt-get install open-vm-tools-desktop 四、重启 直接输入reboot 注&#xff1a;有任何问题欢迎评论区交流讨论或者私信&#xff01;...

编程日记 2025/6/28 4:54:27

docker安装hyperf环境，连接本机redis问题处理

错误信息显示“Connection refused”&#xff0c;这通常说明 Docker 容器内的 Hyperf 项目无法连接到你本机的 Redis 服务。 1. 容器内的 127.0.0.1 指向问题 在 Docker 容器中&#xff0c;127.0.0.1 指的是容器本身&#xff0c;而不是宿主机&#xff08;你的 Mac&#xff09;…...

编程日记 2025/7/15 21:13:28

第12章:优化并发_《C++性能优化指南》notes

优化并发 一、并发基础与优化核心知识点二、关键代码示例与测试三、关键优化策略总结四、性能测试方法论多选题设计题答案与详解多选题答案&#xff1a; 设计题答案示例 一、并发基础与优化核心知识点 线程 vs 异步任务 核心区别&#xff1a;std::thread直接管理线程&#xf…...

编程日记 2025/7/10 16:18:29

Linux操作系统7- 线程同步与互斥7（RingQueue环形队列生产者消费者模型改进）

上篇文章&#xff1a;Linux操作系统7- 线程同步与互斥6&#xff08;POSIX信号量与环形队列生产者消费者模型&#xff09;-CSDN博客 本篇代码仓库&#xff1a;myLerningCode/l36 橘子真甜/Linux操作系统与网络编程学习 - 码云 - 开源中国 (gitee.com) 目录 一. 单生产单消费单保…...

编程日记 2025/7/17 19:31:41

学有所记——初探向量数据库Weaviate

目标&#xff1a; 了解向量数据库的连接、建库、插入数据、查询数据等基本用法以及关于语义相似度的一些基本概念。 背景&#xff1a; 前段时间尝试在自己的电脑上搭建OllamaDify平台&#xff0c;体验并探索大模型的强大功能。在使用过程中&#xff0c;尤其是在搭建RAG知识库…...

编程日记 2025/7/20 21:45:19

Ardupilot开源无人机之Geek SDK进展2025Q2

Ardupilot开源无人机之Geek SDK进展2025Q2 1. 源由2. 内容汇总2.1 【jetson-fpv】“Caution - Hot surface. Dont touch.”2.2 【jetson-fpv】1080P/720P显示设备配置 3. 遗留问题3.1 高优先级3.1.1 【jetson-fpv】1080P60FPS AI分析视频卡顿&#xff0c;丢包3.1.2 【jetson-fp…...

编程日记 2025/7/16 1:48:59

深入理解K8s与Docker的关系：容器化技术的双雄

友情提示&#xff1a;本文内容由银河易创&#xff08;https://ai.eaigx.com&#xff09;AI创作平台gpt-4-turbo模型生成&#xff0c;仅供参考。 在现代云计算及微服务架构的发展中&#xff0c;Docker与Kubernetes&#xff08;K8s&#xff09;作为两大核心技术&#xff0c;被广泛…...

编程日记 2025/7/18 10:49:15

QT高效文件I/O编程--实用指南与最佳实践

概述 在软件开发过程中，文件输入输出（I/O）操作是数据持久化和交换的核心部分。无论是简单的日志记录还是复杂的数据集处理，高效的文件I/O操作对于应用的整体性能至关重要 最佳实践 一、选择合适的文件模式 正确选择文件打开模式是确保操作意图明确且安全的第一步。不同…...

编程日记 2025/7/16 22:22:22

QT记事本

记事本应用程序提供了基本的文本编辑功能&#xff0c;支持文件的新建、打开、保存和另存为操作&#xff0c;同时具备修改提示和关闭窗口时的保存确认功能。使用 UTF - 8 编码确保了对多语言文本的支持。 1. 项目整体结构 main.cpp&#xff1a;程序的入口点&#xff0c;负责初…...

编程日记 2025/7/21 4:30:48

【leetcode hot 100 84】柱状图中最大的矩形

解法一&#xff1a;单调栈 class Solution {public int largestRectangleArea(int[] heights) {int len heights.length;int area 0;// 先做一些特殊判断if(len0){return 0;}if(len1){return heights[0];}// 进入栈后发现后面更短&#xff0c;可以得到当前这个能勾勒的面积 …...

编程日记 2025/7/17 20:44:46

Spring----ioc

1.Spring 是什么&#xff1f; 通过前⾯的学习, 我们知道了Spring是⼀个开源框架, 他让我们的开发更加简单. 他⽀持⼴泛的应⽤场景, 有着活跃⽽庞⼤的社区, 这也是Spring能够⻓久不衰的原因. 但是这个概念相对来说, 还是⽐较抽象. 我们⽤⼀句更具体的话来概括Spring, 那就…...

编程日记 2025/7/21 17:35:10

C++——重载

目录 一、函数重载 基本概念 函数重载的条件 编程示例 代码讲解 函数重载的注意事项 二、运算符重载 什么是运算符重载&#xff1f; 运算符重载的实质是什么&#xff1f; 运算符重载函数的写法 运算符重载的基本语法 可重载的运算符列表 基本原则 编程示例 代码解…...

编程日记 2025/7/16 16:53:21

答疑解惑：EMC VMAX3 MMCS控制台不定期重启原因分析

今天有个朋友咨询他们有一台EMC的VMAX100k设备&#xff0c;其中MMCS2的管理控制台定期重启&#xff0c;但始终无法找到重启原因&#xff0c;稍微花了点时间&#xff0c;帮客户看了下。先说结论&#xff0c;MMCS2确实不定期发生重启&#xff0c;每次reboot都是一样的message信息…...

编程日记 2025/7/11 5:23:10

单例模式（Singleton Pattern）

单例模式&#xff08;Singleton Pattern&#xff09; 任务管理器可以作为一个全局的任务配置管理类&#xff0c;使用单例模式保证全局只有一个实例。这样你可以避免在应用程序中创建多个任务管理对象&#xff0c;保持配置参数的统一。 示例&#xff1a; class TaskManager { …...

编程日记 2025/7/17 1:10:26

树莓派超全系列文档--(8)RaspberryOS实用程序

RaspberryOS实用程序 实用程序kmsprintvclogvcgencmdvcosversionget_throttledmeasure_tempmeasure_clock [clock]measure_volts [block]otp_dumpget_config [configuration item|int|str]get_mem typecodec_enabled [type]mem_oommem_reloc_statsread_ring_osc 文章来源&#…...

编程日记 2025/7/17 9:15:52

Rust 与 FFmpeg 实现视频水印添加：技术解析与应用实践

引言 在短视频、直播、影视制作等领域&#xff0c;视频水印是一种常见的工具&#xff0c;用于保护版权、提升品牌辨识度或满足合规性要求。然而&#xff0c;开发者在实现水印添加时往往面临以下挑战&#xff1a; 手动处理效率低&#xff1a;使用图像编辑软件&#xff08;如 P…...

编程日记 2025/7/16 11:39:04

绿联NAS安装内网穿透实现无公网IP也能用手机平板远程访问经验分享

文章目录 前言1. 开启ssh服务2. ssh连接3. 安装cpolar内网穿透4. 配置绿联NAS公网地址 前言 大家好&#xff0c;今天给大家带来一个超级炫酷的技能——如何在绿联NAS上快速安装cpolar内网穿透工具。想象一下&#xff0c;即使没有公网IP&#xff0c;你也能随时随地远程访问自己…...

编程日记 2025/7/15 1:15:29

如何在 React 项目中使用React.lazy和Suspense实现组件的懒加载？

大白话如何在 React 项目中使用React.lazy和Suspense实现组件的懒加载&#xff1f; 在 React 项目里&#xff0c;有时候组件功能多、体积大&#xff0c;要是一次性把所有组件都加载进来&#xff0c;网页加载速度就会变慢。而 React 提供了 React.lazy 和 Suspense 这两个好东西…...

编程日记 2025/7/18 5:16:11

虫洞数观系列一 | 豆瓣电影TOP250数据采集与MySQL存储实战

目录 系列文章 1. 引言 2 技术栈Request 2.1请求头headers 2.2查找定位信息 2.3处理网页html结构化数据 2.4每页url规律 2.5逐条查找所需信息 2.6完整代码 3 数据存储至mysql 3.1新建数据库 3.2编写数据库写入py文件 3.2.1构建1个执行sql语句的函数 3.2.2构造一个…...

编程日记 2025/7/17 11:42:12

模型 阿米巴模式

系列文章分享模型&#xff0c;了解更多&#x1f449; 模型_思维模型目录。小团队独立经营&#xff0c;企业活力无限。 1 阿米巴模式的应用 1.1 日航重生&#xff08;航空业成功案例&#xff09; 应用领域 航空运输业破产重组与组织激活 案例名称 日本航空&#xff08;JAL&…...

编程日记 2025/7/18 5:01:30

针对stm32F103C8t6芯片调节USB串口的经验

1、首先这是自己手搓的板子，对于之前一直没有了解过USB这方面，则这个针对USB部分没有设计上拉电阻，造成不管怎么调节PC端都没有反应。 图一 这个没有添加1.5K电阻 这个D+位置应该再接一个1.5KR的电阻如图2所示 图2 这样调节的话PC端就可以识别到USB串口，但是这是串口还是会…...

编程日记 2025/7/12 1:42:35

JVM详解(包括JVM内存模型与GC垃圾回收)

&#x1f4d6;前言&#xff1a; 学会使用Java对于一个程序员是远远不够的。Java语法的掌握只是一部分&#xff0c;另一部分就是需要掌握Java内部的工作原理&#xff0c;从编译到运行&#xff0c;到底是谁在帮我们完成工作的&#xff1f; 接下来着重对Java虚拟机&#xff0c;也就…...

编程日记 2025/7/18 13:56:53

解锁DeepSeek潜能：Docker+Ollama打造本地大模型部署新范式

&#x1f407;明明跟你说过&#xff1a;个人主页 &#x1f3c5;个人专栏&#xff1a;《深度探秘&#xff1a;AI界的007》 &#x1f3c5; &#x1f516;行路有良友&#xff0c;便是天堂&#x1f516; 目录 一、引言 1、什么是Docker 2、什么是Ollama 二、准备工作 1、操…...

编程日记 2025/7/16 1:37:51

【Linux网络】——Socket网络编程

前言 在当今数字化的时代&#xff0c;网络通信已经成为计算机领域不可或缺的一部分。无论是日常的网页浏览、社交媒体交互&#xff0c;还是大规模的企业级数据传输&#xff0c;都离不开高效可靠的网络通信。而在Linux操作系统中&#xff0c;Socket网络编程是实现各种网络应用的…...

编程日记 2025/7/17 8:45:20

基于javaweb的SpringBoot雪具商城系统设计与实现(源码+文档+部署讲解）

技术范围&#xff1a;SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、Python、爬虫、数据可视化、小程序、安卓app、大数据、物联网、机器学习等设计与开发。 主要内容&#xff1a;免费功能设计、开题报告、任务书、中期检查PPT、系统功能实现、代码编写、论文编写和辅导、论…...

编程日记 2025/7/11 15:03:01

Android 简化图片加载与显示——使用Coil和Kotlin封装高效工具类

为了简化使用Coil加载网络图片和GIF的过程&#xff0c;我们可以封装一个工具类。这个工具类将包括初始化ImageLoader的方法、加载图片到ImageView的方法&#xff0c;以及可能的其他便捷方法&#xff0c;如加载圆形图片、设置占位图等。下面是一个示例&#xff1a; 首先&#x…...

编程日记 2025/7/18 18:33:31

Flink watermark的时间字段有空值，建表的时候，如何处理

在 Flink 中处理时间字段存在空值时&#xff0c;需通过 表定义阶段的特殊处理 和 Watermark 生成策略调整 来避免因空值导致的窗口计算异常或任务失败。以下是具体解决方案及实现方法&#xff1a; 1. 空值处理核心策略 1.1 查询时&#xff0c;过滤空值数据&#xff08;推荐&am…...

编程日记 2025/7/10 5:20:08