当前位置：首页 > news >正文

docker-compose部署kafka 3.3.1 kraft

news 来源：原创 2025/6/8 14:08:35

一、服务器：

节点1:10.1.1.165
节点2:10.1.1.164
节点3:10.1.1.169

二、添加环境地址解析

vim /etc/hosts
kafka1 10.1.1.165
kafka2 10.1.1.164
kafka3 10.1.1.169

三、节点配置
节点1

version: "3"
services:kafka1:image: 'bitnami/kafka:3.3.1'container_name: kafka11restart: alwaysuser: rootports:- 9192:9092- 9193:9093environment:- KAFKA_ENABLE_KRAFT=yes- KAFKA_CFG_PROCESS_ROLES=broker,controller- KAFKA_CFG_CONTROLLER_LISTENER_NAMES=CONTROLLER- KAFKA_CFG_LISTENERS=PLAINTEXT://:9092,CONTROLLER://:9093- KAFKA_CFG_LISTENER_SECURITY_PROTOCOL_MAP=CONTROLLER:PLAINTEXT,PLAINTEXT:PLAINTEXT- KAFKA_KRAFT_CLUSTER_ID=xxxxxxxxxxxxxxxxxxxxxx- KAFKA_CFG_CONTROLLER_QUORUM_VOTERS=1@kafka1:9193,2@kafka2:9293,3@kafka3:9393- ALLOW_PLAINTEXT_LISTENER=yes- KAFKA_HEAP_OPTS=-Xmx1024M -Xms512M - KAFKA_CFG_AUTO_CREATE_TOPICS_ENABLE=false- KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://10.1.1.165:9192- KAFKA_BROKER_ID=1- KAFKA_CFG_NODE_ID=1- TZ=Asia/Shanghaivolumes:- /kafka/kraft:/bitnami/kafka- /etc/localtime:/etc/localtime:ro- /etc/hosts:/etc/hostskafka-ui:image: provectuslabs/kafka-ui:latest#    network_mode: heilansc-productcontainer_name: kafka-uirestart: alwaysports:- 9091:8080volumes:- /etc/localtime:/etc/localtime- /etc/hosts:/etc/hostsenvironment:# 集群名称- KAFKA_CLUSTERS_0_NAME=local# 集群地址- KAFKA_CLUSTERS_0_BOOTSTRAPSERVERS=kafka1:9192,kafka2:9292,kafka3:9392
networks:default:external: truename: product

节点2

version: "3"
services:kafka2:image: 'bitnami/kafka:3.3.1'container_name: kafka22restart: alwaysuser: rootports:- 9292:9092- 9293:9093environment:- KAFKA_ENABLE_KRAFT=yes- KAFKA_CFG_PROCESS_ROLES=broker,controller- KAFKA_CFG_CONTROLLER_LISTENER_NAMES=CONTROLLER- KAFKA_CFG_LISTENERS=PLAINTEXT://:9092,CONTROLLER://:9093- KAFKA_CFG_LISTENER_SECURITY_PROTOCOL_MAP=CONTROLLER:PLAINTEXT,PLAINTEXT:PLAINTEXT- KAFKA_KRAFT_CLUSTER_ID=xxxxxxxxxxxxxxxxxxxxxx- KAFKA_CFG_CONTROLLER_QUORUM_VOTERS=1@kafka1:9193,2@kafka2:9293,3@kafka3:9393- ALLOW_PLAINTEXT_LISTENER=yes- KAFKA_HEAP_OPTS=-Xmx1024M -Xms512M - KAFKA_CFG_AUTO_CREATE_TOPICS_ENABLE=false- KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://10.1.1.164:9292- KAFKA_BROKER_ID=2- KAFKA_CFG_NODE_ID=2- TZ=Asia/Shanghaivolumes:- /kafka/kraft:/bitnami/kafka- /etc/localtime:/etc/localtime:ro- /etc/hosts:/etc/hosts
networks:default:external: truename: product

节点3

version: "3"
services:kafka3:image: 'bitnami/kafka:3.3.1'container_name: kafka33restart: alwaysuser: rootports:- 9392:9092- 9393:9093environment:- KAFKA_ENABLE_KRAFT=yes- KAFKA_CFG_PROCESS_ROLES=broker,controller- KAFKA_CFG_CONTROLLER_LISTENER_NAMES=CONTROLLER- KAFKA_CFG_LISTENERS=PLAINTEXT://:9092,CONTROLLER://:9093- KAFKA_CFG_LISTENER_SECURITY_PROTOCOL_MAP=CONTROLLER:PLAINTEXT,PLAINTEXT:PLAINTEXT- KAFKA_KRAFT_CLUSTER_ID=xxxxxxxxxxxxxxxxxxxxxx- KAFKA_CFG_CONTROLLER_QUORUM_VOTERS=1@kafka1:9193,2@kafka2:9293,3@kafka3:9393- ALLOW_PLAINTEXT_LISTENER=yes- KAFKA_HEAP_OPTS=-Xmx1024M -Xms512M - KAFKA_CFG_AUTO_CREATE_TOPICS_ENABLE=false- KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://10.1.1.169:9392- KAFKA_BROKER_ID=3- KAFKA_CFG_NODE_ID=3- TZ=Asia/Shanghaivolumes:- /kafka/kraft:/bitnami/kafka- /etc/localtime:/etc/localtime:ro- /etc/hosts:/etc/hosts
networks:default:external: truename: product

docker-compose部署kafka 3.3.1 kraft

一、服务器： 节点1:10.1.1.165 节点2:10.1.1.164 节点3:10.1.1.169二、添加环境地址解析 vim /etc/hosts kafka1 10.1.1.165 kafka2 10.1.1.164 kafka3 10.1.1.169三、节点配置节点1 version: "3" services:kafka1:image: bitnami/kafka:3.3.1contain…...

编程日记 2025/6/1 15:03:03

Linux 串口检查状态的实用方法

在 Linux 系统中，串口通信是非常常见的操作，尤其在嵌入式系统、工业设备以及其他需要串行通信的场景中。为了确保串口设备的正常工作，检查串口的连接状态和配置信息是非常重要的。本篇文章将介绍如何在 Linux 上检查串口的连接状态&#xff0…...

编程日记 2025/6/4 4:22:00

使用FRP进行内网穿透

一、基本概念内网穿透：它是一种网络技术或方法，旨在允许外部网络（如互联网）访问位于内部网络（内网）中的设备或服务。由于内部网络通常处于NAT（网络地址转换）、防火墙或其他安全机制…...

编程日记 2025/6/3 6:42:33

Ubuntu打开文件夹不显示文件

1.情况介绍使用ubuntu打开文件夹不显示文件夹里面的内容，而是直接打开了资源查看器。 2.解决办法命令行安装nautilus sudo apt-get install nautilus...

编程日记 2025/6/4 4:22:48

HarmonyOS NEXT应用开发边学边玩系列：从零实现一影视APP (三、影视搜索页功能实现)

在HarmonyOS NEXT开发环境中，可以使用nutpi/axios库来简化网络请求的操作。本文将展示如何使用HarmonyOS NEXT框架和nutpi/axios库，从零开始实现一个简单的影视APP，主要关注影视搜索页的功能实现。为什么选择nutpi/axios？ nutpi…...

编程日记 2025/6/4 4:22:16

探秘 JMeter 前置处理器：让性能测试如虎添翼

想象一下，你是一位超级英雄，要对一个庞大的虚拟城市（Web 应用）进行全面的 “健康检查”。JMeter 就是你的神奇工具包，而其中的前置处理器，就像是这个工具包里的各种超级武器，能帮助你轻松应对各…...

编程日记 2025/6/3 22:15:06

如何在gitlab cicd中实现每月10号上午执行

在 GitLab CI/CD 中，可以通过设置定时触发器（Schedules）和脚本中的时间判断逻辑结合，确保任务只在每月 10 号的上午运行。以下是实现的步骤： 1. 设置定时触发器 GitLab 提供了 Schedules 功能，可以指定每…...

编程日记 2025/5/30 10:32:21

深度学习基础知识

深度学习是人工智能（AI）和机器学习（ML）领域的一个重要分支，以下是对深度学习基础知识的归纳： 一、定义与原理定义：深度学习是一种使计算机能够从经验中学习并以概念层次结构的方式理解世界的机…...

编程日记 2025/6/2 9:39:00

面试加分项：Android Framework AMS 全面概述和知识要点

第一章：AMS 的架构与组件 1.1 AMS 整体架构在 Android 系统的庞大体系中，AMS（Activity Manager Service）就如同一个中枢神经系统，是整个系统的核心服务之一，对应用的性能和用户体验有着直接且关键的影响。它的整体架构由 Client 端和 Service 端两大部分组成，这两端相…...

编程日记 2025/6/2 23:27:57

网安——CSS

一、CSS基础概念 CSS有两个重要的概念，分为样式和布局 CSS的样式分为两种，一种是文字的样式，一种是盒模型的样式 CSS的另一个重要的特质就是辅助页面布局，完成HTML不能完成的功能，比如并排显示或精确定位显示从HT…...

编程日记 2025/6/1 18:24:46

知识图谱常见的主流图数据库

在知识图谱中，主流使用的图数据库包括以下几种： Neo4j：这是目前全球部署最广泛的图数据库之一，具有强大的查询性能和灵活的数据模型，适用于复杂关系数据的存储和查询。 JanusGraph：JanusGraph是一个开源的…...

编程日记 2025/6/2 23:27:24

阀井可燃气体监测仪，开启地下管网安全新篇章-旭华智能

在城市的脉络中，地下管网犹如隐秘的动脉，支撑着现代生活的运转。而在这庞大网络的关键节点上，阀井扮演着不可或缺的角色。然而，由于其密闭性和复杂性，阀井内部一旦发生可燃气体泄漏，将对公共安全构成严重威…...

编程日记 2025/6/4 6:13:13

【6】Word：海名公司文秘❗

目录题目 List.docx Word.docx List.docx和Word.docx 题目 List.docx 选中1/4全角空格复制→选中全部文本→开始→替换：粘贴将1/4全角空格替换成空格选中全部文本→插入→表格→将文本转化成表格→勾选和布局→自动调整→勾选选中第一列，单机右键…...

编程日记 2025/6/2 22:50:16

微信原生小程序自定义封装组件（以导航navbar为例）

封装 topnav.js const App getApp(); Component({// 组件的属性列表properties: {pageName: String, //中间的titleshowNav: { //判断是否显示左上角的按钮 type: Boolean,value: true},showHome: { //判断是否显示左上角的home按钮type: Boolean,value: true},showLocat…...

编程日记 2025/5/18 10:20:19

＜OS 有关＞Ubuntu 24 安装 openssh-server, tailscale+ssh 慢增加

更新日志： Created on 14Jan.2025 by Dave , added openssh-server, tailescape Updated on 15Jan.2025, added "tailescape - tailscape ssh" 前期准备： 1. 更新可用软件包的数据库 2. 升级系统中所有已安装的软件包到最新版本 3. 安装 cur…...

编程日记 2025/6/2 23:26:49

HQL（JPQL）和原生SQL实现查询自定义返回类

维修申请实例RepairApplyInstance： package com.byx.scaffold.common.entity.jpa;import com.byx.scaffold.common.entity.jpaEnum.RepairStatusConstant; import lombok.Data;import javax.persistence.Convert; import javax.persistence.Entity; import javax.persistence…...

编程日记 2025/6/4 3:37:48

微信小程序实现拼图功能

微信小程序实现拼图效果示例功能描述代码示例效果示例微信小程序碎片拼图功能描述在微信小程序中，实现一个简单的拼图小游戏。用户需要将四张碎片图片拖动到目标图片的正确位置，具体功能如下： 拖动功能： 用户可以通过手指…...

编程日记 2025/6/3 14:06:34

《C++11》并发库：简介与应用

在C11之前，C并没有提供原生的并发支持。开发者通常需要依赖于操作系统的API（如Windows的CreateThread或POSIX的pthread_create）或者第三方库（如Boost.Thread）来创建和管理线程。这些方式存在以下几个问题： …...

编程日记 2025/6/3 14:08:27

【RDMA学习笔记】1：RDMA（Remote Direct Memory Access）介绍

从帝国理工的PPT学习。什么是RDMA Remote Direct Memory Access，也就是Remote的DMA，是一种硬件机制，能直接访问远端结点的内存，而不需要处理器介入。其中： Remote：跨node进行数据传输Direct&#xff…...

编程日记 2025/6/3 13:12:44

Autodl转发端口，在本地机器上运行Autodl服务器中的ipynb文件

通过 SSH 隧道将远程端口转发到本地机器输入服务器示例的SSH指令和密码，将远程的6006端口代理到本地在服务器终端，激活conda虚拟环境 conda activate posecnnexport PYOPENGL_PLATFORMegljupyter notebook --no-browser --port6006 --allow-root从…...

编程日记 2025/6/2 22:04:03

【Linux】常见指令(一)

Linux常见指令 01.whoami02.pwd03.ls04.mkdir05.cd 本文LInux环境为，使用XShell远程登陆到Linux。具体如何环境搭建，大家可以查看其他博客。 01.whoami whoami 指令用来查看当前账户是谁。如上图所示，使用whoami指令，查看到现在…...

编程日记 2025/6/2 7:45:19

AI学习之自然语言处理（NLP）

自然语言处理（Natural Language Processing，NLP）是计算机科学、人工智能和语言学领域的交叉学科，旨在让计算机能够理解、处理和生成人类语言。以下为你详细介绍： 自然语言处理的关键技术词法分析：将文本…...

编程日记 2025/6/3 14:07:06

全面解析锁服务设计：内存锁、数据库锁与分布式锁的选择与实现

在构建分布式系统时，锁服务通常用于控制多个线程或进程对共享资源的访问。为了灵活适配不同的锁实现方式，我们可以设计一个基础的锁服务接口，然后根据需求提供不同的实现。例如，内存锁、数据库锁和分布式锁。 1. 锁服务基础接口设…...

编程日记 2025/6/3 14:07:54

jenkins-系统配置概述

一. 引文： Jenkins除了强大的功能插件实现的持续交付集成外， 本身也是有一些比较重要的可配项。接下来我们来看一看。配置入口: 系统管理-->系统设置二. 基础配置： 1.主目录(home directory): Jenkins所有的数据文件存放路径(可通过…...

编程日记 2025/6/3 14:06:50

《数据思维》之数据可视化_读书笔记

文章目录系列文章目录前言一、pandas是什么？二、使用步骤 1.引入库2.读入数据总结前言数据之道，路漫漫其修远兮，吾将上下而求索。一、数据可视化最基础的数据可视化方法就是统计图。一个好的统计图应该满足四个标准：准确、有…...

编程日记 2025/6/3 14:07:22

kafka消费堆积问题探索

背景我们的商城项目用PHP写的，原本写日志方案用的是PHP的方案，但是，这个方案导致资源消耗一直降不下来，使用了20个CPU。后面考虑使用通过kafka的方案写日志，商城中把产生的日志丢到kafka中，在以go写的项目…...

编程日记 2025/6/3 11:02:07

一文掌握Docker

目录 1.快速入门 1.1.部署MySQL 1.2.命令解读 2.Docker基础 2.1.常见命令 2.1.1.命令介绍 2.1.2.演示 2.1.3.命令别名 2.2.数据卷 2.2.1.什么是数据卷 2.2.2.数据卷命令 2.2.3.挂载本地目录或文件 2.3.镜像 2.3.1.镜像结构 2.3.2.Dockerfile构建镜像 2.3.3.构建…...

编程日记 2025/6/3 3:20:17

慧集通（DataLinkX）iPaaS集成平台-系统管理之UI库管理、流程模板

UI库管理 UI库管理分为平台级和自建两种，其中平台级就是慧集通平台自己内置的一些ui库所有客户均可调用，自建则是平台支持使用者自己根据规则自己新增对应的UI库。具体界面如下： 自建UI库新增界面： 注：平台级UI库不支…...

编程日记 2025/6/3 11:04:18

【学习笔记】Macbook管理多个不同的Python版本

在MacBook上管理不同项目的不同Python版本，可以使用多种方法。以下是一些常见的方法： 1. 使用 pyenv pyenv 是一个非常流行的工具，可以让你轻松安装和切换多个Python版本。以下是安装和使用 pyenv 的步骤： 安装 pyenv 安装依赖…...

编程日记 2025/6/3 7:15:51

前端如何设计一个回溯用户操作的方案

同一个项目，为什么我本地无法复现，只有客户的设备才复现？ 如何获取用户的操作路径呢？ 两种方案：埋点和rrweb 埋点就很简单了，将所有可能操作的节点都进行预埋数据；但埋点简单并不省心&#xff…...

编程日记 2025/6/3 11:04:02

WPF、控件模板(ControlTemplate)和数据模板(DataTemplate)

前言在 WPF 中，控件种类丰富且功能非常完善。一个显著的优点是 WPF 提供了强大的自定义能力和灵活的用户界面表现，能够满足各种复杂的应用需求。其中，ControlTemplate 和 DataTemplate 是两个非常重要的概念，分别用于自定义控件…...

编程日记 2025/6/3 11:02:23

MAC上安装Octave

1. 当前最新版Octave是9.3版本，需要把mac os系统升级到14版本（本人之前的版本是10版本） https://wiki.octave.org/Octave_for_macOS octave的历史版本参考此文档：Octave for macOS (outdated) - Octavehttps://wiki.octave.org/Oc…...

编程日记 2025/6/3 11:02:58

RabbitMQ(三)

RabbitMQ中的各模式及其用法工作队列模式一、生产者代码1、封装工具类2、编写代码3、发送消息效果二、消费者代码1、编写代码2、运行效果发布订阅模式一、生产者代码二、消费者代码1、消费者1号2、消费者2号三、运行效果四、小结路由模式一、生产者代码二、消费者代码1、消…...

编程日记 2025/6/3 11:03:46

一体机cell服务器更换内存步骤

一体机cell服务器更换内存步骤： #1、确认grdidisk状态 cellcli -e list griddisk attribute name,asmmodestatus,asmdeactivationoutcome #2、offline griddisk cellcli -e alter griddisk all inactive #3、确认全部offline后进行关机操作 shutdown -h now #4、开…...

编程日记 2025/6/2 13:39:34

年后找工作需要注意的事项

大家好！我是 [数擎 AI]，一位热爱探索新技术的前端开发者，在这里分享前端和 Web3D、AI 技术的干货与实战经验。如果你对技术有热情，欢迎关注我的文章，我们一起成长、进步！ 开发领域：前端开发 | A…...

编程日记 2025/6/3 11:03:14

【网络 MAC 学习专栏 -- 如何理解 PHY 的 Link Up】

编程日记 2025/6/4 8:42:19

鸿蒙UI开发——文本级联选择器

1、概述 ArkUI提供了一个文本选择器（showTextPickerDialog），可以方便的实现文本级联选择，例如：省->市->区，示意如下： 下面针对文本选择器做简单介绍。 2、接口介绍定义文本滑动选择器…...

编程日记 2025/6/3 6:32:52

后盾人JS -- JS运算符与流程控制

嘻嘻赋值运算符与算术运算符没什么好说的，等号谁都会用比较运算符注意事项如果一个是字符一个是数字也是可以比较的（） 是判断值和类型是否相等 <!DOCTYPE html> <html lang"en"><head><meta charset…...

编程日记 2025/5/31 21:57:38

Hive SQL必刷练习题：留存率问题

首次登录算作当天新增，第二天也登录了算作一日留存。可以理解为，在10月1号登陆了。在10月2号也登陆了，那这个人就可以算是在1号留存今日留存率 （今日登录且明天也登录的用户数） / 今日登录的总用户数 * 100% 解决思…...

编程日记 2025/6/4 8:43:24

笔记本电脑选购回收特权模式使用指南

笔记本电脑 factor 无线网卡：有些笔记本无法检测到特定频段的信息，会导致连不上校园网 sudo iwlist wlp2s0 scan | grep Frequency > net.txt cat net.txt>表示用终端输出覆盖后续文件，>>表示添加到后续文件的末尾一种更简…...

编程日记 2025/6/4 8:43:40

基于PyQt - 6的医疗多模态大模型医疗研究系统中的创新构建与应用（上 .文章部分）

一、引言 1.1 研究背景与意义在当今数智化时代，医疗行业正经历着深刻的变革，对智能化、高效化的需求日益迫切。传统的医疗模式在面对海量的医疗数据、复杂的诊断流程以及个性化的治疗需求时，逐渐显露出局限性。随着人工智能技术的飞速发展，多模态大模型作为一种前沿技术…...

编程日记 2025/6/4 8:42:36

下载文件，浏览器阻止不安全下载

背景： 在项目开发中，遇到需要下载文件的情况，文件类型可能是图片、excell表、pdf、zip等文件类型，但浏览器会阻止不安全的下载链接。效果展示： 下载文件的两种方式： 一、根据接口的相对url，拼…...

编程日记 2025/6/4 8:42:53

1.15学习

web ctfhub-网站源码打开环境，查看源代码无任何作用，但是其提醒就在表面暗示我们用dirsearch进行目录扫描，登录kali的root端，利用终端输入dirsearch -u 网址的命令扫描该网址目录，扫描成功后获得信息，在…...

编程日记 2025/6/1 23:55:49

shell练习2

需求：判断192.168.1.0/24网络中，当前在线的ip有哪些，并编写脚本打印出来。 #!/bin/bashnmap -sn 192.168.1.0/24 | grep Nmap scan report for | awk {print $5} 注意：当运行 bash ip.sh 时出现 nmap: command not found 的错误…...

编程日记 2025/6/4 8:43:09

MySQL学习笔记5【SQL优化/视图/存储过程/触发器】

MySQL学习笔记 SQL优化 1. 插入数据优化普通插入： 采用批量插入： 每次插入不建议超过1000条记录，这样可以减少事务开销，提高性能。示例： INSERT INTO tb_user (name, age) VALUES (Alice, 25), (Bob, 30), ...;手动提…...

编程日记 2025/6/1 14:05:30

C++单例模式的设计

单例模式（Singleton Pattern）是一种设计模式，用于确保一个类只有一个实例，并提供一个全局访问点来访问该实例。在C中，单例模式通常用于管理全局资源或共享状态。以下是C中实现单例模式的几种常见方式： 懒…...

编程日记 2025/6/4 15:14:44

【Linux系统编程】—— 自动化构建工具Makefile指南

文章目录背景基本使用推导过程适度扩展语法背景 Makefile 是衡量开发者是否具备完成大型工程能力的一个重要标志。在一个工程中，源文件的数量可能极多，这些文件会按照类型、功能或模块分布在多个目录中。Makefile 通过定义一系列规则，指定…...

编程日记 2025/5/30 18:14:56

【SpringBoot应用篇】SpringBoot+MDC+自定义Filter操作traceId实现日志链路追踪

【SpringBoot应用篇】SpringBootMDC自定义Filter操作traceId实现日志链路追踪解决的问题解决方案MDC具体逻辑ymllogback-spring.xmlTraceIdUtil操作工具类TraceIdFilter自定义过滤器GlobalExceptionHandler全局异常处理类TraceIdAspect切面UserController测试验证多线程处理M…...

编程日记 2025/6/3 7:08:39

少一点If/Else - 状态模式（State Pattern）

状态模式（State Pattern） 状态模式（State Pattern）状态模式（State Pattern）概述状态模式（State Pattern）结构图状态模式（State Pattern）涉及的角色 talk is c…...

编程日记 2025/5/31 18:59:59

【SVN】版本发布快捷操作

摘要：因为每次发版都需要制作一份相同的文件夹，而大部分的包都不需要变更，但是文件又非常大，记录自己的操作经验。首先在SVN Repository Browser 界面把上一次的版本复制一份，复制的时候重命名为新的版本号右击要复…...

编程日记 2025/6/4 6:15:02

相关文章：