当前位置： 首页 > news >正文

【JAVA】高并发场景下，如何保证数据的一致性和系统的稳定性？

news 来源：原创 2025/9/21 12:36:28

数据一致性

  • 数据库事务：使用数据库的事务机制，确保一组数据的相关操作要么全部成功，要么全部失败，从而保证数据的一致性。
  • 例如，在转账操作中，涉及到转出账户扣款和转入账户加款两个操作，这两个操作必须在一个事务中执行，以防止出现转出成功但转入失败的情况。
  • 锁机制
    • 悲观锁：在操作数据之前，先对数据进行加锁，防止其他事务同时修改该数据。
    • 例如，在更新一条订单记录时，先对该订单记录加锁，直到更新完成后才释放锁，这样可以确保在更新过程中不会有其他事务对该订单进行修改。
    • 乐观锁：乐观锁是数据在并发操作时很少会发生冲突，它通过在数据中添加一个版本号或时间戳来实现。在更新数据时，先检查版本号或时间戳是否与之前读取时一致，如果一致则进行更新，并更新版本号或时间戳；如果不一致，则说明数据已被其他事务修改，需要进行相应的处理，如重试或回滚。
  • 分布式事务：如果系统涉及多个分布式节点或微服务，需要使用分布式事务来保证数据在多个节点之间的一致性。例如，使用 TCC（Try - Confirm - Cancel）模式或基于消息队列的最终一致性方案。以基于消息队列的方案为例，当一个事务涉及多个服务时，先将事务操作记录到消息队列中，各个服务从消息队列中获取消息并执行相应的操作，通过消息的可靠传递和处理来保证数据的最终一致性。
  • 数据校验和补偿机制：在数据处理的各个环节进行严格的数据校验，确保数据的合法性和完整性。同时，建立补偿机制，当出现数据不一致的情况时，能够通过补偿操作来修复数据。例如，在电商系统中，当订单状态更新失败时，可以通过定时任务或人工触发的方式进行订单状态的检查和修复。

系统稳定性

  • 服务器集群和负载均衡：通过构建服务器集群，将请求分发到多个服务器上进行处理，实现负载均衡。这样可以避免单个服务器因负载过高而出现性能瓶颈甚至崩溃的情况。
  • 例如，使用 Nginx 作为负载均衡器，根据不同的负载均衡算法将请求分配到后端的多个 Web 服务器上。
  • 缓存机制：合理使用缓存可以减轻数据库的压力，提高系统的响应速度和稳定性。
  • 例如，将经常访问的数据缓存到内存中，如使用 Redis 作为缓存服务器。当有请求到来时，先从缓存中获取数据，如果缓存中不存在，则再从数据库中查询并将结果缓存起来，下次请求时就可以直接从缓存中获取，减少数据库的访问次数。
  • 限流与熔断
    • 限流：通过限制单位时间内的请求数量，防止系统因请求过多而过载。
    • 例如，可以使用令牌桶算法或漏桶算法来实现限流。以令牌桶算法为例，系统会以一定的速率向令牌桶中放入令牌，每个请求在处理前需要从令牌桶中获取一个令牌，如果令牌桶中没有令牌，则拒绝该请求，从而限制了请求的并发量。
    • 熔断：当系统的某个部分出现故障或响应时间过长时，自动切断对该部分的请求，避免故障扩散导致整个系统崩溃。
    • 例如，在微服务架构中，当某个微服务出现故障时，熔断器会自动熔断，后续的请求将不再转发到该微服务，而是直接返回错误信息或调用备用的服务，直到该微服务恢复正常。
  • 监控与日志
    • 监控：建立完善的监控系统，实时监测系统的各项性能指标，如 CPU 使用率、内存使用率、数据库连接数、请求响应时间等。通过监控数据及时发现系统的异常情况，并进行预警。例如，使用 Prometheus 和 Grafana 搭建监控系统，对服务器和应用程序的各项指标进行实时监控和可视化展示。
    • 日志：记录系统的操作日志和错误日志，以便在出现问题时能够快速定位和排查故障。日志中应包含详细的信息，如请求时间、请求路径、操作内容、错误信息等。例如，使用 Log4j 或 Logback 等日志框架来记录日志，并将日志存储到专门的日志服务器中，方便进行查询和分析。
  • 代码优化和测试：对系统的代码进行优化，提高代码的质量和性能。
  • 例如，优化数据库查询语句，避免复杂的嵌套查询和全表扫描；合理使用多线程和异步处理，提高系统的并发处理能力。同时，进行充分的测试，包括单元测试、集成测试、性能测试和压力测试等，确保系统在高并发场景下的稳定性和可靠性。通过性能测试和压力测试，可以发现系统在高并发情况下的性能瓶颈，并针对性地进行优化。

TCC 

TCC 模式的核心思想是将一个分布式事务拆分成三个阶段，即尝试阶段（Try）、确认阶段（Confirm）和取消阶段（Cancel），每个阶段都由业务代码来实现，以此保证事务的最终一致性。

三个阶段的具体解释
  • 尝试阶段（Try）
    • 操作内容：在这个阶段，系统会尝试执行所有业务逻辑的预处理操作。该操作会对业务资源进行预留，但不会真正地提交业务事务。例如，在一个电商系统的分布式事务里，涉及到库存服务和账户服务。当用户下单时，库存服务会在 Try 阶段尝试冻结相应数量的商品库存，账户服务会尝试冻结用户账户中的相应金额。
    • 作用：此阶段的主要作用是检查业务操作的可行性，并且对资源进行初步锁定，为后续的确认或取消操作做好准备。
  • 确认阶段（Confirm）
    • 操作内容：若所有参与事务的服务的 Try 阶段都成功完成，那么就会进入 Confirm 阶段。在这个阶段，系统会对 Try 阶段预留的资源进行真正的业务操作提交。比如，在上述电商系统的例子中，库存服务会正式扣除冻结的商品库存，账户服务会正式扣除用户账户中的冻结金额。
    • 特点：Confirm 操作必须是幂等的。这是因为在分布式环境中，可能会出现网络异常等情况，导致 Confirm 操作重复执行。幂等性保证了多次执行相同的 Confirm 操作，其结果与执行一次的结果是相同的。
  • 取消阶段（Cancel）
    • 操作内容：若在 Try 阶段有任何一个服务执行失败，系统就会进入 Cancel 阶段。在这个阶段，系统会对 Try 阶段预留的资源进行释放。例如，在电商系统中，如果库存服务在 Try 阶段成功冻结了库存，但账户服务在 Try 阶段失败，那么库存服务就需要在 Cancel 阶段释放之前冻结的商品库存。
    • 特点：Cancel 操作同样必须是幂等的。原因和 Confirm 操作一样，在分布式环境中，可能会因为网络问题等导致 Cancel 操作重复执行，幂等性确保多次执行 Cancel 操作不会对系统造成额外的影响。
执行流程
  1. 开启事务：业务系统发起一个分布式事务请求。
  2. Try 阶段：依次调用各个参与服务的 Try 方法，若所有 Try 方法都成功执行，则进入 Confirm 阶段；若有任何一个 Try 方法执行失败，则进入 Cancel 阶段。
  3. Confirm 阶段：依次调用各个参与服务的 Confirm 方法，完成业务操作的提交。
  4. Cancel 阶段：依次调用各个参与服务的 Cancel 方法，释放之前预留的资源。
优缺点
  • 优点
    • 业务侵入性相对较低：与一些其他的分布式事务解决方案相比，TCC 模式不需要依赖数据库的事务机制，而是由业务代码来实现事务的控制，因此对业务的侵入性相对较小。
    • 性能较高：由于 Try 阶段只是对资源进行预留，而不是真正的提交，所以可以在一定程度上提高系统的并发性能。
  • 缺点
    • 开发成本高：需要开发人员手动实现 Try、Confirm 和 Cancel 三个阶段的业务逻辑，并且要保证 Confirm 和 Cancel 操作的幂等性，这增加了开发的复杂度和成本。
    • 一致性问题：虽然 TCC 模式可以保证事务的最终一致性，但在某些极端情况下，如 Confirm 或 Cancel 操作多次失败，可能会导致数据不一致的问题，需要额外的补偿机制来处理。

相关文章：

【JAVA】高并发场景下，如何保证数据的一致性和系统的稳定性？

数据一致性 数据库事务：使用数据库的事务机制，确保一组数据的相关操作要么全部成功，要么全部失败，从而保证数据的一致性。例如，在转账操作中，涉及到转出账户扣款和转入账户加款两个操作，这两个…...

编程日记 2025/9/21 12:36:28

【Linux篇】理解信号：如何通过信号让程序听从操作系统的指令

信号的悄然到来：当操作系统发出‘警告’时 一.信号1.1 基本概念1.2 产生信号方式1.2.1 键盘产生信号1.2.2 系统调用产生信号1.2.2.1 kill1.2.2.2 raise1.2.2.3 abort 1.2.3 调用系统命令1.2.4 异常1.2.5 软件条件产生信号1.2.5.1 pause1.2.5.2 alarm 二. 最后 信号的…...

编程日记 2025/9/21 12:35:13

统计服务器CPU、内存、磁盘、网络IO、队列、数据库占用空间等等信息

文章目录 一、背景二、说明三、页面四、代码前端MonitorServiceProcessPage.vueMonitorServiceProcessTable.vueMonitorServiceProcessTableButton.vueaddMonitorTask.vueproductOperation.vueshowMonitorTask.vueMonitorSystemLog.vueMonitorTask.vueMonitorTaskLog.vueRealti…...

编程日记 2025/9/21 12:32:24

WSL 安装过程整理

WSL 安装过程整理 一、WSL 安装教程二、安装后小技巧1、安装位置2、常用命令 三、在 WSL2 中安装 perf： 一、WSL 安装教程 史上最全的WSL安装教程 WSL2 最新最全帮助小白一步步详细安装教程 在WSL2 root 和普通用户的切换 轻松搬迁！教你如何将WSL从C盘迁…...

编程日记 2025/9/21 12:33:14

纯CSS吃豆人(JS仅控制进度)

一、效果展示 二、源码 html <!DOCTYPE html> <html lang"zh-CN"> <head><meta charset"UTF-8"><meta name"viewport" content"widthdevice-width, initial-scale1.0"><title>Pac-Man SVG Demo…...

编程日记 2025/9/19 14:40:47

redis 数据类型新手练习系列——Hash类型

redis 数据类型 Redis 主要支持以下几种数据类型&#xff1a; &#xff08;1&#xff09;string&#xff08;字符串&#xff09;: 基本的数据存储单元&#xff0c;可以存储字符串、整数或者浮点数。 &#xff08;2&#xff09;hash&#xff08;哈希&#xff09;:一个键值对集…...

编程日记 2025/9/19 3:58:19

如何使用@KafkaListener实现从nacos中动态获取监听的topic

1、简介 对于经常需要变更kafka主题的场景&#xff0c;为了实现动态监听topic的功能&#xff0c;可以使用以下方式。 2、使用步骤 2.1、添加依赖 <dependency><groupId>org.springframework.kafka</groupId><artifactId>spring-kafka</artifactI…...

编程日记 2025/9/10 7:33:56

区块链如何达成共识：PoW/PoS/DPoS的原理、争议与适用场景全解

引言 区块链技术的核心在于​​去中心化网络中的信任机制​​&#xff0c;而共识算法是实现这一目标的关键。不同的共识机制在效率、安全性、去中心化程度等方面各有取舍。本文将深入解析三种主流共识机制——​​工作量证明&#xff08;PoW&#xff09;​​、​​权益证明&am…...

编程日记 2025/9/11 13:08:58

Oracle for Linux安装和配置（11）——Oracle安装和配置

11.3. Oracle安装和配置 Linux上Oracle的安装及配置与Windows上差不多，只是安装软件的准备等有所不同，下面只对不同于Windows的部分进行较为详细的讲解，其他类似部分不再赘述。另外，无论选择使用虚机还是物理机，Oracle安装、配置和使用等方面几乎都是完全一样的。 11.3.…...

编程日记 2025/9/11 22:52:56

http协议详解附带c/c++服务器和客户端源码

http详解 代码部分HTTP请求结构示例HTTP客户端实现&#xff08;使用Linux系统调用&#xff09;简易HTTP服务器实现 深入解析HTTP协议&#xff1a;从基础到实践1. HTTP协议核心概念1.1 协议本质解读1.2 通信模型详解 2. 抓包分析实战2.1 Fiddler工具妙用2.2 报文结构拆解 3. 请求…...

编程日记 2025/9/20 8:53:43

JavaScript性能优化实战（5）：数据结构与算法性能优化

JavaScript中常用数据结构性能对比 数据结构的选择对JavaScript应用的性能有着决定性的影响。不同的数据结构在不同操作上各有优劣，选择合适的数据结构能显著提升应用性能。本节将对JavaScript中常用的数据结构进行全面的性能对比分析。 基本数据结构时间复杂度概览 首先，…...

编程日记 2025/9/21 7:36:48

uniapp小程序开发入门01-快速搭建一个空白的项目并预览它

uniapp小程序开发入门01-快速搭建一个空白的项目并预览它&#xff01;由于近期有市场需求和计划&#xff0c;构建一套自己的小程序&#xff0c;所以再次带领大家系统的过一遍&#xff0c;如何使用uniapp程序快速构建一套完整的项目。今天是第一小节&#xff0c;带领大家快速构建…...

编程日记 2025/9/20 18:28:32

UR5 UR5e机器人URDF文件

URDF全称为Unified Robot Description Format，中文可以翻译为“统一机器人描述格式”。与计算机文件中的.txt文本格式、.jpg图像格式等类似，URDF是一种基于XML规范、用于描述机器人结构的格式。根据该格式的设计者所言，设计这一格式的目的在于提供一种尽可能通用（as genera…...

编程日记 2025/9/9 0:43:10

ubuntu20.04安装x11vnc远程桌面

x11vnc是一个VNC服务器, 安装后我们可以不依赖外部的显示设备, 通过网络远程登录ubuntu桌面。 安装x11vnc sudo apt-get install x11vnc 设置VNC登录密码 sudo x11vnc -storepasswd /etc/x11vnc.pwd 设置x11vnc在开机时自动启动 新建如下文件: sudo vi /lib/systemd/sys…...

编程日记 2025/9/12 13:07:46

AKM旭化成微电子全新推出能量收集IC“AP4413系列”

旭化成微电子开始批量生产用于环保发电的电荷控制集成电路&#xff01;优化充电电池的充放电&#xff0c;广泛应用于智能遥控器和蓝牙TMTag等设备。 01 概述 旭化成微电子株式会社&#xff08;AKM&#xff09;开发出面向小型二次电池&#xff08;充电电池&#xff09;的环境…...

编程日记 2025/9/16 2:51:35

机器人行业研究系列报告

新质生产力系列报告&#xff1a;2024年人形机器人核心场景发展洞察研究报告 具身机器人行业现状及未来趋势分析 2025 2025年人形机器人投资策略&#xff0c;量产元年&#xff0c;全球共振&#xff0c;百家争鸣 人形机器人行业深度报告&#xff08;一&#xff09;&#xff1a…...

编程日记 2025/9/16 9:05:26

利用JMeter代理服务器方式实现高效压测

前言 在当今快节奏的互联网时代&#xff0c;确保Web应用和服务能够在高负载下稳定运行变得至关重要。无论是电子商务平台、社交媒体网络还是在线教育服务&#xff0c;用户对网站响应速度和稳定性的期望从未如此之高。因此&#xff0c;性能测试不再是一个可选项&#xff0c;而是…...

编程日记 2025/9/20 17:36:47

NLP高频面试题（五十五）——DeepSeek系列概览与发展背景

大型模型浪潮背景 近年来，大型语言模型（Large Language Model, LLM）领域发展迅猛，从GPT-3等超大规模模型的崛起到ChatGPT的横空出世，再到GPT-4的问世，模型参数规模和训练数据量呈指数级增长。以GPT-3为例，参数高达1750亿，在570GB文本数据上训练，显示出模型规模、数据…...

编程日记 2025/9/12 22:55:13

2015-2023 各省 GDP 数据，用QuickBI 进行数据可视化——堆叠图！

嘿&#xff0c;数据爱好者们&#xff01;今天咱要来一场刺激的数据冒险&#xff0c;深入剖析全国各省的 GDP 数据&#xff0c;而且会借助强大的 QuickBI 工具&#xff0c;用超酷炫的堆叠图让这些数据 “活” 起来&#xff0c;带你一眼看清经济格局&#xff01; 地址&#xff1…...

编程日记 2025/9/11 17:52:31

MySQL优化（持续更新）笔记

一、insert优化 &#xff1a; 之前&#xff1a;项目通常是一条insert一条的执行&#xff0c;每一次都需要与MySQL进行建立连接进行网络传输&#xff0c;效率很低 现在&#xff1a; 1.- 批量插入&#xff08;一条sql就行&#xff0c;一次500-1000&#xff09; 可以与MyBatis…...

编程日记 2025/9/19 5:45:38

MySQL表的操作 -- 表的增删改查

目录 1. 表的创建2. 表的查看3. 表的修改4. 表的删除5. 总结 1. 表的创建 1.查看字符集及效验规则 2. 表的创建 CREATE TABLE table_name ( field1 datatype, field2 datatype, field3 datatype ) character set 字符集 collate 校验规则 engine 存储引擎;创建用户表1 创建用…...

编程日记 2025/9/11 18:05:47

Java 数组：深度解析

前言 数组作为Java中最基础也是最强大的数据结构之一，其高效性和灵活性在性能关键型应用中无可替代。本文将从进阶使用开始，逐步深入探索Java数组的高级特性和大师级技巧，帮助开发者全面掌握数组技术的精髓。 一、数组基础回顾与性能特性 1.1 数组基本特性对比 特性Java数…...

编程日记 2025/9/20 6:30:33

【基于Qt的QQMusic项目演示第一章】从界面交互到核心功能实现

&#x1f339; 作者: 云小逸 &#x1f91f; 个人主页: 云小逸的主页 &#x1f91f; motto: 要敢于一个人默默的面对自己&#xff0c;强大自己才是核心。不要等到什么都没有了&#xff0c;才下定决心去做。种一颗树&#xff0c;最好的时间是十年前&#xff0c;其次就是现在&…...

编程日记 2025/9/12 9:24:11

[Mybatis-plus]

简介 MyBatis-Plus &#xff08;简称 MP&#xff09;是一个 MyBatis的增强工具&#xff0c;在 MyBatis 的基础上只做增强不做改变。Mybatis-plus官网地址 注意&#xff0c;在引入了mybatis-plus之后&#xff0c;不要再额外引入mybatis和mybatis-spring&#xff0c;避免因为版本…...

编程日记 2025/9/20 8:35:04

【EDA】EDA中聚类（Clustering）和划分（Partitioning）的应用场景

在VLSI物理设计自动化中&#xff0c;聚类&#xff08;Clustering&#xff09;和划分&#xff08;Partitioning&#xff09;是两个互补但目标和应用场景截然不同的关键步骤&#xff0c;其核心区别如下&#xff1a; 一、应用阶段与核心目标 1. 聚类&#xff08;Clustering&…...

编程日记 2025/9/3 11:34:35

PySide与PyQt对比：为何PySide是更优选择

PySide与PyQt对比&#xff1a;为何PySide是更优选择 引言 在Python桌面应用开发领域&#xff0c;Qt框架的绑定库一直是首选方案。两大主要选择—PySide和PyQt&#xff0c;虽然功能相似&#xff0c;但在许可证、性能和支持方面存在显著差异。本文将深入探讨为何PySide通常是更…...

编程日记 2025/9/9 7:19:23

LVGL移植高通矢量字库GT5SLAD3BFA

字库芯片: GT5SLAD3BFA MCU: STM32F429 LVGL版本&#xff1a;V8.4 一&#xff0c;实现gt_read_data() gt_read_data()函数的作用&#xff1a;与字库flash进行通信&#xff0c;函数的定义里调用spi发送数据和接收数据的接口。用户只需要实现该函数&#xff0c;就可以…...

编程日记 2025/9/19 5:10:44

7.0 sharpScada的sql数据的安装

本文介绍开源库SharpScada的配置过程。 1&#xff0c;还原数据库 2.打开SQL server2014配置启动器&#xff0c;并启用Named Pipes,以及TCP/IP 3.启动SQL Server服务中的SQL Server Browser 4.允许远程连接...

编程日记 2025/8/28 9:07:27

杂项知识点

杂项 1 激活函数1.1 sigmoid1.2 tanh1.3 Relu1.4 leakRelu 1 激活函数 常用的激活函数包括sigmoid tanh Relu leakRelu 1.1 sigmoid import torch import numpy as np import matplotlib.pyplot as plt # sigmoid tanh Relu leakRelu ## 1 sigmoid ### 1.1 代码复现sig…...

编程日记 2025/9/21 7:23:18

Android项目升级插件到kotlin 2.1.0后混淆网络请求异常

背景 项目kt插件1.9.24升级到2.1.0后打包编译release网络请求失败了。 retrofit版本2.9.0 错误详情 java.lang.ClassCastException: java.lang.Class cannot be cast to java.lang.reflect.ParameterizedTypeat retrofit2.m.a(Unknown Source:2477)at retrofit2.K.invoke(U…...

编程日记 2025/9/9 2:25:56

uniapp 仿企微左边公司切换页

示例代码&#xff1a; <template><view class"container"><!-- 遮罩层 --><view class"mask" v-if"showSidebar" click"closeSidebar"></view><!-- 侧边栏 --><view class"sidebar"…...

编程日记 2025/9/20 22:46:56

Milvus（7）：Schema、主字段和自动识别

1 Schema Schema 定义了 Collections 的数据结构。在创建一个 Collection 之前&#xff0c;你需要设计出它的 Schema。本页将帮助你理解 Collections 模式&#xff0c;并自行设计一个示例模式。 在 Zilliz Cloud 上&#xff0c;Collection Schema 是关系数据库中一个表的组合&a…...

编程日记 2025/9/17 3:11:50

Liunx服务上MySQL服务导致CPU炸了，使用kill -9 mysqld进程id后，无法启动MySQL

1.top命令后&#xff0c;可以看到mysqld沾满了cpu 2.然后我使用了kill -9 16594&#xff0c;杀死了mysqld进程 3.之后&#xff0c;查看mysql服务状态&#xff0c;发现对应的 www/serve/mysqld 目录不存在 sudo systemctl status mysqld4.使用命令查看操作 www/serve 目录的历…...

编程日记 2025/9/15 5:56:34

Java使用IText7动态生成带审批文本框的PDF文档

Java使用IText7动态生成带审批文本框的PDF文档 文章目录 Java使用IText7动态生成带审批文本框的PDF文档1.构建第一个框的起始坐标2.渲染第一个框3.渲染其他的审批框 测试结果示例 实现思路 使用Canvas进行相对定位和绝对定位来确定文本框内文字位置&#xff0c;用Rectangle通…...

编程日记 2025/9/19 22:26:57

【音视频】AVIO输入模式

内存IO模式 AVIOContext *avio_alloc_context( unsigned char *buffer, int buffer_size, int write_flag, void *opaque, int (*read_packet)(void *opaque, uint8_t *buf, int buf_size), int (*write_packet)(void *opaque, uint8_t *buf, int buf_size), int64_t (*seek)(…...

编程日记 2025/8/29 5:44:10

Android中的多线程

线程池 在编程中经常会使用线程来异步处理任务&#xff0c;但是每个线程的创建和销毁都需要一定的开销。如果每次执行一个任务都需要开一个新线程去执行&#xff0c;则这些线程的创建和销毁将消耗大量的资源。并且线程都是“各自为政”&#xff0c;很难对其进行控制&#xff0c…...

编程日记 2025/9/20 15:15:21

http://noi.openjudge.cn/——2.5基本算法之搜索——200:Solitaire

文章目录 题目宽搜代码总结 题目 总时间限制: 5000ms 单个测试点时间限制: 1000ms 内存限制: 65536kB 描述 Solitaire is a game played on a chessboard 8x8. The rows and columns of the chessboard are numbered from 1 to 8, from the top to the bottom and from left t…...

编程日记 2025/9/20 23:44:49

deep鼠标跟随插件

效果图 实现 首先打开深度系统终端&#xff0c;键入以下安装命令&#xff1a; sudo apt install oneko安装完成后&#xff0c;执行以下命令启动&#xff1a; oneko启动后&#xff0c;就会出现小猫咪&#xff0c;如果终端不关&#xff08;服务不关&#xff09;&#xff0c;会…...

编程日记 2025/8/17 18:09:49

Verilog 语法 （二）

在掌握了 Verilog 的基础语法和常用程序框架之后&#xff0c;本节将带大家深入学习一些 高级设计知识点。这些内容包括&#xff1a; 阻塞赋值&#xff08;&#xff09;与非阻塞赋值&#xff08;<&#xff09;的区别及使用场景&#xff1b; assign 和 always 语句的差异&am…...

编程日记 2025/9/20 1:30:38

大数据开发环境的安装，配置（Hadoop）

1. 三台linux服务器的安装 1. 安装VMware VMware虚拟机软件是一个“虚拟PC”软件&#xff0c;它使你可以在一台机器上同时运行二个或更多Windows、DOS、LINUX系统。与“多启动”系统相比&#xff0c;VMWare采用了完全不同的概念。 我们可以通过VMware来安装我们的linux虚拟机…...

编程日记 2025/9/20 8:56:02

唯创安全:从传统到智能，工厂智能叉车AI防撞系统解决方案

一、叉车安全管理现状痛点分析 1、司机管理难题 • 违规操作频发&#xff1a;无证驾驶、疲劳驾驶(如作业中吸烟/玩手机)及不系安全带现象普遍&#xff0c;事故风险与法律风险双高。 • 资源分配失衡&#xff1a;未经授权使用导致车辆调度混乱&#xff0c;影响作业效率。 2、…...

编程日记 2025/9/15 13:09:13

Windows与CasaOS跨平台文件同步：SyncThing本地部署与同步配置流程

文章目录 前言1. 添加镜像源2. 应用安装测试3. 安装syncthing3.1 更新应用中心3.2 SyncThing安装与配置3.3 Syncthing使用演示 4. 安装内网穿透工具5. 配置公网地址6. 配置固定公网地址 推荐 ​ 前些天发现了一个巨牛的人工智能学习网站&#xff0c;通俗易懂&#xff0c;风趣幽…...

编程日记 2025/9/21 0:12:47

基于Django的个性化股票交易管理系统

本项目基于Python3.6、Django2.1、MySql8.0&#xff08;最好不要使用5.6&#xff0c;字符集等方面均不兼容&#xff0c;否则导入数据库会出错&#xff09;与股票信息工具包TuShare实现。 创建或激活对应Python开发环境 这里使用了conda来管理环境&#xff0c;强烈推荐&#xf…...

编程日记 2025/9/20 2:21:17

Python图像变清晰与锐化，调整对比度，高斯滤波除躁，卷积锐化，中值滤波钝化，神经网络变清晰

本次使用图片来源于百度 import cv2 import time import numpy as np import pywtfrom PIL import Image, ImageEnhance#-i https://pypi.mirrors.ustc.edu.cn/simpledef super_resolution(input_path, output_path, model_path, scale4):# 初始化超分辨率模型sr cv2.dnn_su…...

编程日记 2025/9/16 1:49:19

带根线就无敌？光纤无人机如何成为电子战的终结者

在硝烟弥漫的俄乌战场上&#xff0c;一条超细光缆正在悄然改变战争规则。2024年俄军首次在前线部署光纤FPV无人机&#xff0c;其通过释放光纤线缆传输数据&#xff0c;成功对乌军装甲目标实施精准打击。乌方同时也迅速跟进&#xff0c;于 2025 年初量产光纤FPV 无人机以突破俄军…...

编程日记 2025/9/15 2:37:44

windows 和ubuntu静态路由配置

目录 windows 1 查看当前路由表 2 添加静态路由 3 删除路由 ubuntu route命令&#xff08;传统方式&#xff09; 使用ip指令&#xff08;推荐&#xff09; ubuntu永久路由配置 子网掩码解释 windows 1 查看当前路由表 -4 只关注ipv4&#xff0c;-6 用于指定显示 IPv6 …...

编程日记 2025/9/10 11:45:19

《深入理解计算机系统》阅读笔记之第四章 处理器体系结构

概述 备注&#xff1a;怎么感觉讲的还是《编码》这本书里面提到的知识点&#xff1f;...

编程日记 2025/8/17 14:51:53

vue项目前后端分离设计

在Vue前端架构中&#xff0c;通过分层结构和模块化设计实现高效的前后端分离&#xff0c;需要系统性规划各层职责、接口管理和数据流控制。以下是结合业界最佳实践的完整方案&#xff1a; 一、分层架构设计 1. 分层结构&#xff08;自上而下&#xff09; 层级职责示例技术实现…...

编程日记 2025/9/11 10:29:31

Steam游戏服务器攻防全景解读——如何构建游戏级抗DDoS防御体系？

Steam游戏服务器的DDoS攻防体系设计&#xff0c;从协议层漏洞利用到业务连续性保障&#xff0c;深度拆解反射型攻击、TCP状态耗尽等7类威胁场景。基于全球15个游戏厂商攻防实战数据&#xff0c;提供包含边缘节点调度、AI流量指纹识别、SteamCMD加固配置的三维防护方案&#xff…...

编程日记 2025/9/4 12:49:03

七、web自动化测试03

目录 一、xpath定位1. 属性定位2.属性与逻辑结合3. 属性与层级结合 二、cookie1. 验证码处理方案2. cookie3. 案例&#xff1a;cookie跳过登录 三、pytest1. 介绍及安装2. 定义用例3. 执行测试用例3.1 命令行运行3.2 配置文件运行3.3 项目配置文件config.py 4. 参数化5. 断言6.…...

编程日记 2025/9/10 17:45:16