当前位置： 首页 > news >正文

redis优化

news 来源：原创 2025/7/22 14:12:26

在高并发、高性能、高可用系统中，Redis 的优化至关重要。以下是一些在面试中可以详细说明的 Redis 优化策略，以及具体的实践经验和技术亮点：

1. 数据模型与结构设计优化

  • 使用合适的数据结构 ：根据业务需求选择合适的 Redis 数据结构（如 String、Hash、List、Set 和 Sorted Set），避免盲目使用复杂结构（如 ZSet），因为其性能消耗更大。
  • 减少键值长度 ：通过缩短 key 和 value 的长度节省内存，例如使用 user:1001 替代冗长的命名。
  • 基于业务需求分片存储 ：将大 Hash 拆分为多个小 Hash，避免单个数据节点出现内存瓶颈。

2. 缓存层设计优化

  • 热数据分离 ：将访问频率高的热数据与冷数据分离，热数据放入 Redis，冷数据可能放入低成本存储中。
  • 合适的过期策略 ：
    • 设置合理的过期时间，避免内存被无效数据占用。
    • 使用不同的过期时间以避免缓存雪崩。
  • 缓存穿透防护 ：
    • 对于不存在的键设置一个空值，避免频繁穿透数据库。
    • 使用布隆过滤器在 Redis 前过滤非法请求。
  • 缓存击穿优化 ：
    • 使用互斥锁（分布式锁）或预热机制避免热点数据缓存失效导致的击穿。
  • 缓存雪崩优化 ：
    • 为缓存设置过期时间时，使用随机值避免同一时刻大面积缓存失效。

3. 性能优化

  • 单线程优化 ：
    • Redis 本身是单线程的，避免使用耗时的命令（如 KEYS、SCAN）或大数据操作。
  • 分区与分片 ：
    • 使用 Redis Cluster 或分片策略（如 Codis、Twemproxy）来分担流量，提升集群吞吐量。
  • 批量操作 ：
    • 使用管道（Pipeline）批量处理 Redis 请求，减少网络开销。
  • 合理使用 Lua 脚本 ：
    • 将复杂逻辑通过 Lua 脚本在服务端执行，避免多次往返。

4. 持久化优化

  • RDB/AOF 配置优化 ：
    • 根据业务需求合理配置持久化策略，避免频繁的磁盘写入导致性能下降。
    • 使用混合持久化（Hybrid Persistence）提升持久化效率。
  • 持久化文件的存储优化 ：
    • 将持久化文件存储在性能较高的 SSD 上。
    • 合理配置 save 参数和 AOF 重写阈值。

5. 高可用设计

  • 主从复制优化 ：
    • 使用异步复制避免因主节点压力过大导致的性能下降。
    • 配置合适的 repl-backlog-size，防止从节点因网络中断导致全量同步。
  • 哨兵机制优化 ：
    • 配置合理的 down-after-milliseconds 和 failover-timeout，保证高效的主从切换。
  • 多数据中心同步 ：
    • 使用主从链路或双活模式进行跨机房数据同步，提升容灾能力。

6. 监控与告警

  • 监控关键指标 ：
    • QPS（查询每秒请求数）、内存使用情况、延迟、Key 命中率。
    • 使用工具如 Prometheus + Grafana 实现可视化监控。
  • 日志分析与优化 ：
    • 分析慢日志，通过优化命令减少 Redis 慢查询。

示例实践：实际项目中的 Redis 优化

在之前负责的高并发电商系统中：

  1. 通过引入布隆过滤器，拦截了 80% 的无效请求，降低了后端数据库的压力。
  2. 利用 Pipeline 优化订单状态批量写入，性能提升约 3 倍。
  3. 对热点商品详情缓存实现分布式锁保护，避免缓存击穿，系统高峰时稳定运行。

相关文章：

redis优化

在高并发、高性能、高可用系统中，Redis 的优化至关重要。以下是一些在面试中可以详细说明的 Redis 优化策略，以及具体的实践经验和技术亮点： 1. 数据模型与结构设计优化 使用合适的数据结构 ：根据业务需求选择合适的 Redis 数据结…...

编程日记 2025/7/22 14:12:26

QT的信号和槽页面的应用

完善对话框，点击登录弹出对话框，如果账号和密码匹配，则弹出信息对话框，给出提示”登录成功“，提供一个Ok按钮，用户点击Ok后，关闭登录界面，跳转到其他界面 如果账号和密码不匹配&…...

编程日记 2025/7/22 14:14:44

Jmeter自学【8】- 使用JMeter模拟设备通过MQTT发送数据

今天使用jmeter推送数据到MQTT，给大家分享一下操作流程。 一、安装JMeter 参考文档：Jmeter自学【1】- Jmeter安装、配置 二、安装MQTT插件 1、下载插件 我的Jmeter版本是5.6.3，用到的插件是：mqtt-xmeter-2.0.2-jar-with-depe…...

编程日记 2025/7/23 2:06:06

深度学习任务中的 `ulimit` 设置优化指南

深度学习任务中的 ulimit 设置优化指南 1. 什么是 ulimit？2. 深度学习任务中的关键 ulimit 设置2.1 max locked memory（-l）2.2 open files（-n）2.3 core file size（-c）2.4 stack size&#xff08…...

编程日记 2025/7/22 14:29:32

C++(Qt)软件调试---VS性能探查器（27）

文章目录 [toc]1 概述🐜2 VS工具说明2.1 使用场景2.2 工具适用项目 3 CPU使用率4 内存分析4.1 调试模式下分析内存4.2 非调试模式下分析内存 5 相关地址🐐 更多精彩内容👉内容导航 👈👉C软件调试 👈 1 概述…...

编程日记 2025/7/22 14:26:04

Spring源码_05_IOC容器启动细节

前面几章，大致讲了Spring的IOC容器的大致过程和原理，以及重要的容器和beanFactory的继承关系，为后续这些细节挖掘提供一点理解基础。掌握总体脉络是必要的，接下来的每一章都是从总体脉络中， 去研究之前没看的一些重要…...

编程日记 2025/7/22 14:27:52

【c语言】简单的c程序设计

内存 1byte8bit 1KB1024byte 1MB1024byte 1G1024MB 1T1024G 变量 变量可以由数字、字母和下划线组成且不能以数字开头任何不满足条件的变量都是非法变量，如含有特殊字符的变量等变量不能含有空白字符，如空格、换行符等变量区分大小写变量不能是c语言…...

编程日记 2025/7/22 19:19:53

k8s dashboard可视化操作界面的安装

一、官方安装方法 根据官网的安装配置可以选择如下安装： kubectl apply -f https://raw.githubusercontent.com/kubernetes/dashboard/v2.0.0/aio/deploy/recommended.yaml 二、添加阿里云加速进行安装 #修改recommended.yaml拉取镜像的链接 vim recommended.yam…...

编程日记 2025/7/22 14:33:03

鸿蒙项目云捐助第三十一讲云捐助项目云前台显示商品列表

鸿蒙项目云捐助第三十一讲云捐助项目云前台显示商品列表 前面完成了云数据库后台的商品批量添加，这里需要把数据放在分类导航页面中显示。 一、云前台显示商品列表 这里需要把商品列表显示在MyNavSliderBar的组件中,MyNavSliderBar组件是通过首页路由实现的,在项…...

编程日记 2025/7/22 14:34:47

【rustdesk】客户端和服务端的安装和部署（自建服务器，docker，远程控制开源软件rustdesk）

【rustdesk】客户端和服务端的安装和部署（自建服务器，docker） 一、官方部署教程 https://rustdesk.com/docs/zh-cn/client/mac/ 官方服务端下载地址 https://github.com/rustdesk/rustdesk-server/releases 我用的docker感觉非常方便&am…...

编程日记 2025/7/22 14:40:10

Flink源码解析之：如何根据算法生成StreamGraph过程

Flink源码解析之：如何根据算法生成StreamGraph过程 在我们日常编写Flink应用的时候，会首先创建一个StreamExecutionEnvironment.getExecutionEnvironment()对象，在添加一些自定义处理算子后，会调用env.execute来执行定义好的Flin…...

编程日记 2025/7/22 14:43:39

【Spring MVC 核心机制】核心组件和工作流程解析

在 Web 应用开发中，处理用户请求的逻辑常常会涉及到路径匹配、请求分发、视图渲染等多个环节。Spring MVC 作为一款强大的 Web 框架，将这些复杂的操作高度抽象化，通过组件协作简化了开发者的工作。 无论是处理表单请求、生成动态页面&#x…...

编程日记 2025/7/22 19:23:39

2、Bert论文笔记

Bert论文 1、解决的问题2、预训练微调2.1预训练微调概念2.2深度双向2.3基于特征和微调（预训练下游策略） 3、模型架构4、输入/输出1.输入：2.输出：3.Learned Embeddings(学习嵌入)1. **Token Embedding**2. **Position Embedding**3…...

编程日记 2025/7/22 14:54:11

hadoop搭建

前言 一般企业中不会使用master slave01 slave02来命名 vmware创建虚拟机 打开vmware软件，新建虚拟机 典型 稍后安装系统 选择centos7 虚拟机名称和安放位置自行选择（最小化安装消耗空间较少） 默认磁盘大小即可 自定义硬件 选择centos7的i…...

编程日记 2025/7/22 16:09:57

19_HTML5 Web Workers --[HTML5 API 学习之旅]

HTML5 Web Workers 是一种允许 JavaScript 在后台线程中运行的技术，从而不会阻塞用户界面或其他脚本的执行。通过使用 Web Workers，你可以执行复杂的计算任务而不影响页面的响应速度，提升用户体验。 Web Workers 的特点 Web Workers 是 HTM…...

编程日记 2025/7/21 16:32:38

【PCIe 总线及设备入门学习专栏 5.1 -- PCIe 引脚 PRSNT 与热插拔】

文章目录 OverviewPRSNT 与热插拔PRSNT 硬件设计 Overview Spec 定义的热插拔是把一个PCIe卡（设备）从一个正在运行的背板或者系统中插入/或者移除。这个过程需要不影响系统的其他功能。插入的新的设备可以正确工作。 显然，这里面需要考虑的问…...

编程日记 2025/7/22 15:51:30

使用docker compose安装gitlab

使用docker compose安装gitlab GitLab简介设置GITLAB_HOME路径创建docker挂载目录获取可用的GitLab版本编写docker-compose.yml文件启动docker基础配置 GITLAB_OMNIBUS_CONFIG修改配置 中文设置数据库配置系统邮箱配置 GitLab简介 GitLab是一个基于Git的开源项目&#xff0c…...

编程日记 2025/7/22 16:00:00

性能中 UV、PV 和并发量的关系

在性能测试中，UV（独立访客数）、PV（页面浏览量）和并发量是重要的指标，用于评估系统的负载能力。它们之间关系紧密，需要通过合理的计算和示例进行说明。 1. 概念解析 UV（Unique Visito…...

编程日记 2025/7/22 9:16:55

Go语言zero项目服务恢复与迁移文档

## 一. 服务器环境配置 在迁移和配置 项目时，首先需要确保服务器环境正确配置。以下是配置步骤： ### 1. 安装 Go 语言环境 首先，确保 Go 语言环境已经安装，并且配置正确。执行以下步骤： # 下载 Go 语言安装包 wge…...

编程日记 2025/7/22 16:29:28

Redis - Token JWT 概念解析及双token实现分布式session存储实战

Token 定义：令牌，访问资源接口（API）时所需要的资源凭证 一、Access Token 定义：访问资源接口（API）时所需要的资源凭证，存储在客户端 组成 组成部分说明uid用户唯一的身份标识time…...

编程日记 2025/7/22 16:44:19

QT中使用OpenGL function

1.前言 QT做界面编程很方便，QTOpenGL的使用也很方便，因为QT对原生的OpenGL API进行了面向对象化的封装。 如： 函数：initializeOpenGLFunctions()...... 类：QOpenGLVertexArrayObject、QOpenGLBuffer、QOpenGLShader…...

编程日记 2025/7/22 15:24:43

STM32-笔记18-呼吸灯

1、实验目的 使用定时器 4 通道 3 生成 PWM 波控制 LED1 ，实现呼吸灯效果。 频率：2kHz，PSC71，ARR499 利用定时器溢出公式 周期等于频率的倒数。故Tout 1/2KHZ；Ft 72MHZ PSC71（喜欢设置成Ft的倍数&…...

编程日记 2025/7/22 17:20:24

MAC M4安装QT使用国内镜像源在线安装

MAC M4安装QT使用国内镜像源在线安装 一、下载安装包1. 访问[https://www.qt.io/](https://www.qt.io/)下载在线安装包2. 下载结果 二、创建QT账户，安装的时候需要三、安装1. 终端打开安装包2. 指定安装源3. 运行安装完的QT 一、下载安装包 1. 访问https://www.qt.…...

编程日记 2025/7/22 17:18:59

go语言中zero框架项目日志收集与配置

在 GoZero 项目中，日志收集和配置是非常重要的，尤其是在分布式系统中，日志可以帮助开发人员追踪和排查问题。GoZero 提供了灵活的日志系统，能够方便地进行日志的配置和管理。 以下是如何在 GoZero 项目中进行日志收集与配置的基本…...

编程日记 2025/7/22 17:29:03

springboot496基于java手机销售网站设计和实现(论文+源码)_kaic

摘 要 现代经济快节奏发展以及不断完善升级的信息化技术，让传统数据信息的管理升级为软件存储，归纳，集中处理数据信息的管理方式。本手机销售网站就是在这样的大环境下诞生，其可以帮助管理者在短时间内处理完毕庞大的数据信息&am…...

编程日记 2025/7/22 12:08:55

iClient3D for Cesium在Vue中快速实现场景卷帘

作者：gaogy 1、背景 iClient3D for Cesium是由SuperMap提供的一个前端3D地图客户端，提供了丰富的功能与接口，使得开发者能够在Web应用中快速集成并展现3D地理信息。而在Vue框架中集成iClient3D，不仅可以利用Vue的响应式特性提高开…...

编程日记 2025/7/22 23:06:39

Elasticsearch-索引的批量操作

索引的批量操作 批量查询和批量增删改 批量查询 #批量查询 GET product/_search GET /_mget {"docs": [{"_index": "product","_id": 2},{"_index": "product","_id": 3}] }GET product/_mget {"…...

编程日记 2025/7/22 17:25:05

TVS二极管选型【EMC】

TVS器件并联在电路中，当电路正常工作时，他处于截止状态（高阻态），不影响线路正常工作，当线路处于异常过压并达到其击穿电压时，他迅速由高阻态变为低阻态，给瞬间电流提供一个低阻抗导通…...

编程日记 2025/7/22 17:27:45

反编译APK获取xml资源

第一步去官网下载 jar 包 最新的即可 apktool官网下载地址 下载好重命名一下 改成 apktool.jar 第二步将你的 apk 和 jar 包放在同一个文件夹下面 第三步在该文件夹下打开 命令行 并输入 java -jar apktool.jar d 测试.apk回车后会正在解析 解析完成后，文件夹下…...

编程日记 2025/7/22 17:30:23

C++ 设计模式：装饰模式（Decorator Pattern）

链接：C 设计模式 链接：C 设计模式 - 桥接模式 装饰模式（Decorator Pattern）是一种结构型设计模式，它允许向一个现有的对象添加新的功能，同时又不改变其结构。装饰模式通过创建一个装饰类来包装原始类&…...

编程日记 2025/7/22 17:31:50

排序算法之快速排序、归并排序

目录 快速排序归并排序的意义 快速排序 思维步骤 具体思想 测试样例解释 代码实现 归并排序 思维步骤 具体思想 测试样例解释 代码实现 快速排序归并排序的意义 快速排序和归并排序不仅仅是一种方法，更重要的是其作为一种算法而节省时间，在…...

编程日记 2025/7/22 17:34:32

一文读懂变分自编码(VAE)

一文读懂变分自编码(VAE) 概述 变分自编码器（Variational Autoencoder, VAE）是一种生成模型，用于学习数据的潜在表示并生成与原始数据分布相似的新数据。它是一种概率模型，通过结合深度学习和变分推断的思想，解决了传…...

编程日记 2025/7/22 17:35:52

【每日学点鸿蒙知识】webview性能优化、taskpool、热更新、Navigation问题、调试时每次都卸载重装问题

1、HarmonyOS webview页面第二次，第三次打开感觉和第一次打开速度差不多，有优化吗，或者有没有webview秒开方案之类的？ 目前没有webview秒开的方案，针对web场景的优化参考一下文档：https://developer.huawe…...

编程日记 2025/7/21 21:58:24

周记-唐纳德的《计算机程序设计艺术》

用代码生成代码 开发一个协议，字段有些多，每个字段是QT的属性，需要写Q_PROPERTY，一个一个编辑的话比较繁琐，耗费时间。后来就用代码生成了头文件和源文件，get和set还有signal函数，内容基本都是…...

编程日记 2025/7/22 13:00:13

AR 模型的功率谱

功率谱密度（Power Spectral Density, PSD）的表达式是从信号的自相关函数和系统的频率响应推导出来的，特别是对于 AR（Auto-Regressive，自回归）模型。以下是推导的过程： 1. AR 模型的定义&#xf…...

编程日记 2025/7/22 17:39:39

抖音小程序登录（前端通过tt.login获取code换取openId）

抖音小程序登录 抖音开放平台小程序登录： https://developer.open-douyin.com/docs/resource/zh-CN/mini-app/develop/tutorial/basic-ability/microapp-login 前端(通过tt.login获取code) 流程 静默登录依赖小程序 API tt.login，把tt.loginsuccess 回调…...

编程日记 2025/7/22 17:46:35

Linux 更改Jenkins使用其他账户启动

Linux 更改Jenkins使用其他账户启动 步骤一：修改 Jenkins 配置文件1. 编辑 Jenkins 的 systemd 服务文件：2. 在编辑器中添加以下内容：3. 保存并退出编辑器 步骤二：更改 Jenkins 目录的权限步骤三：重新加载 systemd 配置…...

编程日记 2025/7/22 17:50:05

117.【C语言】数据结构之排序(选择排序)

目录 1.知识回顾 2.分析 设想的思路 代码 执行结果 ​编辑 错误排查和修复 详细分析出错点 执行结果 3.正确的思路 4.其他问题 1.知识回顾 参见42.5【C语言】选择排序代码 点我跳转 2.分析 知识回顾里所提到的文章的选择排序一次循环只比一个数字,和本文接下来要…...

编程日记 2025/7/22 17:56:08

读书系列2024

认知类 1、《人生没有太晚的开始》： 作者摩西奶奶。 书中经典语录：“与其着急忙慌地不知从何开始，不如一切都慢慢来，开始并坚持了，总会有结果的那一天。喜欢一件事，你就慢慢去做吧。” 2、《忏悔录》托尔…...

编程日记 2025/7/22 19:27:46

如何快速又安全的实现端口转发【Windows MAC linux通用】

背景 有很多程序是在虚拟机上运行的，返回的url 又是127.0.0.1。在个人电脑上调试需要解决这个问题。端口转发是一个不错的方法 可能的解决办法： 1.修改程序，返回虚拟机的ip （要改代码，换虚拟机还要再改代码&#xf…...

编程日记 2025/7/22 18:09:15

OpenGL变换矩阵和输入控制

在前面的文章当中我们已经成功播放了动画，让我们的角色动了起来，这一切变得比较有意思了起来。不过我们发现，角色虽然说是动了起来，不过只是在不停地原地踏步而已，而且我们也没有办法通过键盘来控制这个角色来进行移动…...

编程日记 2025/7/22 18:18:30

51单片机学习笔记——找不到REG52.H头文件，点亮一个LED

创建工程 将STC型号导入keil并使用 STC可以从官网下载，也可我这的网盘： 链接：https://pan.baidu.com/s/1bO85DPN3IFaXGhiKSwyOrA?pwd7f4h 提取码：7f4h 打开STC，选择“keil仿真设置”，选择“添加型号和头…...

编程日记 2025/7/18 14:24:26

07 基于OpenAMP的核间通信方案

引言 ZYNQ7020有两个CPU核心，这两个核心可以采用SMP或AMP方式进行调度，当采用AMP方式进行调度时核0和核1可以运行不同的操作系统，如核0运行Linux系统，提供有些复杂的用户交互工作，核1运行实时操作系统，对设…...

编程日记 2025/7/22 11:38:59

Ubuntu升级ssh版本到9.8

方案一&#xff1a;实测只有8.9有漏洞不推荐 1、更新软件包列表 sudo apt update 2、查找可用版本 apt-cache policy openssh-server 3、 选择版本 sudo apt install openssh-server1:9.8p1-<具体版本号> 4、 重启 sudo systemctl restart ssh 5、验证版本 /usr/sbin/ss…...

编程日记 2025/7/18 19:03:18

git设置项目远程仓库指向github的一个仓库

要将你的Git项目设置为指向GitHub上的远程仓库&#xff0c;你需要执行以下步骤&#xff1a; 创建GitHub仓库&#xff1a; 登录到你的GitHub账户。点击右上角的 “” 号&#xff0c;选择 “New repository” 创建一个新的仓库。填写仓库的名称&#xff0c;可以添加描述&#xff…...

编程日记 2025/7/21 16:54:42

【实战示例】面向对象的需求建模

前言 博主准备写一个以面向对象为核心思想的软件需求建模、领域建模的系列&#xff0c;总结一整套可落地的DDD的打法&#xff0c;前面几篇文章论述了如何进行面向对象的需求建模&#xff0c;本文将以一个简单的购物商城的需求来演示如何进行面向对象的需求建模。 面向对象的需…...

编程日记 2025/7/21 1:16:53

平方数的判断不用sqrt()函数

//判断一个数是不是平方数&#xff0c;13…&#xff08;2*m-1&#xff09;m*mn #include<stdio.h> int main(){ int n; scanf("%d",&n); int i; for(i1;n>0;i2){ nn-1; } if(n0){ printf("YES!\n"); …...

编程日记 2025/7/16 7:58:19

node.js之---回调函数

什么是回调函数&#xff1f; 为什么会有回调函数&#xff1f; 回调函数的特性 回调函数的应用场景 怎么解决回调地狱 什么是回调函数&#xff1f; 回调函数是一个函数&#xff0c;他作为参数传递给另外一个函数&#xff0c;并且会在另外一个函数执行完毕之后被调用&#…...

编程日记 2025/7/23 0:01:46

浏览器http缓存问题

一、什么是浏览器缓存 浏览器将请求过的资源&#xff08;html、js、css、img&#xff09;等&#xff0c;根据缓存机制&#xff0c;拷贝一份副本存储在浏览器的内存或者磁盘上。如果下一次请求的url相同时则根据缓存机制决定是读取内存或者磁盘上的数据还是去服务器请求资源文件…...

编程日记 2025/7/18 23:57:45

编写一个简单的引导加载程序（bootloader）

编写一个简单的引导加载程序&#xff08;bootloader&#xff09;通常用于嵌入式系统或自定义操作系统。这里&#xff0c;我将为你提供一个基于x86架构的简单汇编语言 bootloader 示例。这个 bootloader 将会在启动时打印一条消息到屏幕上。 使用 NASM 汇编器来编写这个 bootlo…...

编程日记 2025/7/20 1:37:59