Redis怎么避免热点数据问题
使用 RedisTemplate 避免热点数据问题的解决方案、场景及示例：
1. 数据分片（Sharding）
场景：高频读写的计数器（如文章阅读量统计）
原理：将数据分散到多个子键，降低单个 Key 的压力。
代码示例：
// 写入分片数据
public void incrementShardedCounter(String entityId, int shardCount, long delta) {String baseKey = "counter:" + entityId;int shardIndex = Math.abs(entityId.hashCode()) % shardCount;String shardKey = baseKey + ":shard:" + shardIndex;redisTemplate.opsForValue().increment(shardKey, delta);
}// 读取总分片数据（需遍历所有分片）
public long getTotalCounter(String entityId, int shardCount) {String baseKey = "counter:" + entityId;long total = 0;for (int i = 0; i < shardCount; i++) {String shardKey = baseKey + ":shard:" + i;total += redisTemplate.opsForValue().get(shardKey) != null ? (long) redisTemplate.opsForValue().get(shardKey) : 0;}return total;
}
2. 本地缓存 + 异步更新
场景：低频更新的热点数据（如商品详情页配置）
原理：应用层缓存热点数据，异步同步到 Redis。
代码示例：
// 使用 Caffeine 本地缓存
@Component
public class HotDataCache {private final Cache<String, String> cache = Caffeine.newBuilder().expireAfterWrite(10, TimeUnit.SECONDS).maximumSize(1000).build();@Autowiredprivate RedisTemplate<String, String> redisTemplate;// 读取数据（优先本地缓存）public String getData(String key) {return cache.get(key, k -> redisTemplate.opsForValue().get(k));}// 异步刷新数据@Scheduled(fixedRate = 5000)public void refreshData() {String hotKey = "product:detail:1001";String value = redisTemplate.opsForValue().get(hotKey);cache.put(hotKey, value); // 更新本地缓存}
}
3. Lua 脚本原子操作
场景：高并发库存扣减（如秒杀场景）
原理：通过 Lua 脚本在 Redis 服务端原子执行操作，减少网络开销。
代码示例：
// 定义 Lua 脚本
private static final String SECKILL_SCRIPT = "local stock = tonumber(redis.call('GET', KEYS[1]) or 0)\n" +"if stock >= tonumber(ARGV[1]) then\n" +" redis.call('DECRBY', KEYS[1], ARGV[1])\n" +" return 1\n" +"else\n" +" return 0\n" +"end";// 执行扣减
public boolean seckill(String itemId, int quantity) {DefaultRedisScript<Long> redisScript = new DefaultRedisScript<>(SECKILL_SCRIPT, Long.class);String key = "seckill:stock:" + itemId;Long result = redisTemplate.execute(redisScript, Collections.singletonList(key), String.valueOf(quantity));return result == 1;
}
4. Redis Cluster 自动分片
场景：海量数据和高可用需求（如实时排行榜）
原理：利用 Redis 集群自动分片数据，分散压力。
代码示例（需配置 RedisClusterConfiguration）：
@Configuration
public class RedisClusterConfig {@Beanpublic RedisTemplate<String, Object> redisClusterTemplate(RedisConnectionFactory factory) {RedisTemplate<String, Object> template = new RedisTemplate<>();template.setConnectionFactory(factory);template.setKeySerializer(new StringRedisSerializer());template.setValueSerializer(new GenericJackson2JsonRedisSerializer());return template;}
}// 使用方式（与单机操作一致）
redisTemplate.opsForValue().increment("leaderboard:score:" + userId, 10);
总结
| 方案 | 适用场景 | 优点 | 注意事项 |
|---|---|---|---|
| 数据分片 | 高频计数器、分布式统计 | 水平扩展，降低单点压力 | 需手动聚合数据，一致性需处理 |
| 本地缓存+异步更新 | 低频更新的热点数据（如配置） | 减少 Redis 直接访问压力 | 需处理缓存与数据库一致性 |
| Lua 脚本 | 高并发原子操作（如库存扣减） | 服务端原子性，减少网络延迟 | 需预加载脚本，复杂逻辑难维护 |
| Redis Cluster | 海量数据、高可用场景 | 自动分片，无缝扩展 | 需集群环境，运维成本较高 |
根据业务场景选择合适的方案，可有效避免 Redis 热点数据问题。
相关文章：
Redis怎么避免热点数据问题
使用 RedisTemplate 避免热点数据问题的解决方案、场景及示例： 1. 数据分片（Sharding） 场景：高频读写的计数器（如文章阅读量统计） 原理：将数据分散到多个子键，降低单个 Key 的压…...
完整的 VS Code + CMake + Qt + GCC 项目构建方案：EXE 程序与多个 DLL 库
完整的 VS Code CMake Qt GCC 项目构建方案：EXE 程序与多个 DLL 库 在本文中，我们将介绍如何构建一个包含 EXE 程序和多个 DLL 库的项目，适用于 VS Code CMake Qt GCC 开发环境。这个方案为一个模块化的项目结构，使得代码清…...
：智能流失预警 - 融合文本反馈)
Python 数据智能实战 (7)：智能流失预警 - 融合文本反馈
写在前面 —— 不再错过关键预警！结合用户行为与 LLM 文本洞察，构建更精准的流失预测模型 在之前的探索中，我们学习了如何利用大语言模型 (LLM) 对用户评论进行深度挖掘，提取情感、发现主题，并将非结构化的文本信息转化为有价值的特征 (如 Embeddings)。 现在，我们要将…...
Flutter - 概览
Hello world ⌘ shift p 选择 Empty Application 模板 // 导入Material风格的组件包 // 位置在flutter安装目录/packages/flutter/lib/material.dart import package:flutter/material.dart;void main() {// runApp函数接收MainApp组件并将这个Widget作为根节点runApp(cons…...
及Excel表格列名操作详细分享)
Python-pandas-操作Excel文件(读取数据/写入数据)及Excel表格列名操作详细分享
Python-pandas-操作Excel文件(读取数据/写入数据) 提示：帮帮志会陆续更新非常多的IT技术知识，希望分享的内容对您有用。本章分享的是pandas的使用语法。前后每一小节的内容是存在的有：学习and理解的关联性。【帮帮志系列文章】：每…...
手写 Vue 源码 === Vue3 设计思想
1.声明式框架 Vue3 是声明式的框架，用起来简单。 命令式和声明式区别 早在 JQ 的时代编写的代码都是命令式的，命令式框架重要特点就是关注过程声明式框架更加关注结果。命令式的代码封装到了 Vuejs 中，过程靠 vuejs 来实现声明式代码更加简单，不需要关注实现，按照要求填代…...
Android WebView加载h5打开麦克风与摄像头的权限问题
目录 快速处理 app向系统申请录音与相机权限h5向app申请录音和相机权限 详细解答 app权限与h5权限录音与麦克风默许的风险最佳实践 Android webview h5 麦克风权限，摄像头（相机）权限实现与填坑。 快速处理 app向系统申请录音与相机权限 …...
三种计算最小公倍数的方法分析
三种计算最小公倍数的方法分析与比较 一.引言 最小公倍数（Least Common Multiple, LCM）是数学中的一个基本概念，指能够被两个或多个整数整除的最小的正整数。在编程中，我们有多种方法可以计算两个数的最小公倍数。本文将分析三种…...
PDF转换工具xpdf-tools-4.05
XPDF是一个开源的PDF查看、提取和转换工具套件，使用C编写，支持多种操作系统，包括Linux、Unix、OS/2、Windows和Mac OS X1。XPDF不仅是一个PDF查看器，还包含多个实用工具，如文本提取器、图像转换器和HTML转换器等&a…...
 image-content-search)
aws(学习笔记第四十课) image-content-search
aws(学习笔记第四十课) image-content-search 使用SQS Lambda集成 数据库（Aurora Serverless） Cognito（用户管理） rekognition（图像解析） 学习内容： 使用SQS Lambda Aurora Serverless Cog…...
GPT-4o 图像生成与八个示例指南
什么是GPT-4o图像生成？ 简单来说，GPT-4o图像生成是集成在ChatGPT内部的一项功能。用户可以直接在对话中，通过文本描述（Prompt）来创建、编辑和调整图像。这与之前的图像生成工具相比，体验更流畅、交互性更强…...
PostgreSQL 查看表膨胀情况的方法
PostgreSQL 查看表膨胀情况的方法 表膨胀(Table Bloat)是PostgreSQL中由于MVCC机制导致的一种常见现象，当大量数据被更新或删除后，表中会积累"死元组"(dead tuples)，这些死元组占据空间但不可见，导致表实际占用的磁盘空…...
从 0 到 1！深度剖析项目实施流程，开启项目管理新视野
一、项目准备 / 前期准备 （一）跟销售进行项目交接 对接人：销售人员交接会议内容： 了解项目背景、客户基本信息、项目版本、具备二次开发功能、接口、了解合同信息等。明确项目情况、客户基本情况、使用软件（版本&…...
书生实战营之沐曦专场
一：实验环境进入和启动实验容器(D.run平台) 1.1首先进入平台进行注册 D.run平台https://console.d.run/ 注册和登录环节就跳过了。 1.2 启动实验容器--详细步骤如下 1.2.1选择容器的名称、区域、镜像（注意镜像必须选择Dlinfer） 1.2.2可以选…...
在运行 Hadoop 作业时，遇到“No such file or directory”，如何在windows里打包在虚拟机里运行
最近在学习Hadoop集群map reduce分布运算过程中，经多方面排查可能是电脑本身配置的原因导致每次运行都会报“No such file or directory”的错误，最后我是通过打包文件到虚拟机里运行得到结果，具体步骤如下： 前提是要保证maven已经…...
基于YOLOV5的目标检测识别
基于YOLOV5的目标检测识别 舰船目标检测口罩目标检测飞机目标检测 舰船目标检测 口罩目标检测 飞机目标检测...
第4篇：服务层抽象与复用逻辑
在业务系统复杂度指数级增长的今天，服务层（Service Layer）的合理设计直接影响着系统的可维护性和扩展性。本文将深入剖析 Egg.js 框架中的服务层架构设计，从基础实现到高级封装，全方位讲解企业级应用的开发实践。 一、…...
多模态大语言模型arxiv论文略读（五十四）
RoboMP 2 ^2 2: A Robotic Multimodal Perception-Planning Framework with Multimodal Large Language Models ➡️ 论文标题：RoboMP 2 ^2 2: A Robotic Multimodal Perception-Planning Framework with Multimodal Large Language Models ➡️ 论文作者ÿ…...
中小企业MES系统详细设计
版本：V1.1 日期：2025年5月2日 一、设备协议兼容性设计 1.1 设备接入框架 #mermaid-svg-PkwqEMRIIlIBPP58 {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-PkwqEMRIIlIBPP58 .error-icon{fill…...
)
第二十周:项目开发中遇到的相关问题(一)
自十九周开始，我们便开始着手写项目（关于新闻资讯类的Web项目），当然，在这之中我们也学到了很多高效且有用的好技术，在接下来的内容中将去具体的描述这些好技术，介绍它们的具体用法和应用场景。本…...
WebRtc10: 端对端1v1传输基本流程
媒体能力协商过程 RTCPeerConnection（核心类） 基本格式 pc new RTCPeerConnection([configiration]); RTCPeerConnection方法分类 媒体协商Stream/Track传输相关方法统计相关方法 媒体协商过程 协商状态变化 媒体协商方法 createOffercreateAnswe…...
【云备份】配置文件加载模块
目录 一.为什么要配置文件 二.配置文件的实现 三.单例文件配置类设计 四.源码 一.为什么要配置文件 我们将服务端程序运行中用到的一些关键信息保存到配置文件中，这样可以使程序的运行更加灵活。 这样做的好处是，未来如果我们想要修改一些关键信息&…...
重构之道：识别并替换不合适使用的箭头函数
1、引言 JavaScript 自 ES6 引入了箭头函数（Arrow Function）后，因其简洁的语法和对 this 的词法绑定机制，迅速成为开发者喜爱的写法之一。然而，并不是所有场景都适合使用箭头函数。 在实际开发中，我们常常会因为追求代码简洁而忽视其潜在问题，例如： this 指向错误不适…...
git问题记录-如何切换历史提交分支，且保留本地修改
问题记录 我在本地编写了代码，突然想查看之前提交的代码，并且想保留当前所在分支所做的修改 通过git stash对本地的代码进行暂存 使用git checkout <commit-hash>切换到之前的提交记录。 查看完之后我想切换回来，恢复暂存的本地代码…...
【MySQL】事务管理
事务管理 一. 事务的概念二. 事务的特征三. 事务的版本支持四. 事务的提交方式五. 事务的常见操作六. 事务的隔离级别1. 查看与设置隔离级别2. 读未提交 (Read Uncommitted)3. 读提交 (Read Committed)4. 可重复读 (Repeatable Read)5. 串行化 (Serializable)6. 隔离级别的总结…...
【点对点协议（PPP）全解析】从原理到工程实践
目录 前言技术背景与价值当前技术痛点解决方案概述目标读者说明 一、技术原理剖析核心概念图解核心作用讲解关键技术模块说明技术选型对比 二、实战演示环境配置要求核心配置实现案例1：基础PPP链路建立案例2：CHAP认证配置 运行结果验证 三、性能对比测试…...
环境搭建：开启 Django 开发之旅
一、环境搭建：开启 Django 开发之旅 （一）安装 Python 先确保电脑上装有 Python 3.6 及以上版本，Django 5.1 的话，至少得 Python 3.8 哦。 安装前，先查下有没有装过 Python ，终端（Wi…...
如何配置NGINX作为反向代理服务器来缓存后端服务的响应？
大家好，我是锋哥。今天分享关于【如何配置NGINX作为反向代理服务器来缓存后端服务的响应？】面试题。希望对大家有帮助； 如何配置NGINX作为反向代理服务器来缓存后端服务的响应？ 1000道 互联网大厂Java工程师 精选面试题-Java资源…...
【Java IO流】File类基础详解
参考笔记：java File类基础 万字详解（通俗易懂）-CSDN博客 目录 1.前言 2. File类介绍 3. File类构造方法 4.File类常用的方法案例演示 4.1 创建文件/文件夹的方法 4.2 删除文件/文件夹的方法 4.3 判断文件/文件夹是否存在的方法 4.4 …...
《C#数据结构与算法》—201线性表
线性表的实现方式 顺序表 线性表的顺序存储是指在内存中用一块地址连续的空间依次存放线性表的数据元素，用这种方式存储的线性表叫顺序表。 特点：表中相邻的数据元素在内存中存储位置也相邻。 顺序表接口实现： 方法名参数返回值描述GetLen…...
MATLAB绘制局部放大图
今天，我将分享一段 MATLAB 代码，该代码生成了一个主副图结合的可视化展示，用于比较不同控制系统性能表现。 clc; clear; close all;% 生成时间向量 t 0:0.1:12;% 生成模拟数据 zero_feedback 0.5 * ones(size(t)); % 恒定…...
TS 常用类型
JS不会检查变量类型的变化 给变量规定特定的数据类型，错误赋值时会报错 优势：TS会标记出代码中的意外行为，尤其是typeerrors 具体实现：类型注解 JS和TS中数据类型的变化...
)
[Control-Chaos] Toxic Cascade(毒性級鏈)
信息 信息描述靶場名稱Toxic Cascade地址GitHub: Toxic Cascade難度中等人數推薦1人類型CTF、APT 攻擊模擬、故事解謎、化工工程與逆向工程描述Toxic Cascade 是一個結合 CTF、APT 攻擊模擬、故事解謎、化工工程與逆向工程的高度沉浸式靶場。該靶場具有獨特的情境背景與模擬真…...
纳米AI搜索体验：MCP工具的实际应用测试，撰写报告 / 爬虫小红书效果惊艳
1. 引言 近期测试了纳米AI搜索的MCP工具功能，重点体验了其智能体在报告生成和社交媒体数据分析方面的表现。平台整合了100多个MCP工具，通过本地化部署的方式，为用户提供了不同于云端方案的操作体验。本文将分享实际测试结果，包括智…...
React useMemo函数
第一个参数是回调函数，返回计算的结果，第二个参数是依赖项，该函数只监听count1变量的变化 import { useReducer, useState } from react; import ./App.css;// 定义一个Reducer函数 根据不同的action进行不同的状态修改 function reducer(st…...
第 1 篇：起点的选择：为何需要超越数组与链表？
大家好，欢迎来到“数据结构选型指南”系列！在软件开发中，数据是核心，而如何高效地组织和访问这些数据，则是程序性能的关键。选择合适的数据结构，就像为你的 Java 应用选择最优的“引擎零件”。今天…...
MySQL 索引不生效的情况
MySQL 索引不生效的 SQL 查询需要避免的情况 索引是提高 MySQL 查询性能的关键，但某些 SQL 写法会导致索引失效，从而影响查询效率。以下是需要避免的常见情况： 1. 使用 NOT、! 或 <> 操作符 -- 索引可能失效 SELECT * FROM users WH…...
)
【阿里云大模型高级工程师ACP学习笔记】2.9 大模型应用生产实践 (上篇)
特别说明：由于这一章节是2025年3月官方重点更新的部分，新增内容非常多，因此我不得不整理成上、下两篇，方便大家参考。 学习目标 备考阿里云大模型高级工程师ACP认证，旨在全面掌握大模型应用生产实践的专业知识，提升在该领域的实操技能与理论水平，为职业发展增添助力。具…...
STM32 ZIBEE DL-20 无线串口模块
一.配置方法 二.串口中断 u8 i; u16 buf[20],res; u8 receiving_flag 0; // 新增一个标志，用于标记是否开始接收数组 void USART1_IRQHandler(void) {if(USART_GetITStatus(USART1, USART_IT_RXNE) ! RESET) //接收中断{res USART_ReceiveData(USART1);if(receiv…...
【算法基础】选择排序算法 - JAVA
一、算法基础 1.1 什么是选择排序 选择排序是一种简单直观的排序算法，它的工作原理是：首先在未排序序列中找到最小（或最大）元素，存放到排序序列的起始位置，然后再从剩余未排序元素中继续寻找最小…...
FastAPI 与数据库交互示例
目录 安装必要的包完整代码示例运行应用使用说明API 端点说明代码解析 下面将创建一个简单的 FastAPI 应用程序，演示如何与 SQLite 数据库进行交互。这个例子包括创建、读取、更新和删除（CRUD）操作。 安装必要的包 首先，需要安装…...
（六——下）RestAPI 毛子（Http resilience/Refit/游标分页）
文章目录 项目地址一、Refit1.1 安装需要的包1.2 创建接口IGitHubApi1.3 创建RefitGitHubService1. 实现接口2. 注册服务 1.4 修改使用方法 二、Http resilience2.1 安装所需要的包2.2 创建resilience pipeline简单版2.3 创建全局的resilience处理1. 创建清理全局ResilienceHan…...
Rust 学习笔记：关于枚举与模式匹配的练习题
Rust 学习笔记：关于枚举与模式匹配的练习题 Rust 学习笔记：关于枚举与模式匹配的练习题以下程序能否通过编译？若能，输出是什么？考虑这两种表示结果类型的方式，若计算成功，则包含值 T；…...
父子组件双向绑定
v-model 语法糖实现 vue中我们在input中可以直接使用v-model来完成双向绑定，这个时候 v-model 通常会帮我们完成两件事： v-bind:value的数据绑定@input的事件监听如果我们现在封装了一个组件，其他地方在使用这个组件时，是否也可以使用v-model来同时完成这两个功能呢？ 当我…...
系统思考与第一性原理
最近一直有客户提到“第一性原理”，希望借此穿透纷繁复杂的现象，看清事情的本质。我第一反应是：这与系统思考中的冰山模型不谋而合。 冰山模型中提到：我们看到的只是表面事件，事件背后有趋势，趋势背后有结…...
基于Redis实现-UV统计
基于Redis实现-UV统计 本文将使用HyperLogLog来实现UV统计。 首先我们搞懂两个概念： UV：全称Unique Visitor，也叫独立访客量，是指通过互联网访问、浏览这个网页的自然人。1天内同一个用户多次访问该网站，只记录一次…...
【iOS】类与对象底层探索
类与对象底层探索 Clang探索对象本质objc_setProperty源码探索cls与类的关联原理isa的类型isa_t原理探索 类&类的结构什么是元类NSObject到底有几个isa走位&继承关系图objc_class&objc_object 类结构分析计算cache类中的内存大小获取bits属性列表（prope…...
2025年- H18-Lc126-54.螺旋矩阵（矩阵）---java版
1.题目描述 2.思路* 思路1： 补充2： directions[1][0] // 表示“下”这个方向的行增量（1） directions[1][1] // 表示“下”这个方向的列增量（0） int[][] directions {{0, 1}, {1, 0}, {0, -1}, {-…...
Paddle Serving|部署一个自己的OCR识别服务器
前言 之前使用C部署了自己的OCR识别服务器，Socket网络传输部分是自己写的，回过头来一看，自己犯傻了，PaddleOCR本来就有自己的OCR服务器项目，叫PaddleServing，这里记录一下部署过程。 1 下载依赖环境 1.1 …...
yolov5 本地训练
YOLOv5 | Kaggle 直接gitclone他的源码用Vscode看（也可以直接把jupyter下下来） 他要1.8，我的是2.7，他这个代码可能有点年头了 两年前了 他的环境 我的环境 我就是不懂为什么清华源的torch windows默认下出来是cpu版本 . 在终端…...