如何解决Redis缓存异常问题(雪崩、击穿、穿透)
引言
Redis作为一种高性能的内存数据库,被广泛应用于缓存系统的构建中。然而,在实际应用过程中,我们常常会遇到三种典型的缓存异常问题:缓存雪崩、缓存击穿和缓存穿透。这些问题如果处理不当,可能会导致系统性能下降,甚至引发系统崩溃。本文将深入分析这三种缓存异常问题的成因,并提供相应的解决方案。
1. 缓存雪崩(Cache Avalanche)
1.1 问题描述
缓存雪崩是指在某一时刻,大量缓存同时过期或者Redis服务器宕机,导致大量请求直接访问数据库,使数据库瞬间压力过大而崩溃的情况。
1.2 产生原因
- 同时设置相同的过期时间:大量缓存在同一时间点设置了相同的过期时间
- Redis实例宕机:由于内存溢出、网络故障等原因导致Redis服务不可用
- 缓存服务器重启:运维操作导致缓存服务器重启,所有缓存数据丢失
1.3 解决方案
1.3.1 过期时间随机化
为缓存设置随机过期时间,避免大量缓存同时过期:
// Java示例代码
int randomExpireTime = baseExpireTime + new Random().nextInt(RANDOM_RANGE);
redisTemplate.opsForValue().set(key, value, randomExpireTime, TimeUnit.SECONDS);
1.3.2 Redis高可用
- 主从架构:配置Redis的主从复制,利用哨兵机制进行故障转移
- Redis集群:使用Redis Cluster实现数据分片和高可用
# Redis哨兵配置示例
sentinel monitor mymaster 127.0.0.1 6379 2
sentinel down-after-milliseconds mymaster 5000
sentinel failover-timeout mymaster 60000
1.3.3 熔断降级机制
当检测到缓存服务异常时,暂时切断对缓存的访问,直接返回默认值或错误提示:
// 使用Hystrix实现熔断降级
@HystrixCommand(fallbackMethod = "getDefaultValue")
public String getValue(String key) {return redisTemplate.opsForValue().get(key);
}public String getDefaultValue(String key) {return "系统繁忙,请稍后再试";
}
1.3.4 多级缓存
构建多级缓存架构,例如本地缓存(Caffeine/Guava)+ Redis缓存,当Redis缓存失效时,可以从本地缓存获取数据:
// 本地缓存配置
@Bean
public CacheManager cacheManager() {CaffeineCacheManager cacheManager = new CaffeineCacheManager();cacheManager.setCaffeine(Caffeine.newBuilder().expireAfterWrite(5, TimeUnit.MINUTES).maximumSize(10_000));return cacheManager;
}
2. 缓存击穿(Cache Breakdown)
2.1 问题描述
缓存击穿是指热点数据的缓存过期时,大量并发请求直接访问数据库,导致数据库压力骤增的现象。与缓存雪崩的区别在于,缓存击穿是针对某一特定热点数据,而非大面积的缓存失效。
2.2 产生原因
- 热点数据过期:高频访问的热点数据缓存过期
- 并发请求:大量并发请求同时发现缓存不存在,同时访问数据库
2.3 解决方案
2.3.1 互斥锁(Mutex)
使用互斥锁确保同一时刻只有一个请求能够重建缓存:
public String getValue(String key) {// 从缓存获取数据String value = redisTemplate.opsForValue().get(key);// 缓存不存在if (value == null) {// 获取互斥锁String lockKey = "lock:" + key;Boolean locked = redisTemplate.opsForValue().setIfAbsent(lockKey, "1", 10, TimeUnit.SECONDS);if (locked) {try {// 双重检查value = redisTemplate.opsForValue().get(key);if (value == null) {// 从数据库获取value = getValueFromDB(key);// 更新缓存redisTemplate.opsForValue().set(key, value, 3600, TimeUnit.SECONDS);}} finally {// 释放锁redisTemplate.delete(lockKey);}} else {// 获取锁失败,等待一段时间后重试Thread.sleep(50);return getValue(key);}}return value;
}
2.3.2 永不过期策略
对于热点数据,可以设置永不过期,而是通过后台线程定期更新缓存:
// 初始化时加载热点数据
@PostConstruct
public void init() {List<HotKey> hotKeys = getHotKeysFromConfig();for (HotKey hotKey : hotKeys) {redisTemplate.opsForValue().set(hotKey.getKey(), getValueFromDB(hotKey.getKey()));}// 启动后台线程定期更新scheduledExecutor.scheduleAtFixedRate(() -> {for (HotKey hotKey : hotKeys) {redisTemplate.opsForValue().set(hotKey.getKey(), getValueFromDB(hotKey.getKey()));}}, 0, 5, TimeUnit.MINUTES);
}
2.3.3 提前更新缓存
在缓存即将过期前,通过后台线程提前更新缓存:
// 使用Redis的过期事件通知
@Bean
public RedisMessageListenerContainer redisMessageListenerContainer() {RedisMessageListenerContainer container = new RedisMessageListenerContainer();container.setConnectionFactory(redisConnectionFactory);container.addMessageListener(new ExpiredMessageListener(), new PatternTopic("__keyevent@*__:expired"));return container;
}class ExpiredMessageListener implements MessageListener {@Overridepublic void onMessage(Message message, byte[] pattern) {String expiredKey = message.toString();if (isHotKey(expiredKey)) {String newValue = getValueFromDB(expiredKey);redisTemplate.opsForValue().set(expiredKey, newValue, 3600, TimeUnit.SECONDS);}}
}
3. 缓存穿透(Cache Penetration)
3.1 问题描述
缓存穿透是指查询一个不存在的数据,由于缓存和数据库都没有该数据,导致请求直接落到数据库上,如果有大量这样的请求,会对数据库造成很大压力。
3.2 产生原因
- 恶意攻击:恶意用户故意构造不存在的数据进行查询
- 业务误操作:业务代码错误,频繁查询不存在的数据
- 参数错误:由于参数传递错误,导致查询不存在的数据
3.3 解决方案
3.3.1 空值缓存
对于不存在的数据,在缓存中设置空值或特殊标记,避免每次都查询数据库:
public String getValue(String key) {// 从缓存获取数据String value = redisTemplate.opsForValue().get(key);if (value != null) {// 如果是空值标记,返回nullif (value.equals("NULL")) {return null;}return value;}// 从数据库获取value = getValueFromDB(key);if (value == null) {// 数据库中不存在,设置空值标记,过期时间较短redisTemplate.opsForValue().set(key, "NULL", 60, TimeUnit.SECONDS);return null;} else {// 数据库中存在,正常缓存redisTemplate.opsForValue().set(key, value, 3600, TimeUnit.SECONDS);return value;}
}
3.3.2 布隆过滤器(Bloom Filter)
使用布隆过滤器快速判断数据是否存在,避免对不存在的数据进行查询:
// 初始化布隆过滤器
@Bean
public BloomFilter<String> bloomFilter() {// 预计数据量为100万,误判率为0.01return BloomFilter.create(Funnels.stringFunnel(Charset.defaultCharset()), 1000000, 0.01);
}// 加载数据到布隆过滤器
@PostConstruct
public void initBloomFilter() {List<String> allKeys = getAllKeysFromDB();for (String key : allKeys) {bloomFilter.put(key);}
}// 使用布隆过滤器进行判断
public String getValue(String key) {// 布隆过滤器判断key是否存在if (!bloomFilter.mightContain(key)) {return null; // 一定不存在}// 从缓存获取String value = redisTemplate.opsForValue().get(key);if (value != null) {return value;}// 从数据库获取value = getValueFromDB(key);if (value != null) {redisTemplate.opsForValue().set(key, value, 3600, TimeUnit.SECONDS);}return value;
}
3.3.3 请求参数校验
对请求参数进行合法性校验,拦截非法请求:
@GetMapping("/api/data/{id}")
public ResponseEntity<Data> getData(@PathVariable String id) {// 参数校验if (id == null || id.length() > 32 || !id.matches("[a-zA-Z0-9]+")) {return ResponseEntity.badRequest().build();}// 正常业务逻辑Data data = dataService.getData(id);if (data == null) {return ResponseEntity.notFound().build();}return ResponseEntity.ok(data);
}
3.3.4 接口限流
对接口进行限流,防止恶意攻击:
// 使用Guava的RateLimiter实现限流
private final RateLimiter rateLimiter = RateLimiter.create(100.0); // 每秒允许100个请求@GetMapping("/api/data/{id}")
public ResponseEntity<Data> getData(@PathVariable String id) {// 限流判断if (!rateLimiter.tryAcquire()) {return ResponseEntity.status(HttpStatus.TOO_MANY_REQUESTS).build();}// 正常业务逻辑Data data = dataService.getData(id);return ResponseEntity.ok(data);
}
4. 综合解决方案
在实际应用中,我们通常需要综合运用上述解决方案,构建一个健壮的缓存系统。以下是一个综合解决方案的示例:
4.1 缓存架构设计
- 多级缓存:本地缓存 + Redis集群
- 高可用部署:Redis主从 + 哨兵/集群
- 数据预热:系统启动时加载热点数据
- 布隆过滤器:过滤不存在的数据
- 监控告警:实时监控缓存命中率、响应时间等指标
4.2 代码实现示例
@Service
public class CacheService {@Autowiredprivate RedisTemplate<String, String> redisTemplate;@Autowiredprivate LocalCache localCache;@Autowiredprivate BloomFilter<String> bloomFilter;@Autowiredprivate DatabaseService databaseService;// 获取数据的统一入口public String getData(String key) {// 1. 参数校验if (key == null || key.isEmpty()) {return null;}try {// 2. 查询本地缓存String value = localCache.get(key);if (value != null) {return "NULL".equals(value) ? null : value;}// 3. 查询Redis缓存value = redisTemplate.opsForValue().get(key);if (value != null) {// 更新本地缓存localCache.put(key, value);return "NULL".equals(value) ? null : value;}// 4. 布隆过滤器判断if (!bloomFilter.mightContain(key)) {// 一定不存在,设置空值localCache.put(key, "NULL");redisTemplate.opsForValue().set(key, "NULL", 60, TimeUnit.SECONDS);return null;}// 5. 加锁查询数据库String lockKey = "lock:" + key;Boolean locked = redisTemplate.opsForValue().setIfAbsent(lockKey, "1", 10, TimeUnit.SECONDS);if (locked) {try {// 双重检查value = redisTemplate.opsForValue().get(key);if (value == null) {// 查询数据库value = databaseService.query(key);// 更新缓存if (value == null) {// 空值缓存,短期过期redisTemplate.opsForValue().set(key, "NULL", 60, TimeUnit.SECONDS);localCache.put(key, "NULL");} else {// 正常值缓存,随机过期时间int expireTime = 3600 + new Random().nextInt(300);redisTemplate.opsForValue().set(key, value, expireTime, TimeUnit.SECONDS);localCache.put(key, value);// 更新布隆过滤器bloomFilter.put(key);}}} finally {// 释放锁redisTemplate.delete(lockKey);}} else {// 获取锁失败,短暂休眠后重试Thread.sleep(50);return getData(key);}return "NULL".equals(value) ? null : value;} catch (Exception e) {log.error("获取缓存数据异常", e);// 触发熔断降级return null;}}
}
5. 最佳实践与注意事项
5.1 缓存更新策略
- Cache-Aside Pattern:先更新数据库,再删除缓存
- Write-Through Pattern:先更新数据库,再更新缓存
- Write-Behind Pattern:先更新缓存,异步更新数据库
5.2 缓存预热
系统上线前,提前将热点数据加载到缓存中:
@Component
public class CacheWarmer implements ApplicationRunner {@Autowiredprivate CacheService cacheService;@Overridepublic void run(ApplicationArguments args) {log.info("开始预热缓存...");List<String> hotKeys = getHotKeysFromConfig();for (String key : hotKeys) {cacheService.getData(key);}log.info("缓存预热完成");}
}
5.3 缓存监控
监控缓存的命中率、内存使用率、响应时间等指标,及时发现缓存问题:
@Aspect
@Component
public class CacheMonitorAspect {private Counter cacheHitCounter = Counter.build().name("cache_hit_total").help("Cache hit count").register();private Counter cacheMissCounter = Counter.build().name("cache_miss_total").help("Cache miss count").register();@Around("execution(* com.example.service.CacheService.getData(..))")public Object monitorCache(ProceedingJoinPoint joinPoint) throws Throwable {long startTime = System.currentTimeMillis();Object result = joinPoint.proceed();long endTime = System.currentTimeMillis();// 记录响应时间Metrics.timer("cache.response.time").record(endTime - startTime, TimeUnit.MILLISECONDS);// 记录命中率if (result != null) {cacheHitCounter.inc();} else {cacheMissCounter.inc();}return result;}
}
5.4 缓存数据一致性
保证缓存与数据库的数据一致性是一个挑战,可以采用以下策略:
- 设置合理的过期时间:根据数据变更频率设置过期时间
- 更新数据库时删除缓存:避免缓存与数据库不一致
- 使用消息队列:数据库变更时发送消息,异步更新缓存
@Transactional
public void updateData(String key, String value) {// 1. 更新数据库databaseService.update(key, value);// 2. 删除缓存redisTemplate.delete(key);// 3. 发送消息,通知其他节点删除本地缓存messageSender.send(new CacheInvalidateMessage(key));
}
6. 总结
本文详细分析了Redis缓存中常见的三种异常问题:缓存雪崩、缓存击穿和缓存穿透,并提供了相应的解决方案。在实际应用中,我们需要根据业务特点和系统架构,综合运用这些解决方案,构建一个高性能、高可用的缓存系统。
缓存系统的设计与优化是一个持续的过程,需要不断监控、分析和改进。通过合理的缓存策略和架构设计,我们可以有效地解决缓存异常问题,提升系统的性能和稳定性。
参考资料
- Redis官方文档:https://redis.io/documentation
- 《Redis设计与实现》- 黄健宏
- 《Redis实战》- Josiah L. Carlson
- 《高性能MySQL》- Baron Schwartz等
相关文章:
如何解决Redis缓存异常问题(雪崩、击穿、穿透)
引言 Redis作为一种高性能的内存数据库,被广泛应用于缓存系统的构建中。然而,在实际应用过程中,我们常常会遇到三种典型的缓存异常问题:缓存雪崩、缓存击穿和缓存穿透。这些问题如果处理不当,可能会导致系统性能下降&…...
如何使用 Postman 进行接口测试?
使用 Postman 这一工具,可以轻松地进行接口测试。以下是一份简单的使用教程,帮助你快速上手。 Postman 接口测试教程:详细步骤及操作技巧...
记一次线上环境JAR冲突导致程序报错org.springframework.web.util.NestedServletException
一、问题描述 有个文件导入功能,用到了Hutool 的加密解密功能,本地运行完全可以,但是线上报错:“org.springframework.web.util.NestedServletException: Handler dispatch failed; nested exception is java.lang.NoClassDefFou…...
VLAN实验
一:实验拓扑 二:实验需求 1、PC1和PC3所在接口为access接口,属于VLAN 2 2、PC2/4/5/6处于同一网段 其中PC2可以访问PC4/5/6 PC4可以访问PC5不能访问PC6 PC5不能访问PC6 3、PC1/3和PC2/4/5/6不在一个网段,且可以正常通讯 4、…...
FPGA中串行执行方式之状态机
FPGA中串行执行方式之状态机 在FPGA中,默认情况下,逻辑是并行执行的,因为FPGA的硬件资源是并行的。然而,在某些情况下,你可能需要某一段逻辑以串行方式执行。这可以通过以下几种方法实现:使用状态机(Finite State Machine, FSM)、使用计数器控制、使用流水线(Pipel…...
【常用的中间件】
中间件(Middleware)是位于客户端和服务器之间的软件层,用于处理客户端请求和服务器响应之间的各种任务。中间件可以提供多种功能,如负载均衡、消息队列、缓存、身份验证等。以下是常用的中间件及其作用: 1. 消息队列中…...
spring - 十二种事务失效场景
目录 编辑 一、方法内部调用 1、原理: 2、结论: 3、解决方法: 1. 增加一个service,把一个事务的方法移到新增加的service方法里面,然后进行注入再调用 2. 在自己类中注入自己 3. 通过AopContentent 二、访问权限不是pubilc 三、方法用final修饰 四、没有被spr…...
python脚本处理excel文件
1.对比perl和python 分别尝试用perl和python处理excel文件,发现perl的比较复杂,比如说read excel就有很多方式 Spreadsheet::Read use Spreadsheet::ParseExcel 不同的method,对应的取sheet的cell方式也不一样。更复杂的是处理含有中文内…...
C#基础学习(二)C#数组生存手册:从入门到“血压拉满“的奇妙旅程
作为一只C#萌新,当你试图用数组装下整个世界时,系统可能会温柔地弹出一句**"Index was outside the bounds of the array."**。别慌!这份求生指南将用段子教你玩转数组 一、数组是什么 数组简单来说就是由相同元素组成的一个集合&a…...
MySQL 性能优化方向
MySQL 性能优化是一个系统性的工作,涉及数据库设计、查询优化、索引优化、硬件配置等多个方面。以下是 MySQL 性能优化的主要方向和具体优化方案: 一、数据库设计优化 1. 合理设计表结构 规范化设计:避免数据冗余,确保数据一致性。适度反规范化:在查询频繁的场景下,适当…...
2025年- G26-Lc100-57.插入间隔(max、min)--java版
1.题目描述 题目翻译: 给定一个不重叠的区间阵列 intervals,其中intervals[i] [starti, endi]表示第i一个区间的起始位置和结束位置,并且intervals 按照起始位置starti升序排序。 另外,给定一个新的区间newInterval [start, e…...
Burp Suite HTTPS解密原理
HTTPS HTTPS是在HTTP的基础上增加了SSL/TLS协议,提供了数据的加密、完整性校验和身份认证等安全保障。HTTPS的工作过程可以分为两个阶段:握手阶段和数据传输阶段。 流程如下图所示: 通过上面的图可以看到,在TCP建立连接后会发起…...
【ESP32S3】esp32获取串口数据并通过http上传到前端
通过前面的学习(前面没发过,因为其实就是跑它的demo)了解到串口配置以及开启线程实现功能的工作流程,与此同时还有esp32作为STA节点,将数据通过http发送到服务器。 将这两者联合 其实是可以得到一个:esp32获…...
怎么查看linux是Ubuntu还是centos
要确定你的Linux系统是基于Ubuntu还是CentOS,可以通过几种不同的方法来进行判断。下面是一些常用的方法: 要快速判断 Linux 系统是 Ubuntu 还是 CentOS,可通过以下方法综合验证: 一、查看系统信息文件 1. /etc/os-release 文件…...
Qt进程间通信:QSharedMemory 使用详解
1. 什么是 QSharedMemory? QSharedMemory 是 Qt 中用于进程间共享内存的类。它允许多个进程共享一块内存区域,从而避免数据传输时的 IO 操作,提高通信速度。通过共享内存,多个进程可以直接读写这块内存,而无需经过文件…...
【day1】数据结构刷题 链表
一 反转链表 206. 反转链表 给你单链表的头节点 head ,请你反转链表,并返回反转后的链表。 示例 1: 输入:head [1,2,3,4,5] 输出:[5,4,3,2,1]示例 2: 输入:head [1,2] 输出:[2,1]…...
使用redis设置店铺状态
知识点: 将前端传过来的status(0,1)通过redis对象以key,values值的形式存放在redis中。 #设置店铺状态 redisTemplate.opsForValue().set(KEY,status); #获取店铺状态 Integer status (Integer) redisTemplate.o…...
基于python+django的商城网站-电子商城管理系统源码+运行
基于 python 开发的电子商城网站,平台采用 B/S 结构,后端采用主流的 Python 语言进行开发,前端采用主流的 Vue.js 进行开发。该系统是给师弟做的课程作业。同学们可以拿去自用。学习问题可以留言哦。 整个平台包括前台和后台两个部分。 前台…...
深度解读 C 语言运算符:编程运算的核心工具
一、引言 在 C 语言的编程世界中,运算符是构建逻辑与运算的基石,它如同一位指挥家,精准地协调着程序中各种数据的操作与处理。C 语言丰富多样的运算符涵盖了算术、关系、逻辑、位运算、赋值以及其他杂项运算等多个领域,为开发者提…...
docker中间件部署
1.docker安装 # 1.卸载旧版本 yum remove docker \docker-client \docker-client-latest \docker-common \docker-latest \docker-latest-logrotate \docker-logrotate \docker-engine# 2.需要的安装包 yum install -y yum-utils# 3.设置镜像的仓库 # 3.1.默认是国外的&#x…...
【Python Cookbook】字符串和文本(二)
字符串和文本(二) 6.字符串忽略大小写的搜索替换7.最短匹配模式8.多行匹配模式9.将 Unicode 文本标准化10.在正则式中使用 Unicode 6.字符串忽略大小写的搜索替换 你需要以忽略大小写的方式搜索与替换文本字符串。 为了在文本操作时忽略大小写…...
docker pull时报错:https://registry-1.docker.io/v2/
原文:https://www.cnblogs.com/sdgtxuyong/p/18647915 https://www.cnblogs.com/OneSeting/p/18532166 docker 换源,解决连接不上的问题。 编辑以下文件,不存在则创建: vim /etc/docker/daemon.json {"registry-mirrors&qu…...
DeepSeek助力文案,智能音箱如何改变你的生活?
你好,我是三桥君 你有没有为写智能音箱的宣传文案而抓耳挠腮过?三桥君在这方面可是有些感想,今天就来给你唠唠怎么用DeepSeek写出超赞的智能音箱宣传文案。 首先,你得给DeepSeek喂足“料”。这就好比做饭,你得准备好各…...
【机器学习】什么是随机森林?
什么是随机森林? 随机森林(Random Forest)是一种集成学习方法,它通过组合多个决策树来提高预测的准确性和鲁棒性。可以把随机森林看作是“森林”,而森林中的每棵树就是一个决策树。每棵树独立地做出预测,最…...
Nature Machine Intelligence 嵌入式大语言模型使机器人能够在不可预测的环境中完成复杂的任务
近期英国爱丁堡大学发表Nature Machine Intelligence研究工作,提出了一种名为ELLMER(具身大型语言模型支持机器人)的创新框架,通过整合大型语言模型(如GPT-4)、检索增强生成(RAG)、视…...
[特殊字符] 2025蓝桥杯备赛Day13——P10984 [蓝桥杯 2023 国 Python A] 残缺的数字
🔍 2025蓝桥杯备赛Day13——P10984 [蓝桥杯 2023 国 Python A] 残缺的数字 🚀 题目速览 题目难度:⭐⭐⭐(需掌握位运算与组合数学) 考察重点:二进制状态处理、位运算、乘法原理、枚举 P10984 [蓝桥杯 2…...
【AcWing】算法基础课-数学知识
目录 1、质数 1.1 试除法判定质数 暴力解法 优化解法 1.2 分解质因数(试除法) 暴力解法 优化解法 1.3 筛质数 朴素筛法(nlogn) 埃氏筛法(nloglogn) 线性筛法(n) 2、约数 2.1 试除法求约数 2.2 约数个数 2.3 约数之和 2.4 最大公约数 实现方法一 实现方法二 …...
JVM常见概念之条件移动
问题 当我们有分支频率数据时,有什么有趣的技巧可以做吗?什么是条件移动? 基础知识 如果您需要在来自一个分支的两个结果之间进行选择,那么您可以在 ISA 级别做两件不同的事情。 首先,你可以创建一个分支ÿ…...
k8s存储介绍(二)Secret
Kubernetes(K8s)提供了一种安全的方式来存储和管理敏感信息,如密码、OAuth 令牌和 SSH 密钥,这就是 Secret。使用 Secret 可以避免将敏感数据硬编码到 Pod 规范或容器镜像中,从而提高安全性和可管理性。 1. Secret 的…...
Css布局-常规流笔记
https://developer.mozilla.org/zh-CN/docs/Learn/CSS/CSS_layout/Normal_Floworghttps://developer.mozilla.org/zh-CN/docs/Learn/CSS/CSS_layout/Normal_Flow 前言 常规流布局是html元素默认布局,凡是没有设置过css布局的html元素,默认布局方式称为常…...
Linux系统管理与编程08:任务驱动综合应用
兰生幽谷,不为莫服而不芳; 君子行义,不为莫知而止休。 [环境] windows11、centos7.9.2207、zabbix6、MobaXterm、Internet环境 [要求] zabbix6.0安装环境:Lamp(linux httpd mysql8.0 php) [步骤] 3 …...
基于 OCO - 2 氧气 A 带辐射数据与地面台站气压观测数据构建近地面气压监测算法方案
基于 OCO - 2 氧气 A 带辐射数据与地面台站气压观测数据构建近地面气压监测算法方案 一、数据获取与准备 (一)OCO - 2 氧气 A 带辐射数据 数据下载:从 OCO - 2 官方数据发布平台(如 NASA 的相关数据存储库),按照研究所需的时间范围(例如,近 5 年的数据以获取足够的样本…...
Linux centos7 虚拟用户访问脚本
下面是脚本: #!/bin/bash #function:创建 vsftpd 虚拟用户脚本 #author: 20250324 IT小旋风# 判断是否是 root 用户 if [ "$USER" ! "root" ]; thenecho "不是 root 用户,无法进行安装操作"exit 1 fi# 关闭防火墙 system…...
HTTP 协议中请求与响应的详细解析
前言:HTTP(Hypertext Transfer Protocol,超文本传输协议)是用于在互联网上传输超文本的协议 --由一个请求和响应组成,一个完整的 HTTP 请求由请求行(Request Line)、请求头(Headers&…...
Collectors.toMap / list 转 map
前言 略 Collectors.toMap List<User> userList ...; Map<Long, User> userMap userList.stream().collect(Collectors.toMap(User::getUserId, Function.identity()));假如id存在重复值,则会报错Duplicate key xxx, 解决方案 两个重复id中&#…...
根据模板将 Excel 明细数据生成 PDF 文档 | PDF实现邮件合并功能
在日常办公中,我们常常会面临这样的需求:依据特定的模板,把 Excel 里的每一条数据转化为单独的 PDF 文档,且这些 PDF 文档中的部分内容会根据 Excel 数据动态变化。这一功能不仅能高效完成任务,还支持图片的动态替换&a…...
<KeepAlive>和<keep-alive>有什么区别
在不同的前端技术框架里,<KeepAlive> 和 <keep-alive> 有着不同的含义与使用场景,下面分别从 Vue 2 和 Vue 3 来为你详细介绍它们的区别。 Vue 2 中的 <keep-alive> 在 Vue 2 里,<keep-alive> 属于内置组件&#x…...
vscode正则表达式使用
小标题 ^\d.\d.\d\s.*$ ^表示匹配字符串的开头。\d\.\d\.\d表示匹配一到多个数字,接着一个小数点,再接着一到多个数字,然后又一个小数点和一到多个数字,用来匹配类似 “2.1.1” 这样的标题号部分。\s表示匹配一个空格。.*表示匹配…...
【LeetCode 题解】算法:4.寻找两个正序数组的中位数
1. 引言:挑战 LeetCode 经典算法题 在算法这片广袤无垠的天地里,一道道经典题目宛如夜空中熠熠生辉的星辰,持续吸引着开发者们投身其中,不断探索。今天,我们继续将目光聚焦于 LeetCode 平台上一道极具代表性的题目&am…...
2025.03.23【前沿工具】| CellPhoneDB:基因网络分析与可视化的利器
文章目录 1. CellPhoneDB工具简介2. CellPhoneDB的安装方法3. CellPhoneDB常用命令 1. CellPhoneDB工具简介 在单细胞生物学的迅猛发展中,理解细胞间的通讯机制对于揭示组织功能和疾病状态至关重要。CellPhoneDB工具,作为一个专门设计用来分析单细胞转录…...
Excel(进阶篇):powerquery详解、PowerQuery的各种用法,逆透视表格、双行表头如何制作透视表、不规则数据如何制作数据透视表
目录 PowerQuery工具基础修改现有数据理规则PowerQuery抓取数据的两种方式多文件合并透视不同表结构多表追加数据透视追加与合并整理横向表格:逆透视 数据用拆分工具整理数据算账龄 不等步长值组合合并文件夹中所有文件PowerQuery处理CSV文件双行表头、带合并单元格如何做数据…...
【WebGIS教程2】Web服务与地理空间服务解析
前言: 在万物互联的时代,Web服务作为跨平台协作的基石,正推动地理信息领域向开放共享迈进。地理空间Web服务通过标准化协议(如WMS、WFS)与松耦合架构,打破传统GIS的封闭性,实现数据与功能的无缝…...
[250325] Claude AI 现已支持网络搜索功能!| ReactOS 0.4.15 发布!
目录 Claude AI 现已支持网络搜索功能!ReactOS 0.4.15 发布! Claude AI 现已支持网络搜索功能! 近日,Anthropic 公司宣布,其 AI 助手 Claude 现在可以进行网络搜索,为用户提供更及时、更相关的回复。这项新…...
gitee第三方登录获取openid | python+Django |已跑通
注:此项目根据美多改编,qq第三方需要备案gitee不用 一、获取appid和appsecret 点击右侧账号设置 左侧菜单栏数据管理里有第三方应用 点击创建应用,根据你的具体情况设置 二、以下是事例代码,根据需要修改即可 setting.py #QQ登…...
Enovia许可分析的自动化解决方案
随着企业产品生命周期管理(PLM)需求的不断演变,Enovia许可分析已成为确保资源优化和合规性的关键环节。然而,传统的手动许可分析方法往往效率低下、易出错,并且难以应对大规模数据。为了解决这一挑战,Enovi…...
【模拟面试】计算机考研复试集训(第十四天)
文章目录 前言一、专业面试1、进程调度中的轮转调度(Round Robin)如何实现?时间片大小对系统性能有何影响?2、动态规划的核心思想是什么?举一例说明其与分治法的区别。3、事务的ACID特性中,“隔离性” 如何…...
ambiq apollo3 ADC实例程序注释
#include "am_mcu_apollo.h" // Apollo MCU 外设寄存器定义和HAL库 #include "am_bsp.h" // 板级支持包(引脚定义、LED函数等) #include "am_util.h" // 通用工具函数(如printf重…...
ECharts实现数据可视化
ECharts实现数据可视化 一、Echarts的简介二、Echarts使用教程1.下载echarts.min.js文件2.编写echarts代码(1)创建渲染实列(2)修改option达到预期的效果(3)创建配置项到实例中 三、Echarts的基础配置四、前…...
Json冲突崩溃问题
在一个项目中同时使用RapidJSON库后崩溃了。。。。 --- ### **一、潜在问题分析** 1. **符号重复定义(ODR冲突)** - **原因**:若您的库和上位机主程序均静态链接了RapidJSON(如编译为.a或.lib),或通…...
HeyGem.ai 全离线数字人生成引擎加入 GitCode:开启本地化 AIGC 创作新时代
在人工智能技术飞速演进的时代,数据隐私与创作自由正成为全球开发者关注的焦点。硅基智能旗下开源项目 HeyGem.ai 近日正式加入 GitCode,以全球首个全离线数字人生成引擎的颠覆性技术,重新定义人工智能生成内容(AIGC)的…...