当前位置： 首页 > news >正文

ES用脚本更新异常

news 来源：原创 2025/9/22 18:02:58

因为需要向原有的es结构中增加一个检索字段，但因为历史es数据都没有该字段，需要批量刷新es的该字段，本地使用了脚本的方式进行刷新，在测试环境测试，出现了以下错误：

500 Internal Server Error: [{"error":{"root_cause":[{"type":"circuit_breaking_exception","reason":"[script] Too many dynamic script compilations within, max: [75/5m]; please use indexed, or scripts with parameters instead; this ... (812 bytes)]

这条错误信息表示在ElasticSearch中，5分钟内动态脚本编译的数量超过了允许的最大值75个。ElasticSearch设置了这个限制是为了防止因大量脚本编译导致的内存溢出和性能下降。

可能导致此错误的原因

  1. ‌频繁使用动态脚本‌：在查询或聚合操作中频繁使用动态脚本，尤其是当这些脚本的参数经常变化时，会导致ElasticSearch频繁编译新脚本。
  2. ‌脚本参数处理不当‌：如果脚本中的参数没有通过params传递，而是直接硬编码在脚本中，那么即使脚本的逻辑相同，只要参数值有变化，ElasticSearch也会认为是一个新的脚本，从而进行编译。

解决此错误的建议方法

  1. ‌调整配置参数‌：
    可以通过修改ElasticSearch的配置来增加允许的动态脚本编译数量。例如，将script.max_compilations_rate设置为1000/1m（表示每分钟允许1000次编译）：
PUT _cluster/settings 
{"persistent": {"script.max_compilations_rate": "1000/1m"}
}
这种方法可以暂时解决问题，但可能会增加服务器的性能消耗，治标不治本！

        2‌.优化脚本使用‌：
尽量避免在脚本中使用动态参数，而是将参数通过params传递。这样可以减少ElasticSearch因参数变化而频繁编译新脚本的情况。例如：

POST my_index/_update/1
{"script": {"source": "ctx._source.name = params.name","params": {"name": "tom"}}
}

相关文章：

ES用脚本更新异常

因为需要向原有的es结构中增加一个检索字段，但因为历史es数据都没有该字段，需要批量刷新es的该字段，本地使用了脚本的方式进行刷新，在测试环境测试，出现了以下错误： 500 Internal Server Error: [{"e…...

编程日记 2025/9/22 18:02:58

Navicat导入海量Excel数据到数据库（简易介绍）

目录 前言正文 前言 此处主要作为科普帖进行记录 原先Java处理海量数据的导入时，由于接口超时，数据处理不过来，后续转为Navicat Navicat 是一款功能强大的数据库管理工具，支持多种数据库系统（如 MySQL、PostgreSQL、…...

编程日记 2025/9/22 17:58:45

C++学习

C对C语言的加强 1.命名空间（namespace） 为了避免，在大规模程序的设计中，以及在程序员使用各种各样的C库时，这些标识符的命名发送冲突。 标准C引入了关键字namespace，可以更好地控制标识符的作用域。 st…...

编程日记 2025/9/22 17:58:46

Linux Mem -- Where the mte store and check in the real hardware platform

目录 1 前言 2 MTE tag分类 3 Address tag 4 Memory tag 5 Tag Check 6 Cortex-A710 和 CI-700 系统示例： 1 前言 ARM的MTE允许分配、设置、比较一个 4bit的allocation tag 为16字节粒度的物理地址。当对MTE有一定了解后，应该会产生如下疑问&#…...

编程日记 2025/9/22 2:06:35

老牌软件，如今依旧坚挺

今天给大家介绍一个非常好用的老牌电脑清理软件，这个软件好多年之前就有人使用了。 今天找出来之后，发现还是那么的好用，功能非常强大。 Red Button 电脑清理软件 软件是绿色版，无需安装，打开这个图标就能直接使用了…...

编程日记 2025/9/22 18:01:19

springboot整合modbus实现通讯

springboot整合modbus4j实现tcp通讯 前言 本文基于springboot和modbus4j进行简单封装，达到开箱即用的目的，目前本方案仅实现了tcp通讯。代码会放在最后，按照使用方法操作后就可以直接使用 介绍 在使用本方案之前，有必要对modb…...

编程日记 2025/9/22 18:02:44

【java面试】线程篇

1.什么是线程？ 线程是操作系统能够进行运算调度的最小单位，它被包含在进程之中，是进程中的实际运作单位。 2.线程和进程有什么区别？ 线程是进程的子集，一个进程可以有很多线程，每条线程并行执行不同的任…...

编程日记 2025/9/22 17:57:06

DeepSeek官方发布R1模型推荐设置

今年以来，DeepSeek便在AI领域独占鳌头，热度一骑绝尘。其官方App更是创造了惊人纪录，成为史上最快突破3000万日活的应用，这一成绩无疑彰显了它在大众中的超高人气与强大吸引力。一时间，各大AI及云服务厂商纷纷投身其中&…...

编程日记 2025/9/21 23:03:19

Vue CLI 配置与插件

Vue CLI 配置与插件 今天我们来聊聊 Vue CLI 的配置与插件。随着项目复杂度的增加，合理配置 Vue CLI 可以帮助我们更高效地管理项目，同时利用插件机制快速集成各种功能。下面我就和大家详细介绍如何配置 Vue CLI，以及如何使用和开发插件&…...

编程日记 2025/9/9 7:52:33

Spring Boot （maven）分页3.0版本 通用版

前言： 通过实践而发现真理，又通过实践而证实真理和发展真理。从感性认识而能动地发展到理性认识，又从理性认识而能动地指导革命实践，改造主观世界和客观世界。实践、认识、再实践、再认识，这种形式，循环往…...

编程日记 2025/9/22 17:56:30

pip 与 conda 的故事

pip 换源 pip 官方源 -i https://pypi.python.org/simple pip 清华源 -i https://pypi.tuna.tsinghua.edu.cn/simple pip 阿里源 -i https://mirrors.aliyun.com/pypi/simple PyTorch 安装 pip3 install torch torchvision torchaudio pip3 install torch torchvision torchaud…...

编程日记 2025/9/22 17:57:08

清华大学KVCache.AI团队联合趋境科技联合的KTransformers开源项目为什么那么厉害

KTransformers是一个由清华大学KVAV.AI团队开发的开源项目，旨在优化大语言模型（LLM）的推理性能，特别是在有限显存资源下运行大型模型。以下是KTransformers的详细介绍： 1. 核心特点 高性能优化：KTransfor…...

编程日记 2025/9/22 17:56:31

DeepSeek 遭 DDoS 攻击背后：DDoS 攻击的 “千层套路” 与安全防御 “金钟罩”_deepseek ddos

当算力博弈升级为网络战争：拆解DDoS攻击背后的技术攻防战——从DeepSeek遇袭看全球网络安全新趋势 在数字化浪潮席卷全球的当下，网络已然成为人类社会运转的关键基础设施，深刻融入经济、生活、政务等各个领域。从金融交易的实时清算&#xf…...

编程日记 2025/9/22 18:01:19

4090单卡挑战DeepSeek r1 671b：尝试量化后的心得的分享

引言： 最近，DeepSeek-R1在完全开源的背景下，与OpenAI的O1推理模型展开了激烈竞争，引发了广泛关注。为了让更多本地用户能够运行DeepSeek，我们成功将R1 671B参数模型从720GB压缩至131GB，减少了80%&#xff…...

编程日记 2025/9/22 18:00:54

【动态路由】系统Web URL资源整合系列（后端技术实现）【apisix实现】

需求说明 软件功能需求：反向代理功能（描述：apollo、eureka控、apisix、sentinel、普米、kibana、timetask、grafana、hbase、skywalking-ui、pinpoint、cmak界面、kafka-map、nacos、gateway、elasticsearch、 oa-portal 业务应用等多个web资…...

编程日记 2025/9/22 18:00:04

【Elasticsearch】通过运行时字段在查询阶段动态覆盖索引字段

在 Elasticsearch 中，Override field values at query time是指通过运行时字段（runtime fields）在查询阶段动态覆盖索引字段的值，而无需修改原始索引数据。这种功能特别适用于以下场景： 1. 动态修改字段值&#xff1a…...

编程日记 2025/9/20 4:49:20

【stm32】定时器

stm32f4xx： APB2 ----> TIM1,TIM8,TIM9,TIM10,TIM11 APB1 ----> TIM2,TIM3,TIM4,TIM5,TIM6,TIM7,TIM12,TIM13,TIM14 一、定时器介绍 1、基本定时器 1.1、TIM6 和 TIM7 的主要特性 ● 16 位自动重载递增计数器 ● 16 位可编程…...

编程日记 2025/9/22 17:56:32

滑动窗口算法篇：连续子区间与子串问题

1.滑动窗口原理 那么一谈到子区间的问题，我们可能会想到我们可以用我们的前缀和来应用子区间问题，但是这里对于子区间乃至子串问题，我们也可以尝试往滑动窗口的思路方向去进行一个尝试，那么说那么半天，滑动窗口是什么…...

编程日记 2025/9/22 7:12:41

华三交换机-链路聚合配置案例

目录 1.链路聚合简述:2.链路聚合的作用:3.链路聚合的模式:4.网络拓扑:5.实验需求:6.网络配置：6.1 链路聚合配置(静态聚合)6.1.1 链路聚合配置:6.1.2 查看链路聚合状态: 6.2 链路聚合配置(动态聚合)6.2.1 链路聚合配置:6.2.2 查看链路聚合状态: 7.网络连通性测试:(接…...

编程日记 2025/9/18 9:05:51

Qwen2-VL 的重大省级，Qwen 发布新旗舰视觉语言模型 Qwen2.5-VL

Qwen2.5-VL 是 Qwen 的新旗舰视觉语言模型，也是上一代 Qwen2-VL 的重大飞跃。 Qwen2.5-VL主要特点 视觉理解事物：Qwen2.5-VL不仅能够熟练识别花、鸟、鱼、昆虫等常见物体，而且还能够分析图像中的文本、图表、图标、图形和布局。 代理性&…...

编程日记 2025/9/22 12:48:15

关系数据库标准语言SQL

1.SOL称为结构化查询语言，它是由1974年由Boyce和Chamberlin提出的，1975年至1979年IBM公司的San Jose Research Laboratory研制了关系数据库管理系统的原型系统SystemR,并实现了这种语言。 2.SQL(Structured Ouery Language)称为结构化查询语言 3.SQL数…...

编程日记 2025/9/20 18:18:10

mysql8.0使用MGR实现高可用与利用MySQL Router构建读写分离MGR集群

MGR是MySQL Group Replication的缩写，即MySQL组复制。 在以往，我们一般是利用MySQL的主从复制或半同步复制来提供高可用解决方案，但这存在以下几个比较严重的问题： 主从复制间容易发生复制延迟，尤其是在5.6以前的版本…...

编程日记 2025/9/22 6:31:59

《AI大模型开发笔记》MoE模型技术对比（Mixtral，Qwen2-MoE，DeepSeek-v3）

MoE模型技术对比（Mixtral，Qwen2-MoE，DeepSeek-v3） MoE（混合专家）大模型进入爆发期！本期我们对比三大开源MoE LLM：Mixtral、Qwen2-MoE 和最新爆火的 DeepSeek-V3。从 2023 年 Mixtral 开启风潮，到 2024 年 DeepSeek-V3 让全球瞩目，MoE 模型到底经历了怎样的进化？ De…...

编程日记 2025/9/14 8:32:08

Vue.js 组件开发深入解析：Vue 2 vs Vue 3

Vue.js 是一个渐进式框架，旨在通过声明式渲染和组件化开发来提高开发效率和可维护性。组件是 Vue 应用的基本组成部分，几乎所有的功能都可以通过组件来实现。随着 Vue 3 的发布，Vue.js 引入了许多新的特性，使得组件的开发变得更加…...

编程日记 2025/9/21 5:06:17

DeepSeek大模型一键部署解决方案：全平台多机分布式推理与国产硬件优化异构计算私有部署

DeepSeek R1 走红后，私有部署需求也随之增长，各种私有部署教程层出不穷。大部分教程只是简单地使用 Ollama、LM Studio 单机运行量化蒸馏模型，无法满足复杂场景需求。一些操作配置也过于繁琐，有的需要手动下载并合并分片模型文件&…...

编程日记 2025/9/20 20:17:53

多个用户如何共用一根网线传输数据

前置知识 一、电信号 网线（如以太网线）中传输的信号主要是 电信号，它携带着数字信息。这些信号用于在计算机和其他网络设备之间传输数据。下面是一些关于网线传输信号的详细信息： 1. 电信号传输 在以太网中，数据是…...

编程日记 2025/9/20 9:20:15

DeepSeek官方推荐的AI集成系统

DeepSeek模型虽然强大先进，但是模型相当于大脑，再聪明的大脑如果没有输入输出以及执行工具也白搭，所以需要有配套工具才能让模型发挥最大的作用。下面是一个典型AI Agent架构图，包含核心组件与数据流转关系： #mermaid-…...

编程日记 2025/9/17 9:45:17

el-select 添加icon

Element-ui-plus 新版本&#xff1a;Select 选择器 | Element Plus 要实现如上的效果 &#xff0c;要用到具名插槽 prefix&#xff0c;看代码&#xff1a; <template><el-dialog ref"dialogRef" v-model"dialogVisible" :title"title"…...

编程日记 2025/9/10 6:16:05

Qt的QPushButton样式设置

在Qt中&#xff0c;可以通过样式表&#xff08;QSS&#xff09;为QPushButton设置丰富的样式。以下是常见样式设置方法的详细说明&#xff1a; 1. 基础样式 // 设置背景色、文字颜色、圆角边框 button->setStyleSheet("QPushButton {"" background-color…...

编程日记 2025/9/11 16:01:15

Java函数计算冷启动从8s到800ms的优化实录

在函数计算场景中，冷启动性能对用户体验至关重要。本文将分享如何将 Java 函数计算的冷启动时间从 8 秒优化到 800 毫秒，包括具体的技术手段和代码示例。 一、背景介绍 函数计算是一种事件驱动的计算服务，用户只需上传代码，无需管理服务器。但在实际使用中，函数计算的冷…...

编程日记 2025/9/18 18:24:24

通过例子学 rust 个人精简版 1-1

1-1 Hello World fn main() {println!("Hello World!");// 动手试一试println!("Im a Rustacean!"); }Hello World! Im a Rustacean!要点1 &#xff1a;println 自带换行符 注释 fn main() {let x 5 /* 90 */ 5;println!("Is x 10 or 100? x …...

编程日记 2025/9/18 20:18:04

STM32、GD32驱动TM1640原理图、源码分享

一、原理图分享 二、源码分享 /************************************************* * copyright: * author:Xupeng * date:2024-07-18 * description: **************************************************/ #include "smg.h"#define DBG_TAG "smg&…...

编程日记 2025/9/8 11:33:50

Centos安装php-8.0.24.tar

查看系统环境 cat /etc/redhat-release 预先安装必要的依赖 yum install -y \ wget \ gcc \ gcc-c \ autoconf \ automake \ libtool \ make \ libxml2 \ libxml2-devel \ openssl \ openssl-devel \ sqlite-devel yum update 1、下载解压 cd /data/ wget https:/…...

编程日记 2025/9/21 1:25:20

VNC远程控制Mac

前言 macOS系统自带有VNC远程桌面&#xff0c;我们可以在控制端上安装配置VNC客户端&#xff0c;以此来实现远程控制macOS。但通常需要在不同网络下进行远程控制&#xff0c;为此&#xff0c;我们可以在macOS被控端上使用cpolar做内网穿透&#xff0c;映射VNC默认端口5…...

编程日记 2025/9/15 11:14:35

基于大数据的北京市天气数据分析系统的设计与实现

【Flask】基于Flask的北京市天气数据分析系统的设计与实现&#xff08;完整系统源码开发笔记详细部署教程&#xff09;✅ 目录 一、项目简介二、项目界面展示三、项目视频展示 一、项目简介 该系统采用Python和Flask框架&#xff0c;结合Pandas、NumPy等数据处理库及Echarts进…...

编程日记 2025/9/19 8:18:33

20250214在ubuntu20.04下使用obs studio录制外挂的1080p的USB摄像头【下载安装】

20250214在ubuntu20.04下使用obs studio录制外挂的1080p的USB摄像头 2025/2/14 9:10 缘起&#xff1a;笔记本电脑在ubuntu20.04下使用Guvcview录制自带的摄像头&#xff0c;各种问题。 1、降帧率。WIN10/11自带的相机应用可以满速30fps&#xff0c;马上重启到ubuntu20.04&#…...

编程日记 2025/9/21 12:50:36

OpenEuler学习笔记（三十）：在OpenEuler上搭建3D建模环境

在OpenEuler上搭建3D建模环境&#xff0c;通常可以选择一些常见的3D建模软件&#xff0c;如Blender、FreeCAD等。以下以搭建Blender和FreeCAD这两款软件的使用环境为例&#xff0c;为你详细介绍搭建步骤。 搭建Blender 3D建模环境 1. 更新系统软件包 首先&#xff0c;确保系…...

编程日记 2025/9/21 10:19:30

Deepseek R1模型本地化部署+API接口调用详细教程：释放AI生产力

文章目录 前言一、deepseek R1模型与chatGPT o1系列模型对比二、本地部署步骤1.安装ollama2部署DeepSeek R1模型删除已存在模型&#xff0c;以7b模型为例 三、DeepSeek API接口调用Cline配置 前言 随着最近人工智能 DeepSeek 的爆火&#xff0c;越来越多的技术大佬们开始关注如…...

编程日记 2025/9/21 22:30:05

Ubuntu添加桌面快捷方式

以idea为例 一. 背景 在ubuntu中&#xff0c;很多时候是自己解压的文件并没有桌面快捷方式&#xff0c;需要自己找到对应的目录的执行文件手动打开&#xff0c;很麻烦 而只需要在 /usr/share/applications 中创建自定义的desktop文件就能自动复制到桌面 二. 添加方法 创建desk…...

编程日记 2025/9/21 12:53:58

教程：使用 Vue 3 和 arco 实现表格合并

1. 功能概述 本教程将介绍如何使用 Vue 3 和 arco 组件库实现表格合并功能。具体来说&#xff0c;我们会根据表格数据中的某个字段&#xff08;如 type&#xff09;对表格的某一列&#xff08;如入库类型列&#xff09;进行合并&#xff0c;同时将质检说明列合并为一列。 2. …...

编程日记 2025/9/19 10:14:54

【MySQL数据库】Ubuntu下的mysql

目录 1&#xff0c;安装mysql数据库 2&#xff0c;mysql默认安装路径 3&#xff0c;my.cnf配置文件? 4&#xff0c;mysql运用的相关指令及说明 5&#xff0c;数据库、表的备份和恢复 mysql是一套给我们提供数据存取的&#xff0c;更加有利于管理数据的服务的网络程序。下…...

编程日记 2025/9/13 13:54:36

Java实现MinIO上传PDF文件并配置浏览器在线打开而非下载

在Minio中上传PDF文件后&#xff0c;通常文件的访问方式&#xff08;即URL&#xff09;是配置为允许下载文件的&#xff0c;因为大多数Web服务器和存储服务默认将PDF文件视为应下载的内容类型&#xff08;Content-Type: application/pdf&#xff09;。但是&#xff0c;如果你想…...

编程日记 2025/9/22 15:40:30

CSV格式和普通EXCEL格式文件的区别

CSV 文件&#xff08;.csv&#xff09; 普通的 Excel 文件&#xff08;.xlsx 或 .xls) 主要体现在 文件格式、数据存储、功能支持 等方面: 文件格式 比较项CSV 文件 (.csv)Excel 文件 (.xlsx/.xls)文件类型纯文本文件二进制或 XML 格式数据分隔逗号&#xff08;,&#xff09…...

编程日记 2025/9/19 8:26:53

安卓基础（持续更新的笔记）

为什么要这样&#xff1a; // 创建请求体RequestBody body RequestBody.create(MediaType.parse("application/json; charsetutf-8"),jsonObject.toString()); jsonObject 就包含了一个 JSON 数据&#xff0c;它其实就是&#xff1a; {"name": "张…...

编程日记 2025/9/20 4:11:16

大模型Deepseek的使用_基于阿里云百炼和Chatbox

目录 前言1. 云服务商2. ChatBox参考 前言 上篇博文中探索了&#xff08;本地&#xff09;部署大语言模型&#xff0c;适合微调、数据高隐私性等场景。随着Deepseek-R1的发布&#xff0c;大语言模型的可及性得到极大提升&#xff0c;应用场景不断增加&#xff0c;对高可用的方…...

编程日记 2025/9/21 14:30:18

数学建模基础训练-1：概念解析

文章目录 数学建模基础训练-1&#xff1a;概念解析问题一&#xff1a;如何找到“概念”&#xff1f;问题二&#xff1a;如何全面理解概念的基础含义&#xff1f;问题三&#xff1a;如何深刻理解概念并作出创新点发掘&#xff1f;实际举例问题一 :研究并给出寒假开学某大学返校交…...

编程日记 2025/9/21 13:54:16

【mybatis】基本操作：详解Spring通过注解和XML的方式来操作mybatis

mybatis 的常用配置 配置数据库连接 #驱动类名称 spring.datasource.driver-class-namecom.mysql.cj.jdbc.Driver #数据库连接的url spring.datasource.urljdbc:mysql://127.0.0.1:3306/mybatis_test characterEncodingutf8&useSSLfalse #连接数据库的名 spring.datasourc…...

编程日记 2025/9/22 2:51:12

联邦学习中的“参数聚合“机制详解：医疗数据隐私保护的技术实现路径

一、技术原理&#xff1a;参数聚合的数学本质 1.1 核心数学公式 联邦平均算法&#xff08;FedAvg&#xff09;&#xff1a; \theta_{global}^{t1} \sum_{k1}^K \frac{n_k}{N} \theta_k^t其中&#xff1a; K K K&#xff1a;参与本轮训练的客户端数量 n k n_k nk​&#xff…...

编程日记 2025/9/11 21:20:42

LVS 负载均衡集群（NAT模式）

一、环境准备 四台主机&#xff08;一台 LVS、两台 RS、一台客户端&#xff09; 注意每个虚拟机都需要关闭防火墙和 selinux 1.1.LVS 主机 LVS 主机&#xff08;两块网卡&#xff09; 第一块&#xff1a;NAT模式&#xff08;内网&#xff09; 第二块&#xff1a;添加网卡&am…...

编程日记 2025/9/20 22:09:31

Rocky Linux系统修改网卡全攻略

Rocky Linux系统修改网卡全攻略 Rocky Linux系统修改网卡全攻略一、了解网卡相关知识二、查看当前网卡配置（一）使用ip命令（二）使用ifconfig命令（需安装）三、修改网卡配置文件（一）修改IP地址（二）修改网关和DNS服务器（三）保存并退出配置文件四、重启网络服务使配置生…...

编程日记 2025/9/22 5:20:52