当前位置：首页 > news >正文

【hive】hive内存dump导出hprof文件

news 来源：原创 2025/7/22 12:37:18

使用jmap -dump:live,format=b,file=命令
hive-metastore-heap-eval.sh文件

# if want hiveserver2 ,should grep "org.apache.hive.service.server.HiveServer2"
# get pid
pid=`ps -ef | grep "org.apache.hadoop.hive.metastore.HiveMetaStore" | grep "java " | awk -F" " '{print $2}'`
echo "print heap info"
jmap -heap $pid
echo ""# echo "print histo"
# jmap -histo $pid
# echo ""# echo "print finalizer"
# jmap -finalizerinfo $pid
# echo ""crt=`date "+%Y-%m-%d %H:%M:%S"` 
tsp=`date -d "$crt" +%s`
file="hive-heaplive-${tsp}.hprof"
echo "file path ${file}"
# rm -rf ${file}
jmap -dump:live,format=b,file=${file} $pid
# use none live command would lead to pause of hive 
# jmap -dump:format=b,file=heap.hprof $pid
ls -lh ${file}

【hive】hive内存dump导出hprof文件

使用jmap -dump:live,formatb,file命令 hive-metastore-heap-eval.sh文件 # if want hiveserver2 ,should grep "org.apache.hive.service.server.HiveServer2" # get pid pidps -ef | grep "org.apache.hadoop.hive.metastore.HiveMetaStore" | grep &qu…...

编程日记 2025/7/22 12:37:18

专题讨论3：基于图的基本原理实现走迷宫问题

问题描述迷宫通常以二维矩阵形式呈现，矩阵中的元素用 0 和 1 表示，其中 0 代表通路，1 代表墙壁。存在特定的起点和终点坐标，目标是从起点出发，寻找一条能够到达终点的路径。实现思路将迷宫中的每个可通行单元格…...

编程日记 2025/7/21 22:03:34

Linux基础第四天

系统之间文件共享想要实现两个不同的系统之间实现文件共享，最简单的一种方案就是设置VMware软件的共享文件夹，利用共享文件夹可以实现linux系统和windows系统之间的文件共享，这样就可以实现在windows系统上编辑程序，然后在linux系…...

编程日记 2025/7/22 17:30:59

eNSP中单臂路由器配置完整实验及命令解释

单臂路由器（Router on a Stick）是一种通过单个物理接口处理多个VLAN间路由的解决方案单臂路由器通过以下方式工作： 交换机端口配置为Trunk模式，允许多个VLAN流量通过路由器子接口为每个VLAN创建虚拟接口每个子接口配置对应VLAN…...

编程日记 2025/7/19 10:18:56

TeaType 奶茶性格占卜机开发记录：一场俏皮的 UniApp 单页奇遇

我正在参加CodeBuddy「首席试玩官」内容创作大赛，本文所使用的 CodeBuddy 免费下载链接：腾讯云代码助手 CodeBuddy - AI 时代的智能编程伙伴最近我突发奇想，想用 UniApp 做一个轻松又俏皮的小工具，叫做「TeaType 奶茶性格占卜机」…...

编程日记 2025/7/23 1:17:21

AI神经网络降噪 vs 传统单/双麦克风降噪的核心优势对比

1. 降噪原理的本质差异对比维度传统单/双麦克风降噪AI神经网络降噪技术基础基于固定规则的信号处理（如谱减法、维纳滤波）基于深度学习的动态建模（DNN/CNN/Transformer）噪声样本依赖预设有限噪声类型训练数据覆盖数十万种真实环境…...

编程日记 2025/7/22 20:33:41

【Nginx学习笔记】：Fastapi服务部署单机Nginx配置说明

服务部署单机Nginx配置说明服务.conf配置文件： upstream asr_backend {server 127.0.0.1:8010; }server {listen 80;server_name your_domain.com;location / {proxy_pass http://localhost:8000;proxy_set_header Host $host;proxy_set_header X-Real-IP $remot…...

编程日记 2025/7/20 16:06:39

JAVA Web 期末速成

一、专业术语及名词 1. Web 的特点定义：web 是分布在全世界，基于 HTTP 通信协议，存储在 Web 服务器中的所有相互链接的超文本集 Web 是一种分布式超媒体系统Web 是多媒体化和易于导航的Web 与平台无关Web 是动态、交互的 2. TCP/IP 结…...

编程日记 2025/7/17 3:58:29

iOS：重新定义移动交互，引领智能生活新潮流

在当今智能手机与移动设备充斥的时代，操作系统作为其 “灵魂”，掌控着用户体验的方方面面。iOS 系统，这一由苹果公司精心雕琢的杰作，自诞生起便以独特魅力与卓越性能，在移动操作系统领域独树一帜，深刻影响着…...

编程日记 2025/7/21 16:20:11

LabVIEW数据库使用说明

介绍LabVIEW如何在数据库中插入记录以及执行 SQL 查询，适用于对数据库进行数据管理和操作的场景。借助 Database Connectivity Toolkit，可便捷地与指定数据库交互。各 VI 功能详述左侧 VI 功能概述：实现向数据库表中插入数据的操作。当输入…...

编程日记 2025/7/23 8:32:34

Linux多进程写时拷贝物理地址和逻辑地址

如果不采用写时拷贝技术直接fork子进程会发生什么？ 如上图所示橙色为父进程所占内存空间绿色为子进程所占内存空间。如果子进程只是需要做出一点点和父进程不一样的其余和父进程均为相同第一就会出现复制开销比较大；第二占用内存空间所以 …...

编程日记 2025/7/19 13:33:18

在 CentOS 7.9 上部署 node_exporter 并接入 Prometheus + Grafana 实现主机监控

文章目录在 CentOS 7.9 上部署 node_exporter 并接入 Prometheus Grafana 实现主机监控环境说明node_exporter 安装与配置下载并解压 node_exporter创建 Systemd 启动服务验证服务状态验证端口监听 Prometheus 配置 node_exporter 监控项修改 prometheus.yml重新加载 Prometh…...

编程日记 2025/7/21 1:23:48

Java 反射（Reflection）技术

反射是 Java 提供的一种强大机制，允许程序在运行时（Runtime）动态地获取类的信息、操作类的属性和方法。这种能力使得 Java 程序可以突破编译时的限制，实现更灵活的设计。一、反射的核心概念 1. 什么是反射反射是指在程序运行…...

编程日记 2025/7/17 8:44:00

【SpringBoot】从零开始全面解析SpringMVC (三)

本篇博客给大家带来的是SpringBoot的知识点, 本篇是SpringBoot入门, 介绍SpringMVC相关知识. 🐎文章专栏: JavaEE进阶 🚀若有问题评论区见 ❤ 欢迎大家点赞评论收藏分享如果你不知道分享给谁,那就分享给薯条. 你们的支持是我不断创作的动力 . 王子,…...

编程日记 2025/7/23 7:49:35

DeerFlow安装配置及使用案例

DeerFlow安装配置及使用案例简介 DeerFlow项目由字节跳动技术团队发起和主导开发，作为一个开源深度研究框架，于2025年年初正式开源。该项目基于LangStack生态，构建于LangChain与LangGraph的开源技术栈之上，充分利用语言模型…...

编程日记 2025/7/20 21:00:40

吉林省建筑工程专业技术人员职称评审实施办法

吉林省人力资源和社会保障厅吉林省建筑工程专业技术人员职称评审实施办法吉林省建筑工程技术人才之技术员评审条件吉林省建筑工程技术人才之助理工程师评审条件吉林省建筑工程技术人才之工程师评审条件吉林省建筑工程技术人才之高级工程师评审条件吉林省建筑工程技术人才…...

编程日记 2025/7/17 16:11:20

React组件开发流程-03.1

此章先以一个完整的例子来全面了解下React组件开发的流程，主要是以代码为主，在不同的章节中会把重点标出来，要完成的例子如下，也可从官网中找到。 React组件开发流程这只是一个通用流程，在熟悉后不需要完全遵从。 …...

编程日记 2025/7/22 20:37:29

Vue 中 v-model 的三种使用方式对比与实践

在 Vue 3 中，v-model 是组件双向数据绑定的核心特性。随着 Vue 的版本演进，v-model 的使用方式也在不断优化。本文将基于您提供的代码示例，详细分析三种不同的 v-model 实现方式：基础用法、useVModel Hook（vueuse/core…...

编程日记 2025/7/23 8:33:28

Adminer：一个基于Web的轻量级数据库管理工具

Adminer 是一个由单个 PHP 文件实现的免费数据库管理工具，支持 MySQL、MariaDB、PostgreSQL、CockroachDB、SQLite、SQL Server、Oracle、Elasticsearch、SimpleDB、MongoDB、Firebird、Clickhouse 等数据库。 Adminer 支持的主要功能如下： 连接数据库服…...

编程日记 2025/7/22 13:19:31

Linux笔记---内核态与用户态

用户态（User Mode） 权限级别：较低，限制应用程序直接访问硬件或关键系统资源。适用场景：普通应用程序的运行环境。限制：无法执行特权指令（如操作I/O端口、修改内存管理单元配置等&#xff09…...

编程日记 2025/7/16 22:23:03

MFC 编程中 OnInitDialog 函数

核心作用对话框初始化入口 ：创建完成后第一个执行的函数。是对话框的起点。控件操作安全期 ：此时所有控件已创建完成。可以安全地进行控件的初始化、属性设置等操作。界面布局最佳时机 ：窗口显示前完成初始化设置。可以进行布局调整、数据初…...

编程日记 2025/7/23 1:24:37

Java高频面试之并发编程-18

hello啊，各位观众姥爷们！！！本baby今天又来报道了！哈哈哈哈哈嗝🐶 面试官：详细说说synchronized synchronized 是 Java 中实现线程同步的核心关键字，用于解决多线程环境下的资源竞争…...

编程日记 2025/7/22 22:51:07

深入探究AKS Workload Identity

Azure Kubernetes 服务 (AKS) 提供了一项名为 Workload Identity 的强大功能，它可以增强安全性并简化在 Kubernetes 集群中运行的应用程序的身份验证。以下是 Workload Identity 在 AKS 环境中的工作原理概述： AKS 中的 Workload Identity 允许 Pod 无需…...

编程日记 2025/7/10 12:08:48

【MySQL基础】MySQL基础：MySQL基本操作与架构

MySQL学习： https://blog.csdn.net/2301_80220607/category_12971838.html?spm1001.2014.3001.5482 前言： 这里是MySQL学习的第一篇，本篇主要是讲解一些MySQL的基础操作，但这并不是重点，本篇我们主要是要理解MySQL…...

编程日记 2025/7/16 14:46:40

【线下沙龙】NineData x Apache Doris x 阿里云联合举办数据库技术Meetup，5月24日深圳见！

5月24日下午，NineData 将联合 Apache Doris、阿里云一起，在深圳举办数据库技术Meetup。本次技术沙龙聚焦「数据实时分析」与「数据同步迁移」两大核心领域，针对企业数据战略中的痛点，特邀行业资深技术大咖，结合多年技…...

编程日记 2025/7/22 9:51:36

【Unity网络编程知识】Unity的 UnityWebRequest相关类学习

1、UnityWebRequest类介绍 UnityWebRequest是一个unity提供的一个模块化的系统类，用于构成HTTP请求和处理HTTP响应，它主要目标是让unity游戏和Web服务端进行交互，它将之前WWW的相关功能都集成在了其中，所以新版本中都建议使用unit…...

编程日记 2025/7/22 20:44:55

STM32实战指南——DHT11温湿度传感器驱动开发与避坑指南

知识点1【DHT11的概述】 1、概述 DHT是一款温湿度一体化的数字传感器（无需AD转换）。 2、驱动方式通过单片机等微处理器简单的电路连接就能实时采集本地湿度和温度。DHT11与单片机之间采用单总线进行通信，仅需要一个IO口。相对于单片机…...

编程日记 2025/7/20 1:34:54

SVG 与 Canvas 技术调研对比

在画布中进行大量矩形框绘制时，SVG 和 Canvas 都是可行的技术方案，但它们适用于不同的场景，技术特性也有明显区别。下面我从性能、灵活性、可维护性、适用场景等方面做一个系统性的对比，帮助你做出更合适的选择。 &#x1f9e…...

编程日记 2025/7/12 22:16:25

Ubuntu 远程桌面配置指南

概述：本文主要介绍在Ubuntu 22.04中通过VNC实现远程连接的方法。首先需安装图形化界面和VNC工具x11vnc，设置开机启动服务；然后在Windows客户端用VNC Viewer通过局域网IP和端口5900连接。总结：一、VNC配置与安装安装图形化界面在Ubuntu 22.04中需先安装： sudo apt …...

编程日记 2025/7/18 18:58:23

146. LRU 缓存

一、题目二、思路题目要求 O(1) 的平均时间复杂度运行 -> 使用Map空间换时间 Map<Integer, Node>Map 通过 key 直接找到对应节点 getNode(key) -> Node记得只要查过该节点之后就应该把该节点放到最前面 pushFront(Node)put 元素后，在map中添加&…...

编程日记 2025/7/21 8:35:34

微信学习之导航功能

先看这个功能的效果： 然后开始学习吧。一、我们这里用的是vant的Grid控件，首先我们导入： { "usingComponents": {"van-search": "vant/weapp/search/index","my-swiper":"../../components…...

编程日记 2025/7/17 9:24:52

MySQL替换瀚高数据库报错： TO_DAYS（）不存在（APP）

文章目录环境症状问题原因解决方案报错编码环境系统平台：中标麒麟（海光）7,中标麒麟（飞腾）7 版本：4.5 症状 MySQL替换为瀚高数据库进行应用系统适配报错：TO_DAYS（）不…...

编程日记 2025/7/18 12:17:55

FPGA：高速接口JESD204B以及FPGA实现

本文将先介绍JESD204B高速接口的基本概念和特性，然后详细说明如何基于Xilinx Kintex-7系列FPGA实现JESD204B高速接口。一、JESD204B高速接口介绍 JESD204B是由JEDEC（固态技术协会）制定的一种高速串行通信标准，主要用于数据转换器…...

编程日记 2025/7/18 7:47:14

HarmonyOS Navigation组件深度解析与应用实践

HarmonyOS Navigation组件深度解析与应用实践一、组件架构与核心能力 HarmonyOS Navigation组件作为路由导航的根视图容器，采用三层架构设计： 标题层：支持主副标题配置，提供Mini/Free/Full三种显示模式内容层：默认…...

编程日记 2025/7/22 23:13:43

C#中的ThreadStart委托

ThreadStart 委托： ThreadStart 是 .NET 中的一个内置委托类型，表示无参数且无返回值的方法。其定义如下： public delegate void ThreadStart(); 通常用于定义线程的入口方法。 List<ThreadStart>： 这是一个泛型集合&…...

编程日记 2025/7/23 1:22:05

Spring boot 集成 Knife4j

knife4j官网：https://doc.xiaominfo.com/docs/quick-start 1. 引入Knife4j相关依赖  <dependency><groupId>com.github.xiaoymin</groupId><artifactId>knife4j-spring-boot-starter</artifactId><version…...

编程日记 2025/7/21 3:38:14

基于Java在高德地图面查询检索中使用WGS84坐标的一种方法-以某商场的POI数据检索为例

前言随着移动互联网的飞速发展，基于位置的服务（LBS）需求日益增长，越来越多的应用需要从地图中检索特定区域内的地理信息，例如商业场所、公共服务设施等。商场作为城市商业活动的重要载体，其周边的地理信息…...

编程日记 2025/7/19 11:38:59

6K型护套连接器DLJ0601(2000)-00

6K型护套连接器DLJ0601(2000)-00简介 6K型护套连接器DLJ0601(2000)-00是一种用于电气连接的组件，广泛应用于工业设备、通信系统和电子设备中。该连接器设计紧凑，具有高可靠性和耐用性，适用于多种环境条件下的电气连接需求。主要特点高可…...

编程日记 2025/7/20 21:09:54

Hexo的Next主题的Config文件内方便修改的参数（Chat-Gpt）

这是对 Hexo 的 Next 主题 _config.yml 文件各部分配置项的中文解释，帮助你更方便地进行定制： 🚀 核心设置 cache / minify cache.enable: 启用缓存，加快生成速度。minify: 是否压缩生成的 HTML/CSS/JS。 custom_file_path 自…...

编程日记 2025/7/22 17:15:46

【three】给立方体的每个面加载不同贴图

效果图： 主要代码： initCube() {let _this thisconst geometry new Three.BoxGeometry(1, .3, .5)let TextureLoader new Three.TextureLoader()let mater1TextureLoader.load(require(/assets/images/bg2.jpg),function (texture){console.log(tex…...

编程日记 2025/7/19 10:35:45

vscode怎么关闭自动定位文件

关闭自动定位文件功能方式1 在设置中搜索: explorer.autoReveal 方式2 直接在settings.json中增加"explorer.autoReveal": false 添加类似jetbrains IDE的文件定位功能可以直接安装插件市场搜索niushuaibing.vs-location, 安装后会有文件定位按钮, 点击后即可…...

编程日记 2025/7/21 10:11:44

2025-5-19Vue3快速上手

1、toRefs和toRef 当解构一个响应式对象（如 reactive 创建的对象）时，直接解构会失去响应性，此时可用 toRefs或toRef 保持响应性 toRef 的核心作用是将对象的属性转换为 ref，保持与原属性的双向绑定，无论原…...

编程日记 2025/7/17 10:49:06

HDMI 屏幕电脑HDMI HDMI采集卡的关系

一、HDMI接口方向性原理普通设备的HDMI接口方向： 电脑的HDMI接口：无论是显卡还是主板上的HDMI，均为输出端（信号源），只能向外发送视频信号，无法接收输入信号。显示器的HDMI接口：均…...

编程日记 2025/7/17 16:11:11

JESD204 ip核使用与例程分析（二）

JESD204 ip核使用与例程分析（二） JESD204时钟方案专用差分时钟对例程分析jesd204_0_transport_layer_demapperjesd204_0_sig_chkjesd204_0_clockingjesd204_0 ip核port寄存器AXI-LITE寄存器配置jesd204_phy ip核JESD204时钟方案图3-1所示为最通用、灵活的时钟解决方案。在图…...

编程日记 2025/7/16 23:09:48

如何使用VCS+XA加密verilog和spice网表

如果要交付verilog，但是需要对方进行VCS仿真，那么可以用以下方法： 一、基于编译指令的局部加密适用场景：需精确控制加密范围（如仅加密核心算法或敏感逻辑）。实现步骤： 代码标注…...

编程日记 2025/7/22 14:44:54

Grafana之Dashboard（仪表盘）

在前面的小节中介绍了Grafana中4中常用的可视化面板的使用，通过在面板中使用PromQL表达式，Grafana能够方便的将Prometheus返回的数据进行可视化展示。例如，在展示主机CPU使用率时，我们使用了如下表达式： 1 - (avg(ira…...

编程日记 2025/7/20 19:25:04

AOSP 中常见的键值对存储方式全解析（适用于系统开发与应用开发）

在 Android 系统开发（AOSP）中，键值对（Key-Value）存储是一种基础且广泛使用的数据持久化方式。从系统属性、用户设置，到应用配置，都依赖于这种结构的存储方式。本文将全面梳理 AOSP 中主流的键值…...

编程日记 2025/7/17 13:16:03

集合进阶2

Java不可变集合、Stream流与方法引用深度解析一、不可变集合（Immutable Collections）进阶指南 1.1 不可变集合核心特性防御性编程：防止外部修改数据（如传递集合给第三方库时）线程安全：天然支持多线程读…...

编程日记 2025/7/14 18:01:26

eMMC深度解析：嵌入式多媒体卡的硬件电路设计要点

一、eMMC 技术深度解析 1.定义与背景 eMMC（Embedded Multi Media Card）是一种专为嵌入式系统设计的非易失性存储解决方案，它将 NAND 闪存、主控芯片和接口协议封装在一个 BGA（Ball Grid Array）封装中。其核心目标是简…...

编程日记 2025/7/23 6:26:57

【SPIN】PROMELA语言编程入门同步机制（SPIN学习系列--4）

同步机制 PROMELA 不包含信号量、锁或监控器等常见的同步原语，而是通过语句的**可执行性（executability）**概念来建模同步机制。计算机系统的架构限制了同步机制的设计：本章主要介绍适用于共享内存系统的同步机制，第7…...

编程日记 2025/7/23 7:01:26

相关文章：