当前位置：首页 > news >正文

Hive集群安装部署

news 来源：原创 2025/5/17 4:26:17

上传安装包并解压

cd /ddhome/tools 
tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /ddhome/bin/
cd /ddhome/bin/ 
mv apache-hive-3.1.2-bin hive

注意：如果Hive要使用Spark计算引擎，需要重新编译Hive，这里已经编译完毕

修改配置文件

cd /ddhome/bin/hive/conf
touch hive-site.xml

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!--Licensed to the Apache Software Foundation (ASF) under one or morecontributor license agreements.  See the NOTICE file distributed withthis work for additional information regarding copyright ownership.The ASF licenses this file to You under the Apache License, Version 2.0(the "License"); you may not use this file except in compliance withthe License.  You may obtain a copy of the License athttp://www.apache.org/licenses/LICENSE-2.0Unless required by applicable law or agreed to in writing, softwaredistributed under the License is distributed on an "AS IS" BASIS,WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.See the License for the specific language governing permissions andlimitations under the License.
--><configuration>
<property><name>javax.jdo.option.ConnectionURL</name><value>jdbc:mysql://ddavc:3306/hive?createDatabaseIfNotExist=true&amp;useSSL=false&amp;useUnicode=true&amp;characterEncoding=UTF-8</value><description>JDBC connect string for a JDBC metastore</description>
</property>
<property><name>javax.jdo.option.ConnectionDriverName</name><value>com.mysql.jdbc.Driver</value><description>Driver class name for a JDBC metastore</description>
</property>
<property><name>javax.jdo.option.ConnectionUserName</name><value>hive</value><description>username to use against metastore database</description>
</property>
<property><name>javax.jdo.option.ConnectionPassword</name><value>HzBaiyu0571!</value><description>password to use against metastore database</description>
</property>
<property><name>datanucleus.autoCreateSchema</name><value>true</value>
</property>
<property><name>datanucleus.autoCreateTables</name><value>true</value>
</property>
<property><name>datanucleus.autoCreateColumns</name><value>true</value>
</property>
<!-- 设置 hive仓库的HDFS上的位置 -->
<property><name>hive.metastore.warehouse.dir</name><value>/user/hive/warehouse</value><description>location of default database for the warehouse</description>
</property>
<!--资源临时文件存放位置 -->
<property><name>hive.downloaded.resources.dir</name><value>/ddhome/bin/hive/tmp/resources</value><description>Temporary local directory for added resources in the remote file system.</description></property><!-- Hive在0.9版本之前需要设置hive.exec.dynamic.partition为true, Hive在0.9版本之后默认为true -->
<property><name>hive.exec.dynamic.partition</name><value>true</value></property>
<property><name>hive.exec.dynamic.partition.mode</name><value>nonstrict</value></property>
<!-- 修改日志位置 -->
<property><name>hive.exec.local.scratchdir</name><value>/ddhome/bin/hive/tmp/logs</value><description>Local scratch space for Hive jobs</description>
</property>
<property><name>hive.querylog.location</name><value>/ddhome/bin/hive/tmp/logs</value><description>Location of Hive run time structured log file</description>
</property>
<property><name>hive.server2.logging.operation.log.location</name><value>/ddhome/bin/hive/tmp/logs</value><description>Top level directory where operation tmp are stored if logging functionality is enabled</description>
</property>
<!-- Hiveserver2已经不再需要hive.metastore.local这个配置项了(hive.metastore.uris为空，则表示是metastore在本地，否则就是远程)远程的话直接配置hive.metastore.uris即可 -->
<property><name>hive.metastore.uris</name><value>thrift://ddavb:9083</value><description>Thrift URI for the remote metastore. Used by metastore client to connect to remote metastore.</description>
</property>
<property><name>hive.server2.thrift.bind.host</name><value>ddavc</value>
</property>
<property><name>hive.server2.thrift.port</name><value>10000</value>
</property>
<property><name>hive.server2.thrift.http.port</name><value>10001</value>
</property>
<property><name>hive.server2.thrift.http.path</name><value>cliservice</value>
</property>
<!-- HiveServer2的WEB UI -->
<property><name>hive.server2.webui.host</name><value>ddavc</value>
</property>
<property><name>hive.server2.webui.port</name><value>10002</value>
</property>
<property><name>hive.scratch.dir.permission</name><value>755</value>
</property>
<!-- 下面hive.aux.jars.path这个属性里面你这个jar包地址如果是本地的记住前面要加file://不然找不到, 而且会报org.apache.hadoop.hive.contrib.serde2.RegexSerDe错误 -->
<!--
<property><name>hive.aux.jars.path</name><value>file:///home/centos/soft/spark/lib/spark-assembly-1.6.0-hadoop2.6.0.jar</value>
</property>
-->
<property><name>hive.server2.enable.doAs</name><value>false</value>
</property>   
<property><name>hive.auto.convert.join</name><value>false</value>
</property>
<property><name>spark.dynamicAllocation.enabled</name><value>true</value><description>动态分配资源</description>  
</property>
<!-- 使用Hive on spark时,若不设置下列该配置会出现内存溢出异常 -->
<!--
<prioperty><name>spark.driver.extraJavaOptions</name><value>-XX:PermSize=128M -XX:MaxPermSize=512M</value>
</property>
-->
<!-- 关闭元数据存储授权  -->
<property><name>hive.metastore.event.db.notification.api.auth</name><value>false</value>
</property><!-- 关闭元数据存储版本的验证 -->
<property><name>hive.metastore.schema.verification</name><value>false</value>
</property>
</configuration>

注意：
‒ 注意该配置文件中的数据库的相关配置信息
‒ 如果使用的mysql8，则需要更换mysql链接jar包以及将 com.mysql.jdbc.Driver 修改为 com.mysql.cj.jdbc.Driver

同步hadoop配置文件

cd /ddhome/bin/hadoop/etc/hadoop
cp -r core-site.xml hdfs-site.xml yarn-site.xml /ddhome/bin/hive/conf/

同步Mysql依赖

cd /ddhome/tools/
cp mysql-connector-java-5.1.37.jar /ddhome/bin/hive/lib/

在Mysql中创建用户和数据库

-- 创建数据库
create database if not exists hive;
-- 创建用户
grant all privileges on hive.* to 'hive'@'%' identified by 'HzBaiyu0571!';
alter database hive character set latin1;
-- 刷新配置
flush privileges;

分发文件

cd /ddhome/bin/
scp.sh hive

数据初始化

## 在ddavc中执行初始化数据库命令
schematool -initSchema -dbType mysql

启动相关进程

# 注意：在启动hive进程的时候需确保hadoop相关进程已经启动
# 在ddavc启动相关进程
nohup hive --service metastore &
nohup hive --service hiveserver2 &
# 查看进程
ps -ef | grep metastore
ps -ef | grep hiveserver2

Hive on Spark 配置

前置条件：Spark安装包需重新编译再上传到服务器中

Spark安装

‒ 在Hive所有节点中部署Spark
‒ 上传并解压安装包

cd /ddhome/tools/
tar -zxvf spark-3.0.0-bin-hadoop3.2.tgz -C /ddhome/bin/
mv spark-3.0.0-bin-hadoop3.2 spark

在hive中创建spark的配置文件

cd /ddhome/bin/hive/conf/
touch sparkdefaults.conf

##添加如下内容（在执行任务时，会根据如下参数执行） 
spark.master	           yarn
spark.eventLog.enabled   true
spark.eventLog.dir       hdfs://masters/spark-history
spark.executor.memory    600m
spark.driver.memory      1g

在Hdfs文件文件系统中，创建存储历史日志

hadoop fs -mkdir /spark-history

上传Spark纯净jar包

cd /ddhome/tools/
tar -zxvf spark-3.0.0-bin-without-hadoop.tgz ./
hadoop fs -mkdir /spark-jars
hadoop fs -put spark-3.0.0-bin-without-hadoop/jars/* /spark-jars

修改hive-site.xml配置文件

<!--Spark 依赖位置（注意：端口号 9000 必须和 namenode 的端口号一致）--> 
<property> <name>spark.yarn.jars</name> <value>hdfs://masters/spark-jars/*</value>
</property>
<!--Hive 执行引擎--> 
<property> <name>hive.execution.engine</name> <value>spark</value>
</property>

重启hive相关进行

kill杀死runjar的相关进程

验证

create table student(id int, name string);
insert into table student values(1,'abc');
-- 若出现 hive on Spark job等字样说明配置成功

Hive集群安装部署

上传安装包并解压 cd /ddhome/tools tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /ddhome/bin/ cd /ddhome/bin/ mv apache-hive-3.1.2-bin hive注意：如果Hive要使用Spark计算引擎，需要重新编译Hive， 这里已经编译完毕修改配置文件 cd …...

编程日记 2025/5/17 4:26:17

卸载干净 IDEA（图文讲解）

目录 1、卸载 IDEA 程序 2、注册表清理 3、残留清理 1、卸载 IDEA 程序点击屏幕左下角 Windows 图标 -> 设置-控制面板->intellij idea 勾选第一栏 Delete IntelliJ IDEA 2022.2 caches and local history，表示同时删除 IDEA 本地缓存以及历史。 Delete I…...

编程日记 2025/5/14 15:21:01

Gitea代码仓服务搭建

特点与优势轻量级：Gitea是一个轻量级的Git服务，提供了快速、稳定的代码托管和协作开发环境。它资源占用低，适合在资源受限的环境中运行。易于安装和部署：Gitea提供了简单易用的安装和部署方式，支持多种安装方式，包括二进制文件、Docker容器等，并提供了详细的文档和配置…...

编程日记 2025/5/16 18:05:42

什么情况会导致JVM退出？

大家好，我是锋哥。今天分享关于【什么情况会导致JVM退出？】面试题。希望对大家有帮助； 什么情况会导致JVM退出？ 1000道互联网大厂Java工程师精选面试题-Java资源分享网 JVM（Java Virtual Machine，Java虚…...

编程日记 2025/5/16 11:46:46

docker pull influxdb mkdir -p /root/influxdb/data docker run -d --name influxdb -p 8086:8086 -v /root/influxdb/data:/var/lib/influxdb influxdb:latest#浏览器登录：http://192.168.31.135:8086，首次登录设置用户名密码：admin/admin1…...

编程日记 2025/5/7 21:09:14

TLS: WebRTC中ThreadManager的线程局部存储

1. 什么是线程局部存储： 线程局部存储（TLS，Thread-Local Storage）： 线程局部存储（TLS）允许每个线程保存一份独立的数据副本，避免多个线程共享数据导致的竞争问题。每个线程可以根…...

编程日记 2025/5/13 17:15:20

[Qt] 万字详解 | 常用控件 | Button | Label | LCD | ProgressBar

目录按钮类控件 1、Push Button 按钮 2、Radio Buttion 单选 click、press、release、toggled 的区别 3、Check Box 复选 4、Tool Button 显示类控件 1、Label 2、LCD Number 3、ProgressBar 4、Calendar Widget 按钮类控件 1、Push Button 按钮概述&#xff1a…...

编程日记 2025/5/11 9:12:19

【数据仓库】hadoop3.3.6 安装配置

文章目录概述下载解压安装伪分布式模式配置hdfs配置hadoop-env.shssh免密登录模式设置初始化HDFS启动hdfs配置yarn启动yarn 概述该文档是基于hadoop3.2.2版本升级到hadoop3.3.6版本，所以有些配置，是可以不用做的，下面仅记录新增操作&#…...

编程日记 2025/5/14 20:37:10

ffmpeg八大开发库

‌FFmpeg八大库‌是指FFmpeg项目中最重要的八个库，它们各自承担不同的功能，共同构成了FFmpeg的强大功能。以下是这八大库的详细介绍： ‌libavcodec‌：负责音频和视频的编解码。它支持多种编解码器，如H.264、AAC、MP3、…...

编程日记 2025/5/16 9:22:34

Uniapp中使用`wxml-to-canvas`开发DOM生成图片功能

Uniapp中使用wxml-to-canvas开发DOM生成图片功能在移动端开发中，生成图片是一个常见需求，例如用于分享海报、生成动态二维码等。在Uniapp框架中，我们可以通过wxml-to-canvas插件轻松实现将DOM转化为图片的功能。本文将详细介绍如何在Uniapp…...

编程日记 2025/4/25 1:44:06

【09】深入解析 Three.js 官网示例：下雪粒子特效与场景渲染的实现（webgpu_compute_particles_snow.html）

引言 Three.js 是一个强大的 JavaScript 库，用于在网页上创建和渲染 3D 场景。本文将深入分析一段 Three.js 官网示例代码，详细解释其实现思路和主要功能代码，帮助读者更好地理解和掌握 Three.js 的应用。官网代码地址：https://g…...

编程日记 2025/5/15 10:45:58

电子价签会是零售界的下一个主流？【新立电子】

电子价签，作为一种能够替代传统纸质标签的数字显示屏，已经在零售行业中展现出其巨大的潜力。它具有实时更新、集中管理、高效节能的特点，实现价格的实时更新，大大减少更新价格的工作量和时间。为消费者带来更加便捷、准确的购物体…...

编程日记 2025/5/5 6:09:21

uniapp——App下载文件，保存、打开文件（二）

uniapp如何下载文件、保存、打开文件时光荏苒，2024即将过去！ 迈向2025，祝大家新的一年工作顺利、万事如意，少一点BUG，涨一点工资…↖(ω)↗ 文章目录 uniapp如何下载文件、保存、打开文件下载文件保存并打开文件处理 …...

编程日记 2025/5/16 3:05:08

如何轻松关闭 iPhone 上的 HEIC [HEIC 图像技巧]

您是否正在为关闭 iPhone 上的 HEIC 而烦恼？你不是一个人; Apple 的首选图像文件格式仍可能存在一些兼容性问题。当您与某人共享照片或尝试在Windows计算机上打开图像时，就会出现此问题。幸运的是，Apple 使关闭 HEIC iPhone 变得更加容易。 …...

编程日记 2025/5/12 11:35:53

库伦值自动化功耗测试工具

1. 功能介绍 PlatformPower工具可以自动化测试不同场景的功耗电流，并可导出为excel文件便于测试结果分析查看。测试同时便于后续根据需求拓展其他自动化测试用例。主要原理：基于文件节点 coulomb_count 实现，计算公式：电流&…...

编程日记 2025/5/16 0:32:20

[paddle] 非线性拟合问题的训练

利用paddlepaddle建立神经网络，模拟有限个数据的非线性拟合本文仍然考虑 f ( x ) sin ⁡ ( x ) x f(x)\frac{\sin(x)}{x} f(x)xsin(x) 函数在区间 [-10,10] 上固定数据的拟合。 import paddle import paddle.nn as nn import numpy as np import matplotlib.…...

编程日记 2025/5/15 8:19:38

Vue2: table加载树形数据的踩坑记录

table中需要加载树形数据，如图：官网给了两个例子，且每个例子中的tree-props都是这么写的： :tree-props="{children: children, hasChildren: hasChildren}" 给我一种错觉，以为数据结构中要同时指定children和hasChildren字段，然而，在非懒加载模式下，数据结…...

编程日记 2025/5/14 22:07:44

全国计算机设计大赛大数据主题赛（和鲸赛道）经验分享

全国计算机设计大赛大数据主题赛（和鲸赛道）经验分享这是“和鲸杯”辽宁省普通高等学校本科大学生计算机设计竞赛启动会汇报—大数据主题赛的文档总结。想要参加2025年此比赛的可以借鉴。一、关于我人工智能专业计赛相关奖项： 2022年计…...

编程日记 2025/5/14 9:44:14

C# 设计模式（行为型模式）：责任链模式

C# 设计模式（行为型模式）：责任链模式责任链模式（Chain of Responsibility Pattern）是一种行为型设计模式，用于让多个对象有机会处理同一个请求，避免请求发送者与接收者之间的耦合。它通过将请…...

编程日记 2025/5/11 14:22:46

人工智能之机器学习算法

所有的机器学习算法都是要优化的，优化的必要条件是确定优化的目标函数(损失函数)，目标函数是根据实际问题(数据)转成的数学公式。一.线性回归原理推导 （1）回归问题概述在机器学习的有监督算法中，分类与回归二种情…...

编程日记 2025/5/15 0:44:21

17爬虫:关于DrissionPage相关内容的学习01

概述前面我们已经大致了解了selenium的用法，DerssionPage同selenium一样，也是一个基于Python的网页自动化工具。 DrissionPage既可以实现网页的自动化操作，也能够实现收发数据包，也可以把两者的功能合二为一。 DressionPage的…...

编程日记 2025/5/11 6:44:30

Ubuntu如何安装jdk并切换到不同的jdk版本

参考:https://www.cnblogs.com/Jakson/articles/4615768.html 摘要 ：因为ubuntu 会自带open-jdk预装在系统内,当我们需要在 ubuntu下安装jdk 的时候 ,发现即使配置好环境变量后输入 java -version 版本还是依然没有发生变化,我们需要以下2个步骤切换/usr/local/…...

编程日记 2025/5/13 2:05:29

Python基础语法（上）

目录一、print函数及常量表达式 1.print函数 2.常量表达式二、变量 1.定义变量的规则 2.python的动态类型特性 3.字符串三、注释四、input函数 1.input函数 2.变量类型转换五、运算符 1.算数运算符 2.关系运算符 （1）整形的比较 &am…...

编程日记 2025/5/15 10:59:19

k8s系列--docker拉取镜像导入k8s的containerd中

# 确认一下当前集群中正在运行的 Pod 和命名空间 kubectl get pods -A# 示例一：拉取并导入 CoreDNS 镜像 docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/coredns:v1.11.1 docker save registry.cn-hangzhou.aliyuncs.com/google_containers/cor…...

编程日记 2025/5/16 0:59:34

深入理解 Android 中的 ComponentInfo

深入理解 Android 中的 ComponentInfo 在 Android 开发中，ComponentInfo 是一个非常重要的类，它用于描述应用程序中的组件信息，包括 Activity、Service、BroadcastReceiver 和 ContentProvider。理解 ComponentInfo 的结构和使用方式&#x…...

编程日记 2025/5/11 2:09:36

阿里云 ECS 服务器绑定多个公网IP

阿里云 ECS 服务器绑定多个公网IP 一、弹性公网IP绑定ECS服务器单台ECS一般只能直接绑定一个弹性公网IP，但是可以绑定多张弹性网卡，如果把弹性公网IP绑定到弹性网卡上，那么单台ECS就能间接绑定多个弹性公网IP。但有的服务器系统镜像可能不…...

编程日记 2025/5/11 18:02:17

模块化通讯管理机在物联网系统中的应用

安科瑞刘鸿鹏摘要随着能源结构转型和智能化电网的推进，电力物联网逐渐成为智能电网的重要组成部分。本文以安科瑞ANet系列智能通信管理机为例，探讨其在电力物联网中的应用，包括数据采集、规约转换、边缘计算、远程控制等技术实践&#…...

编程日记 2025/5/14 23:11:35

Kafka Offset explorer使用

Kafka集群配置好以后以后运维这边先用工具测试一下，便于rd展开后续的工作，本地调试时一般使用Offset explorer工具进行连接使用SASL(Simple Authentication and Security Layer)验证方式使用SCRAM-SHA-256(Salted Challenge Response Authentication…...

编程日记 2025/5/15 17:01:26

小程序学习07—— uniapp组件通信props和$emit和插槽语法

目录一父组件向子组件传递消息 1.1 props （a）传递静态或动态的 Prop （b）单向数据流二子组件通知父组件 2.1 $emit （a）定义自定义事件 （b）绑定自定义事件三插槽语法…...

编程日记 2025/5/16 0:27:49

行为模式1.模板方法模式

行为型模式模板方法模式（Template Method Pattern）命令模式（Command Pattern）迭代器模式（Iterator Pattern）观察者模式（Observer Pattern）中介者模式（Mediator Pattern…...

编程日记 2025/4/27 1:50:03

【模型】Qwen2-VL 服务端UI

1. 前言最近在测试VLM模型，发现官方的网页demo，代码中视频与图片分辨率可能由于高并发设置的很小，导致达不到预期效果，于是自己研究了一下，搞了一个简单的前端部署，自己在服务器部署了下UI界面&#xff0…...

编程日记 2025/5/16 20:33:41

ImageNet 2.0？自动驾驶数据集迎来自动标注新时代

引言： 3DGS因其渲染速度快和高质量的新视角合成而备受关注。一些研究人员尝试将3DGS应用于驾驶场景的重建。然而，这些方法通常依赖于多种数据类型，如深度图、3D框和移动物体的轨迹。此外，合成图像缺乏标注也限制了其在下游任务中的…...

编程日记 2025/5/14 17:20:33

京东一面：MySQL 主备延迟有哪些坑？主备切换策略

作为一名开发同学，大家对 MySQL 一定不陌生，像常见的事务特性、隔离级别、索引等也都是老生常谈。今天，我们就来聊个深度话题，关于 MySQL 的高可用一、什么是高可用？ 维基百科定义： 高可用性&#x…...

编程日记 2025/5/15 5:44:11

Linux(Ubuntu24.04)安装Eigen3库

本次安装Eigen3是在WSL2的Ubuntu24.04环境下进行。 Eigen3是一个C模板库，用于线性代数、矩阵运算和数值计算。它提供了一组高性能的矩阵和向量操作，以及常用的线性代数算法，如矩阵分解、特征值求解和最小二乘解等。 1、安装Eigen3 有两种安…...

编程日记 2025/5/7 9:07:37

ABP框架8——仓储的作用及其基础Demo

一、使用仓储的好处 1.提高CRUD接口复用性2.解耦业务逻辑（BLL）和增删改查（CRUD），换ORM特别方便，不需要改应用层，直接改仓储层3.做复杂查询4.事务支持二、Demo public class BookRepository …...

编程日记 2025/5/11 17:44:03

【Multisim用74ls92和90做六十进制】2022-6-12

缘由Multisim如何用74ls92和90做六十进制-其他-CSDN问答 74LS92、74LS90参考...

编程日记 2025/5/4 8:52:21

利用KPaaS平台提升企业审批流程的透明度

企业的审批流程不仅影响决策效率，还直接关联到组织的透明度和运营效果。传统的审批流程通常由多个环节和系统构成，每一个环节都可能存在信息不对称的现象。例如，某一审批节点的负责人可能并不清楚当前的审批状态，而在其他环节&…...

编程日记 2025/5/8 12:22:06

Python 数据可视化的完整指南

目录一、为什么选择 Python 进行数据可视化？二、常用 Python 可视化库及其特点三、常用图表类型及其代码示例折线图：用于展示数据随时间或其他连续变量的变化趋势。柱状图：用于比较不同类别的数据大小。散点图：用于展示两个变量之间的关系，并发现数据中的模式…...

编程日记 2025/5/13 7:16:53

ZYNQ初识7（zynq_7010）RAM_IP核

学习汇总正点原子bi站教学视频。但由于目前的学习板PL端缺乏时钟晶振，所以需要从PS端调用时钟供给PL端使用，也就造成顶层文件的设置出现一些问题，在IP核创建调用和例化过程中一些功能会受到限制，所以以下仅作汇总参考。 zynq_7000…...

编程日记 2025/5/16 6:50:34

.e01, ..., .e0n的分卷压缩包怎么解压

用BandiZip，这些分卷压缩中还有一个.exe的文件，这个不是可执行文件，是一个解压缩的开头。安装好bandiZip后，右键这个.exe文件点击打开就是开始解压了： 最后解压后是这些。然后一个个再次解压....

编程日记 2025/4/27 2:10:05

linux网络管理

网络配置文件网卡信息文件 :::color3 /etc/sysconfig/network-scripts ::: 配置描述DEVICE网卡设备名-必填BOOTPROTO必填：none,static(静态 IP),dhcp(动态 IP)HWADDRMAC 地址NM_CONTROLLED是否启用Network Manager图形管理工具，建议 noONBOOT是否默认…...

编程日记 2025/5/16 21:54:06

宽带、光猫、路由器、WiFi、光纤之间的关系

1、宽带（Broadband） 1.1 宽带的定义宽带指的是一种高速互联网接入技术，通常包括ADSL、光纤、4G/5G等不同类型的接入方式。宽带的关键特点是能够提供较高的数据传输速率，使得用户可以享受到稳定的上网体验。 1.2 宽带的作用宽带是…...

编程日记 2025/5/15 17:27:02

Momentum Contrast for Unsupervised Visual Representation Learning论文笔记

文章目录论文地址动量队列对比学习的infoNCE loss为什么需要动量编码器对比学习moco方法中的动量Encoder为什么不能与梯度Encoder完全相同为什么动量编码器和梯度编码器不能完全相同？总结： 我理解，正负样本应该经过同一个encoder&#xff0c…...

编程日记 2025/5/13 4:21:17

linux-26 文件管理(四）install

说一个命令，叫install，man install，install是什么意思？安装，install表示安装的意思，那你猜install是用来干什么的？猜一猜干什么的？安装软件，安装第三方软件，错…...

编程日记 2025/5/14 4:14:03

day-104 组合总和 Ⅳ

思路动态规划解题过程假设dfs(target)表示组成target的组合数，可得转换方程dfs(target)dfs(target-nums[0])dfs(target-nums[1])…以此类推注意：nums[i]需要小于等于当前的target Code class Solution {public int combinationSum4(int[] nums, i…...

编程日记 2025/5/3 20:28:03

Gitlab-runner 修改默认的builds_dir并使用custom_build_dir配置

gitlab-runner 修改默认的builds_dir并使用custom_build_dir配置 1. 说明2. 实操（以docker执行器为例）2.1 修改默认的builds_dir2.1.1 调整gitlab-runner的配置文件2.1.2 CI文件 2.2 启用custom_build_dir2.2.1 调整gitlab-runner的配置文件2.2.2 CI文件…...

编程日记 2025/5/13 8:46:24

代码随想录算法训练营day21

代码随想录算法训练营 —day21 文章目录代码随想录算法训练营前言一、669. 修剪二叉搜索树递归法迭代法二、108.将有序数组转换为二叉搜索树递归法迭代法三、538.把二叉搜索树转换为累加树递归法总结前言今天是算法营的第21天，希望自己能够坚持下来&#xf…...

编程日记 2025/5/13 2:04:03

苹果系统MacOS下ObjectC建立的App程序访问opencv加载图片程序

前言苹果系统下使用opencv感觉还是有些不太方便，总是感觉有点受到限制。本博客描述的是在MacOS下建立App程序然后调用opencv显示图片时出现的一些问题并最后解决的一个过程。一、程序的建立选择程序的类型： 选择界面模式和编程语言： 其余…...

编程日记 2025/5/11 21:49:07

滴滴工作流引擎Turbo与logicFlow研究

目录 logicFlow turbo 工作流引擎很多，也都提供了前端UI库，但是太过于冗杂了，元数据表都几十个，logincFlow和Turbo的组合提供了轻量化方式，turbo后端代码只有5个元数据表，logicFlow也提供了bpm的相关扩展功能，但缺点是turbo社区不活跃，logicFlow个人认为跟echarts这种…...

编程日记 2025/5/16 7:16:41

快速将索尼手机联系人导出为 HTML 文件

我想将 Sony Xperia 手机上的联系人导出到计算机上进行备份，并在需要时进行编辑。这可以做到吗？如何做到？作为助手我需要下载什么工具吗？ 当您的 Android 手机上存储了如此多的重要联系人，而您又不想丢失它们时&#…...

编程日记 2025/5/14 5:41:46