当前位置：首页 > news >正文

Hive从入门到运用

news 来源：原创 2025/9/14 18:05:50

hive简介

hive的设计思想（本质是一个翻译器）

上传安装包

解压，查看

运行hive（一定要启动hadoop，是有依赖关系的。）

测试启动方法，和建表

文件创建很上传到hdfs，直接上传到hive表的目录上去

创建一个文件，并在文件内写入数据。最后上传到hdfs

这样hive就有了这个文件

测试hive的查询

hive导入数据（load data 语句）

除了select * 以外其余的语句都会变成mapreduce。执行。

hive的表（内部表/外部表）

像我们自己用语句建立的表，存放在/user/hive/warehouse/**表，如此算是内部表。

例如下创建一个外部表

创建文件，做数据填充，检查数据

内部表和外部表的区别，内部表删除会直接删除，数据也会直接删除，但是外部表删除后只是把原数据库的的地址删除掉，但是hdfs的数据是不会删除的。

关联查询

结果如下

元数据库配置

这个元数据库是hive自带的，名字叫做derby数据库。只能单实例运行，如下

为了解决如果已经有客户端链接，就不能再次链接的问题，所以我们要求修改原数据库的配置

配置如下，进入conf文件夹，添加文件hive-site.xml

配置文件填充如下：切记将mysql的驱动配置一个到/lib下，否则mysql无法启动。

重启hive，将数据源改变为mysql。

看都看了，点个关注呗！

Hive从入门到运用

hive简介 hive的设计思想（本质是一个翻译器） 上传安装包解压，查看运行hive（一定要启动hadoop，是有依赖关系的。） 测试启动方法，和建表文件创建很上传到hdfs，直接上传到hive表的目…...

编程日记 2025/9/14 18:05:50

unity学习55：按钮 button

目录 1 按钮 button 1.1 按钮button 其实就是一个组合体 1.2 测试按钮，在UI中添加1个按钮 1.3 按钮的属性 2 按钮的图片属性 3 按钮的变换 transition 3.1 按颜色变换 3.2 按图片精灵变换 3.3 按动画变换 4 按钮的导航 5 按钮的事件和脚本 1 按钮 …...

编程日记 2025/9/11 20:04:26

《论基于构件的软件开发方法及其应用》审题技巧 - 系统架构设计师

软考论文写作框架：基于构件的软件开发方法及其应用一、考点概述本论题“基于构件的软件开发方法及其应用”主要考察的是软件工程专业中关于基于构件开发（CBSD）的深入理解与实践应用。考点涵盖以下几个方面： 首先，…...

编程日记 2025/9/13 18:04:57

穷举vs暴搜vs深搜vs回溯vs剪枝（典型算法思想）—— OJ例题算法解析思路

回溯算法的模版 void backtrack(vector<int>& path, vector<int>& choice, ...) {// 满⾜结束条件if (/* 满⾜结束条件 */) {// 将路径添加到结果集中res.push_back(path);return;}// 遍历所有选择for (int i 0; i < choices.size(); i) {// 做出选择…...

编程日记 2025/9/14 1:46:56

java23种设计模式-命令模式

命令模式（Command Pattern）学习笔记 1. 模式定义行为型设计模式，将请求封装为对象，使请求的发送者与接收者解耦。支持请求的排队、记录、撤销/重做等操作。 2. 适用场景 ✅ 需要将操作参数化 ✅ 需要支持事务操作&#xff08…...

编程日记 2025/9/14 6:00:06

交流异步电动机PI双闭环SVPWM矢量控制Simulink

关注微♥“电机小子程高兴的MATLAB小屋”获取专属优惠 1.模型简介本仿真模型基于MATLAB/Simulink（版本MATLAB 2017Ra）软件。建议采用matlab2017 Ra及以上版本打开。（若需要其他版本可联系代为转换） 2.仿真算法： (…...

编程日记 2025/9/8 16:26:15

利用 Open3D 保存并载入相机视角的简单示例

1. 前言在使用 Open3D 进行三维可视化和点云处理时，有时需要将当前的视角（Camera Viewpoint）保存下来，以便下次再次打开时能够还原到同样的视角。本文将演示如何在最新的 Open3D GUI 界面（o3d.visualization.gui / o…...

编程日记 2025/9/10 11:02:00

kiln微调大模型-使用deepseek R1去训练一个你的具备推理能力的chatGPT 4o

前言随着deepseek的爆火，对于LLM的各种内容也逐渐步入我的视野，我个人认为，可能未来很长一段时间，AI将持续爆火，进入一段时间的井喷期，AI也会慢慢的走入我们每个家庭之中，为我们的生活提供便利…...

编程日记 2025/9/10 4:09:37

《从Kokoro看开源语音模型的“无限可能”》：此文为AI自动生成

开源语音模型 Kokoro 是一款轻量级、高性能的文本转语音（TTS）模型，以下是关于它的详细介绍：核心优势卓越的音质：即使参数规模仅 8200 万，也能生成自然流畅、富有表现力的语音。轻量高效：占用资源少，运行速度快，在 CPU 上即可实现近乎实时的语音生成，在 GPU 端则能…...

编程日记 2025/9/9 18:21:08

Spring 事务和事务传播机制（详解）

1 .事务 1.1.什么是事务？ 事务是一组操作的集合,是不可分割的操作事务作为一个整体，要不同时完成，要不同时失败 1.2什么时候需要事务？ 关于金钱的操作基本都会有事务例如转账操作： 第一步 A账号 - 500元第二步 B账…...

编程日记 2025/9/12 21:26:49

Innodb MVCC实现原理

什么是MVCC? MVCC全称多版本并发控制，是在并发访问数据库时对操作数据做多版本管理，避免因为写数据时要加写锁而阻塞读取数据的请求问题。 Innodb对mvcc的实现 1、事务版本号每次事务开启前都会从数据库获得一个自增长的事务ID，可以从事…...

编程日记 2025/9/7 21:23:03

【网络编程】网络套接字和使用案例

一、为什么大多数网络编程使用套接字在网络编程中，套接字 (socket) 是最常用的接口，但并不是所有的底层通信都依赖于套接字。尽管如此，绝大多数网络应用（特别是在操作系统层面）都使用套接字进行通信，因为…...

编程日记 2025/9/8 17:28:13

【Java企业生态系统的演进】从单体J2EE到云原生微服务

Java企业生态系统的演进：从单体J2EE到云原生微服务目录标题 Java企业生态系统的演进：从单体J2EE到云原生微服务摘要1. 引言2. 整体框架演进：从原始Java到Spring Cloud2.1 原始Java阶段（1995-1999）2.2 J2EE阶段&#x…...

编程日记 2025/9/7 0:54:24

【爬虫基础】第二部分爬虫基础理论 P1/3

上节内容回顾：【爬虫基础】第一部分网络通讯 P1/3-CSDN博客【爬虫基础】第一部分网络通讯-Socket套接字 P2/3-CSDN博客【爬虫基础】第一部分网络通讯-编程 P3/3-CSDN博客爬虫相关文档，希望互相学习，共同进步风123456789&#xff…...

编程日记 2025/9/10 8:17:58

第2章_保护您的第一个应用程序

第2章_保护您的第一个应用程序在本章中，您将学习如何使用 Keycloak 保护您的第一个应用程序。为了让事情更有趣，您将运行的示例应用程序由两部分组成，前端 Web 应用程序和后端 REST API。这将向您展示用户如何向前端进行身份验证&#xff0…...

编程日记 2025/9/9 14:29:31

山东大学软件学院人工智能导论实验之知识库推理

目录实验目的： 实验代码： 实验内容： 实验结果实验目的： 输入相应的条件，根据知识库推理得出相应的知识。实验代码： def find_data(input_process_data_list):for epoch, data_process in enumerat…...

编程日记 2025/9/12 0:41:07

Java 网络协议面试题答案整理，最新面试题

TCP和UDP的主要区别是什么？ TCP（传输控制协议）和UDP（用户数据报协议）的主要区别在于TCP是面向连接的协议，而UDP是无连接的协议。这导致了它们在数据传输方式、可靠性、速度和使用场景方面的不同。 1、连接…...

编程日记 2025/9/11 21:56:19

win10把c盘docker虚拟硬盘映射迁移到别的磁盘

c盘空间本身就比较小、如果安装了docker服务后，安装的时候没选择其他硬盘，虚拟磁盘也在c盘会占用很大的空间，像我的就三十多个G，把它迁移到其他磁盘一下子节约几十G 1、先输入下面命令查看 docker 状态 wsl -l -v 2、如果没有停止…...

编程日记 2025/9/14 6:13:53

AOP进阶-02.通知顺序

一.通知顺序当有多个切面类中的切入点表达式一样时，这些切面类的执行顺序是怎样的呢？如图我们将定义两个切面类，一个MyAspect2，一个MyAspect3，一个MyAspect4。执行后我们发现， 对于目标方法前的通知方法&…...

编程日记 2025/9/8 14:17:07

${sym} 与 String(sym) 的区别

在 JavaScript 中，${sym}（模板字符串插值）和 String(sym)（显式类型转换）虽然都涉及将值转换为字符串，但它们的底层逻辑和行为存在显著差异，尤其是在处理 Symbol 等特殊类型时。以下是具体对比&a…...

编程日记 2025/9/11 11:49:37

sglang框架源码笔记

文章目录整体架构1. **客户端（Client）**：2. **服务器端（Server）**：3. **调度器与模型工作节点（Scheduler & Model Worker）**： TpModelWorker类ModelRunner类TpModel…...

编程日记 2025/9/8 11:38:30

2025年SCI一区智能优化算法：混沌进化优化算法（Chaotic Evolution Optimization, CEO），提供MATLAB代码

一、混沌进化优化算法 https://github.com/ITyuanshou/MATLABCode 1. 算法简介混沌进化优化算法（Chaotic Evolution Optimization, CEO）是2025年提出的一种受混沌动力学启发的新型元启发式算法。该算法的主要灵感来源于二维离散忆阻映射的混沌进化过…...

编程日记 2025/9/14 3:43:51

uake 网络安全 reverse网络安全

🍅 点击文末小卡片 ，免费获取网络安全全套资料，资料在手，涨薪更快本文首发于“合天网安实验室” 首先从PEID的算法分析插件来介绍，要知道不管是在CTF竞赛的REVERSE题目中，还是在实际的商业产品中&#xf…...

编程日记 2025/9/8 17:46:20

C语言实现单链表

单链表是数据结构中最基础的链式结构，它不按照线性的顺序存储数据，而是由若干个同一结构类型的“节点”依次串联而成的，即每一个节点里保存着下一个节点的地址（指针）。上图中，一个表头变量head是用来存储链表首节点的地址，链表中每个节点有data（数据）部分和n…...

编程日记 2025/9/10 7:25:58

Rk3568驱动开发_点亮led灯代码完善(手动挡)_6

1.实现思路： 应用层打开设备后通过write函数向内核中写值，1代表要打开灯，0代表要关闭灯 Linux配置gpio和控制gpio多了一个虚拟内存映射操作 2.注意事项： 配置和读写操作的时候要谨慎，比如先关掉gpio再注销掉虚拟内存…...

编程日记 2025/9/8 17:04:09

threejs：document.createElement创建标签后css设置失效

vue3threejs，做一个给模型批量CSS2D标签的案例，在导入模型的js文件里，跟着课程写的代码如下： import * as THREE from three; // 引入gltf模型加载库GLTFLoader.js import { GLTFLoader } from three/addons/loaders/GLTFLoader.…...

编程日记 2025/9/13 16:03:06

在 compare-form.vue 中添加 compareDate 隐藏字段，并在提交时自动填入当前时间

在 compare-form.vue 中添加 compareDate 隐藏字段，并在提交时自动填入当前时间。提交表单时存入的对象是FakeRegistration，这个对象里面有compareDate字段，刚好表格查询的对象也是FakeRegistration，所以表格展示的时间就是刚才…...

编程日记 2025/9/12 23:01:00

使用DeepSeek/ChatGPT等AI工具辅助编写wireshark过滤器

随着deepseek,chatgpt等大模型的能力越来越强大，本文将介绍借助deepseek，chatgpt等大模型工具，通过编写提示词，辅助生成全面的Wireshark显示过滤器的能力。每一种协议的字段众多，流量分析的需求多种多样，…...

编程日记 2025/9/10 10:45:58

Java 大视界 -- Java 大数据在智能物流路径规划与车辆调度中的创新应用（102）

💖亲爱的朋友们，热烈欢迎来到青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而我的博客正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也…...

编程日记 2025/9/11 5:29:39

YOLOv12 ——基于卷积神经网络的快速推理速度与注意力机制带来的增强性能结合

概述实时目标检测对于许多实际应用来说已经变得至关重要，而Ultralytics公司开发的YOLO（You Only Look Once，只看一次）系列一直是最先进的模型系列，在速度和准确性之间提供了稳健的平衡。注意力机制的低效阻碍了它们在…...

编程日记 2025/9/4 15:31:31

一个行为类似标准库find算法的模板

函数需要两个模板类型参数，一个表示函数的迭代器参数，另一个表示值的类型。代码 #include<iostream> #include<string> #include<vector> #include<list>using namespace std;template <typename IterType,typename T>…...

编程日记 2025/9/8 12:07:29

LLC谐振变换器恒压恒流双竞争闭环simulink仿真

1.模型简介本仿真模型基于MATLAB/Simulink（版本MATLAB 2017Ra）软件。建议采用matlab2017 Ra及以上版本打开。（若需要其他版本可联系代为转换）针对全桥LLC拓扑，利用Matlab软件搭建模型，分别对轻载&#xf…...

编程日记 2025/9/8 1:43:52

Elasticsearch 的分布式架构原理：通俗易懂版

Elasticsearch 的分布式架构原理：通俗易懂版 Lucene 和 Elasticsearch 的前世今生 Lucene 是一个功能强大的搜索库，提供了高效的全文检索能力。然而，直接基于 Lucene 开发非常复杂，即使是简单的功能也需要编写大量的 Java 代码&…...

编程日记 2025/9/8 17:59:15

[深度学习]基于C++和onnxruntime部署yolov12的onnx模型

基于C和ONNX Runtime部署YOLOv12的ONNX模型，可以遵循以下步骤： 准备环境：首先，确保已经下载后指定版本opencv和onnruntime的C库。模型转换： 安装好yolov12环境并将YOLOv12模型转换为ONNX格式。这通常涉及使用深度学习…...

编程日记 2025/9/14 5:28:29

seacmsv9报错注入

1、seacms的介绍 seacms中文名：海洋影视管理系统。是一个采用了php5mysql架构的影视网站框架，因此，如果该框架有漏洞，那使用了该框架的各个网站都会有相同问题。 2、源码的分析漏洞的部分源码如下： <?php …...

编程日记 2025/9/14 6:21:45

comments: true edit_url: https://github.com/doocs/leetcode/edit/main/lcof2/%E5%89%91%E6%8C%87%20Offer%20II%20033.%20%E5%8F%98%E4%BD%8D%E8%AF%8D%E7%BB%84/README.md 剑指 Offer II 033. 变位词组题目描述给定一个字符串数组 strs ，将变位词组合在一起…...

编程日记 2025/9/10 10:56:33

【2025全网最新最全】前端Vue3框架的搭建及工程目录详解

文章目录安装软件Node.js搭建Vue工程创建Vue工程精简Vue项目文件 Vue工程目录的解读网页标题的设置设置全局样式路由配置安装软件Node.js 下载地址：https://nodejs.org/zh-cn/ 安装完成后，打开cmd,查看环境是否准备好 node -v npm -vnpm使用之前一定…...

编程日记 2025/9/13 19:34:53

前缀和专题练习 ——基于罗勇军老师的《蓝桥杯算法入门C/C++》

目录一、0求和 - 蓝桥云课算法代码： 代码思路概述代码详细解释数组定义输入读取前缀和计算部分结果计算部分输出结果程序结束总结二、1.可获得的最小取值 - 蓝桥云课算法代码： 代码思路概述详细代码逻辑解释输入初始化 …...

编程日记 2025/9/12 16:49:54

1.测试策略与计划设计指南

1.介绍 1.1项目介绍完整项目组成：1.基于K8S定制开发的SaaS平台；2.多个团队提供的中台服务(微服务)；3.多个业务团队开发的系统平台。涉及多个项目团队、上百个微服务组件。测试在所有团队开发测试后，自己搭建测试环境&#xff0c…...

编程日记 2025/9/8 13:49:24

pikachu

暴力破解基于表单的暴力破解【2024版】最新BurpSuit的使用教程（非常详细）零基础入门到精通，看一篇就够了！让你挖洞事半功倍！_burpsuite使用教程-CSDN博客登录页面，随意输入抓包，发送到攻击…...

编程日记 2025/9/11 8:09:17

HDFS扩缩容及数据迁移

1.黑白名单机制在HDFS中可以通过黑名单、白名单机制进行节点管理，决定数据可以复制/不可以复制到哪些节点。黑名单通常是指在HDFS中被标记为不可用或不可访问的节点列表，这些节点可能由于硬件故障、网络问题或其他原因而暂时或永久性地无法使用。当一…...

编程日记 2025/9/14 6:52:25

设计模式-（状态模式，策略模式，代理模式，责任链模式）

状态模式概念： 用于管理一个对象在不同状态下的行为变化。它允许对象在内部状态改变时改变其行为，从而让对象看起来像是改变了其类。状态模式的核心思想是将状态封装到独立的类中，每个状态类都定义了在该状态下对象的行为状态模式主要涉…...

编程日记 2025/9/10 22:29:08

二、IDE集成DeepSeek保姆级教学(使用篇)

各位看官老爷好，如果还没有安装DeepSeek请查阅前一篇一、IDE集成DeepSeek保姆级教学(安装篇) 一、DeepSeek在CodeGPT中使用教学 1.1、Edit Code 编辑代码选中代码片段 —> 右键 —> CodeGPT —> Edit Code, 输入自然语言可编辑代码，点击S…...

编程日记 2025/9/14 0:05:27

通义灵码插件安装入门教学 - IDEA（安装篇）

在开发过程中，使用合适的工具和插件可以极大地提高我们的工作效率。今天，我们将详细介绍如何在 IntelliJ IDEA 中安装并配置通义灵码插件，这是一款旨在提升开发者效率的实用工具。无论你是新手还是有经验的开发者，本文都将为你提供…...

编程日记 2025/9/6 5:00:14

每天一个Flutter开发小项目 (4) : 构建收藏地点应用 - 深入Flutter状态管理

引言欢迎回到每天一个Flutter开发小项目系列博客！在前三篇博客中，我们从零开始构建了计数器应用、待办事项列表应用，以及简易天气应用。您不仅掌握了 Flutter 的基础组件和布局，还学习了网络请求、JSON 解析等实用技能，更重要的是，我们一起探讨了高效的 Flutter 学习…...

编程日记 2025/9/8 16:12:37

qt-C++笔记之QtCreator新建项目即Create Project所提供模板的逐个尝试

qt-C笔记之QtCreator新建项目即Create Project所提供模板的逐个尝试 code review! 文章目录 qt-C笔记之QtCreator新建项目即Create Project所提供模板的逐个尝试1.Application(Qt):Qt Widgets Application1.1.qmake版本1.2.cmake版本 2.Application(Qt):Qt Console Applicati…...

编程日记 2025/9/13 14:42:01

【NestJS系列】安装官方nestjs CLI 工具

环境搭建指南：从零开始创建 NestJS 项目一、工具准备 1. 安装 Node.js 环境推荐使用 LTS 版本（目前 20.x 以上）验证安装：终端执行 node -v 和 npm -vNode.js 官网下载2. 包管理器选择这里选用更高效的 pnpm，你也可选择 npm 或 yarn # 安装 pnpm npm install -g pnp…...

编程日记 2025/9/12 21:04:55

【Springboot知识】Logback从1.2.x升级到1.3.x需要注意哪些点？

文章目录 **1. 确认依赖版本**示例依赖配置（Maven）： **2. 处理 StaticLoggerBinder 的移除**解决方案： **3. 修改日志配置文件**示例 logback.xml 配置： **4. 检查兼容性问题**Spring Boot 2.x 的兼容性解决方案&#…...

编程日记 2025/9/14 12:48:34

【Linux C | 时间】localtime 的介绍、死机、死锁问题以及 localtime_r 函数的时区问题

😁博客主页😁：🚀https://blog.csdn.net/wkd_007🚀 🤑博客内容🤑：🍭嵌入式开发、Linux、C语言、C、数据结构、音视频🍭 🤣本文内容🤣&a…...

编程日记 2025/9/8 18:32:59

每日一题——LRU缓存机制的C语言实现详解

LRU缓存机制的C语言实现详解参考1. 数据结构设计双向链表节点哈希表节点哈希表LRU缓存结构 2. 初始化哈希表和双向链表哈希函数初始化哈希表初始化双向链表创建LRU缓存 3. 更新双向链表4. 实现Get操作5. 实现Put操作更新节点值删除最久未使用节点插入或更新节点 6. 释放缓存释…...

编程日记 2025/9/14 13:25:19