hive3.1.3安装及基本例子
前提要安装好hadoop环境和mysql。
1、下载并解压
https://archive.apache.org/dist/hive/hive-3.1.3/apache-hive-3.1.3-bin.tar.gz
下载bin包到/app/src中。
cd /app/src/
tar zxvf apache-hive-3.1.3-bin.tar.gz
mv apache-hive-3.1.3-bin /app/hive
2、配置path
nano /etc/profile
export HIVE_HOME=/app/hive
export PATH=$HIVE_HOME/bin:$PATH
3、下载并配置connector-java驱动
下载mysql-connector-java驱动：
https://cdn.mysql.com/archives/mysql-connector-java-8.0/mysql-connector-j-8.0.33.tar.gz
cd zxvf mysql-connector-java-8.0.33.tar.gz
cd mysql-connector-java-8.0.33
cp mysql-connector-java-8.0.33-bin.jar /app/hive/lib
4、配置
cd /opt/hive/conf
cp hive-env.sh.template hive-env.sh
nano hive-env.sh
增加：
HADOOP_HOME=/usr/local/hadoop
nano hive-site.xml 内容：
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration><property><name>hive.metastore.warehouse.dir</name><value>/opt/hive/warehouse</value><!-- 注意这里写刚刚新创文件的路径 --></property><property><name>hive.metastore.local</name><value>true</value></property><property><name>javax.jdo.option.ConnectionURL</name><value>jdbc:mysql://127.0.0.1:3306/hiveDB?createDatabaseIfNotExist=true</value><!-- 这里自己搓自己的mysql的ip地址 --></property><property><name>javax.jdo.option.ConnectionDriverName</name><value>com.mysql.jdbc.Driver</value></property><property><name>javax.jdo.option.ConnectionUserName</name><value>root</value></property><property><name>javax.jdo.option.ConnectionPassword</name><value>123123</value><!-- 这里搓自己的mysql账号和密码 --></property>
</configuration>
5、执行命令：
schematool -dbType mysql -initSchema
6、启动hdfs
start-dfs.sh
通过 hive进入到命令行模式。
7、例子：
create database if not exists db1;
use db1;create table if not exists table1(
eduLevel_name string comment '学历',
company_name string comment '公司名',
jobName string comment '职位名称',
salary int comment '薪资',
city_code int comment '城市编码',
responsibility string comment '岗位职责',
workingExp string comment '工作经验'
)
row format delimited fields terminated by ','
lines terminated by '\n'
stored as textfile;
truncate table table1;
load data local inpath '/root/t1.txt' into table table1;select avg(salary),workingExp from table1 group by workingExp
相关文章：
hive3.1.3安装及基本例子
前提要安装好hadoop环境和mysql。 1、下载并解压 https://archive.apache.org/dist/hive/hive-3.1.3/apache-hive-3.1.3-bin.tar.gz 下载bin包到/app/src中。 cd /app/src/ tar zxvf apache-hive-3.1.3-bin.tar.gz mv apache-hive-3.1.3-bin /app/hive2、配置path nano /etc…...
【设计模式】工厂方法模式 在java中的应用
文章目录 1. 引言工厂方法模式的定义 2. 工厂方法模式的核心概念工厂方法模式的目的和原理与其他创建型模式的比较（如简单工厂和抽象工厂） 3. Java中工厂方法模式的实现基本的工厂方法模式结构示例代码：创建不同类型的日志记录器 4. 工厂方法…...
【热门主题】000079 服务器虚拟化：开启高效计算新时代
前言：哈喽，大家好，今天给大家分享一篇文章！并提供具体代码帮助大家深入理解，彻底掌握！创作不易，如果能帮助到大家或者给大家一些灵感和启发，欢迎收藏关注哦 💕 目录 【热…...
软考高项经验分享：我的备考之路与实战心得
软考，尤其是信息系统项目管理师（高项）考试，对于众多追求职业提升与专业认可的人士来说，是一场充满挑战与机遇的征程。我在当年参加软考高项的经历，可谓是一波三折，其中既有成功的喜悦࿰…...
【小白学机器学习38】用np.random 生成各种随机数，随机数数组/序列
目录 0 总结 np.random() 的一些点 1 用np.random.random() 生成[0,1) 区间内的随机数 2 生成指定范围内的随机整数/数组 np.random.randint() 3 用np.random.choice()生成指定数组范围内的随机数 3.1 np.random.choice(array6) 3.2 np.random.choice(array6) ࿰…...
Scala的数组匹配模式
package Test32//匹配：数组：元素的个数 元素的特征 object Test4 {def main(args: Array[String]): Unit {val arr1 Array(1, 2, 3)val arr2 Array(0, 2, 3)val arr3 Array(1, 2, 3, 4)val arr4 Array(-1, 1, 2, 3, 4)val b: Any arr1b match {ca…...
力扣【算法学习day.50】
前言 ###我做这类文章一个重要的目的还是给正在学习的大家提供方向和记录学习过程（例如想要掌握基础用法，该刷哪些题？）我的解析也不会做的非常详细，只会提供思路和一些关键点，力扣上的大佬们的题解质量是非…...
C 语言学习的经典书籍有哪些？
学习C语言的理由 C语言是一种程席设计语言，它是由美国AT&T公司贝尔实验室的Dennis Ritchie于1972年发明的。C语言之所以流行，是因为它简单易用。学习C语言的几个理由如下： (1)C、C#和Java使用一种被称为面向对象程序设计(0bject-Orient…...
数据结构——栈
目录 栈的介绍 一、栈的基本概念 1.1 栈的定义 1.2 栈的常见基本操作 二、栈的顺序存储结构 2.1 栈的顺序储存 2.2 顺序栈 2.3 共享栈 三、栈的链式储存结构 3.1 链栈 3.2 链栈的进出栈操作 四、栈的应用 4.1实现斐波那契数列 一、栈的基本概念 1.1 栈的定义 栈…...
开发系统准备与开发环境配置总结
开发前系统配置及环境搭建 系统配置0 Github打不开、速度慢怎么办1 WSL、Linux、Ubuntu、Docker都是什么鬼2 在Windows下安装WSL和Ubuntu3 配置MySQL4 配置Redis并启动服务5 Docker（Windows和Ubuntu下）6 Nginx 系统配置 你好！ 这是你第一次使…...
bash: jstack: command not found【jps、jstack、jmap、jstats 命令不生效解决】
JVM 系列文章传送门 初识 JVM（Java 虚拟机） 深入理解 JVM（Java 虚拟机） 一文搞懂 JVM 垃圾回收（JVM GC） 深入理解 JVM 垃圾回收算法 一文搞懂 JVM 垃圾收集器 JVM 调优相关参数 JVM 场景面试题【强烈…...
两数之和问题——c语言
声明： 以下是我在leetcode上面刷题的两数之和问题，如涉及侵权马上删除文章 声明：本文主要用作技术分享，所有内容仅供参考。任何使用或依赖于本文信息所造成的法律后果均与本人无关。请读者自行判断风险，并遵循相关法律…...
《沉积与特提斯地质》
《沉积与特提斯地质》为中国地质调查局主管，中国地质调查局成都地质调查中心（西南地质科技创新中心）主办的地学类学术期刊。 《沉积与特提斯地质》创刊于1981年，创刊名为《岩相古地理研究与编图通讯》，后更名为《岩相…...
全面解析 C++ STL 中的 set 和 map
C 标准模板库（STL）中的关联式容器以其强大的功能和高效性成为开发者解决复杂数据组织问题的重要工具。其中，set 和 map 是最常用的两类关联容器。本篇博客将从基本特性、底层实现、用法详解、高级案例以及性能优化等多个角度，详细…...
【RL Application】语义分割中的强化学习方法
📢本篇文章是博主强化学习（RL）领域学习时，用于个人学习、研究或者欣赏使用，并基于博主对相关等领域的一些理解而记录的学习摘录和笔记，若有不当和侵权之处，指出后将会立即改正，还望谅…...
MySql：Centos7安装MySql
目录 安装之前，清除MySql残留文件 下载MySql的官方yum源 安装MySql 服务 MySql配置 常见问题 本次安装基于Centos7，平台为云服务器，由XShell软件演示。 注意，请将用户切换为Root用户。 安装之前，清除MySql残留文…...
数据结构-散列函数的构造方法
一.数字关键词 关键词存储应该尽可能的离散 直接定址法:利用线性函数,例如上面的例子,h(key)key-1990,key1990，这个就被存放在0的位置 数字分析法:关键字可能有很到位组成,每一位变化可能都不一样，有的位是不变的,就是说不同的对象这一位都是一样的,有的…...
MySQL：DDL数据定义语言
DDL(Data Definition Language)，数据定义语言 对数据库的常用操作 查看所有数据库 语法：show databases; 创建数据库 dbname：用户自己定义的数据库名称。 语法：create database [if not exists] dbname [charsetutf8]; 切换…...
【落羽的落羽 C语言篇】指针·之其五
文章目录 一、冒泡排序二、qsort排序1. qsort使用指南2.回调函数3. qsort函数的模拟实现 一、冒泡排序 冒泡排序的核心思想就是：两两相邻的元素进行比较和交换。 现在，我们想编写一个函数，使它能够运用冒泡排序的原理，由小到大排…...
Java程序员最新场景面试题总结
上周，在与部门业务伙伴（BP）的交谈中，我了解到当前求职市场的一个显著现象：她在招聘平台上发布的初级后端岗位每日吸引了超过500份简历的投递。这一现象凸显了Java后端岗位竞争的激烈程度，尤其是在这个技术日…...
平衡性能与隐私：解读Google的服务器端标记
在当前数字化时代，企业需要深入洞察用户行为，以提高网站转化率。然而，随着用户对隐私保护的期待日益提高以及相关法规的收紧，如何兼顾性能与隐私成为了一大挑战。为了解决这一问题，Google推出了服务器端标记࿰…...
在云上怎么样让环境更加安全？
随着云计算的普及，越来越多的企业和组织将其应用迁移到云端。在这个过程中，安全性成为了一个不可忽视的重要因素。华为云作为全球领先的云服务提供商，致力于为用户提供安全可靠的云环境。本文九河云将探讨在华为云上如何增强环境的安全性。 …...
分布式实验一
Socket编程作业： 在Linux系统上，用C编两个程序：Client和Server。两个进程间利用socket进行TCP通信。 要求： Server进程运行后，输出本进程所在主机IP地址以及正在监听的端口号； Client进程运行后，…...
网络安全防护指南
网络安全防护指南 网络安全是指保护网络系统中的硬件、软件及数据不受偶然或恶意原因而遭到破坏、更改或泄露，确保网络系统连续可靠地正常运行。随着互联网的普及和技术的发展，网络安全问题日益严峻，对个人、企业和国家都构成了巨大威胁。因…...
DreamCamera2相机预览变形的处理
最近遇到一个问题，相机更换了摄像头后，发现人像角度顺时针旋转了90度，待人像角度正常后，发现 预览时图像有挤压变形，最终解决。在此记录 一人像角度的修改 先放示意图 设备预览人像角度如图1所示，顺时针旋…...
【Go 基础】channel
Go 基础 channel 什么是channel，为什么它可以做到线程安全 Go 的设计思想就是：不要通过共享内存来通信，而是通过通信来共享内存。 前者就是传统的加锁，后者就是 channel。也即，channel 的主要目的就是在多任务间传递…...
长安汽车嵌入式面试题及参考答案
数据结构中的堆栈和编程中的堆栈有什么区别？ 在数据结构中，堆栈是一种抽象的数据类型。它遵循后进先出（LIFO）的原则。从操作角度来看，有入栈（push）和出栈（pop）操作。例如…...
理解Linux的select、poll 和 epoll：从原理到应用场景
I/O 多路复用并不是什么新东西，select 早在 1983 年就出现了，poll 在 1997 年，epoll 是 2002 年的产物。面试题总爱问“多路复用多厉害？”其实它就是把轮询的锅甩给了操作系统，而操作系统不过是用 CPU 指令帮你完成事件…...
（一）Linux下安装NVIDIA驱动（操作记录）
目录 一、查看CUDA版本 1.输入nvidia-smi，查看驱动支持的最大CUDA版本，这里是11.6 2.输入nvcc --version，查看当前安装的CUDA版本，这里是11.3 二、卸载旧的NVIDIA驱动 1.卸载原有驱动 2.禁用nouveau（必须&#x…...
二分法篇——于上下边界的扭转压缩间，窥见正解辉映之光（2）
前言 上篇介绍了二分法的相关原理并结合具体题目进行讲解运用，本篇将加大难度，进一步强化对二分法的掌握。 一. 寻找峰值 1.1 题目链接：https://leetcode.cn/problems/find-peak-element/description/ 1.2 题目分析: 题目要求返回数组内…...
移动机器人课程建图实验-ROSbug汇总
问题1描述 $ rosrun robot_state_publisher robot_state_publisher [ERROR] [1733131886.474757207]: [registerPublisher] Failed to contact master at [localhost:11311]. Retrying...解决方案 这个错误信息表明 robot_state_publisher 节点无法联系到 ROS master。通常&…...
记录vite关于tailwindcss4.0-bate4出现margin[m-*]、padding[p-*]无法生效的问题。
环境如下： vite:5.4.10 tailwindcss: 4.0.0-beta.4 tailwindcss/vite: 4.0.0-beta.4 4.0默认的样式优先级比较低 如果使用了一些reset的css文件 那么很多样式会失效 例如：reset.css中 html, body, ul, li, h1, h2, h3, h4, h5, h6, dl, dt, dd, ol, i…...
WPF+MVVM案例实战与特效（三十）- 封装一个系统日志显示控件
文章目录 1、运行效果2、日志控件封装1、文件创建2、DisplayLogPanel.xaml 代码3、DisplayLogPanel.cs 代码4、数据模型5、枚举类型3、自定义控件使用1、LogPanelWindow.xaml2、LogPanelViewModel.cs4、总结1、运行效果 2、日志控件封装 1、文件创建 打开 Wpf_Examples ，在 …...
redis中jedis和lettuce pool的区别，那个更好，使用范围更广
在 Redis 的 Java 客户端中，Jedis 和 Lettuce 是两种最常用的客户端库，它们都支持连接池（JedisPool 和 Lettuce Connection Pool），但在设计和特性上有显著差异。下面我将详细对比它们的特点，帮助你更好地选择适合的库。 1. 同步 vs 异步 Jedis：是一个 同步 的 Redis 客…...
调试openai 星河大模型的记录:用tcpdump和ngrep抓包
在调试esp32开发板连星河大模型的时候，用requests连星河，怎么也调不通，想通过抓包，看看openai和自己写的到底有啥不一样。 结论：抓包抓到的太多，而且ssl 已经把一些信息都处理过了，看不到报文的…...
树莓派明明安装了opencv和numpy，却找不到
当然不止树莓派，配置python环境都可能存在这个问题 可能是因为安装的 numpy 或者 opencv 版本与 Python 的包路径不匹配。下面是问题的常见原因及解决方法：【方法一和二优先考虑】 原因分析 多版本 Python 环境冲突： 树莓派上可能有多个版本…...
【C++boost::asio网络编程】有关异步读写api的笔记
异步读写api 异步写操作async_write_someasync_send 异步读操作async_read_someasync_receive 定义一个Session类，主要是为了服务端专门为客户端服务创建的管理类 class Session { public:Session(std::shared_ptr<asio::ip::tcp::socket> socket);void Conn…...
github仓库自动同步到gitee
Github Actions是Github推出的自动化CI/CD的功能，我们将使用Github Actions让Github仓库同步到Gitee 同步的原理是利用 SSH 公私钥配对的方式拉取 Github 仓库的代码并推送到 Gitee 仓库中，所以我们需要以下几个步骤 生成 SSH 公私钥添加公钥添加私钥配…...
详解LinkedList中的底层实现
1.LinkedList的构造器 无参构造器 /*** Constructs an empty list.*/ public LinkedList() { } 构造Collection: 只要是 Collection 下的实现类都可以被 LinkedList 构造 // ? extends E: 只要是E的子类及E类型的类都可以使用 public LinkedList(Collection<? extends …...
HTML5动漫主题网站 天空之城 10页 html+css+设计报告成品项目模版
📂文章目录 一、📔网站题目 二、✍️网站描述 三、📚网站介绍 四、🌐网站演示 五、⚙️网站代码 🧱HTML结构代码 💒CSS样式代码 六、🔧完整源码下载 七、📣更多 一、&#…...
【VSCode】如何修改左侧资源管理器字体大小
方法一 左下角的“设置”—> 选择“窗口” —> 找到 Zoom Level,一般1、2效果就挺大的，可以设置小数0.5、负数-1等，具体设置说明见下图： 这个有一点不好的是，不仅仅资源管理器字体变化，整个VSCode界面会跟着变…...
使用 Visual Studio 开发 Windows 服务
Windows 服务是一种后台运行的应用程序，可以在没有用户界面的情况下执行任务。以下是从概念到具体实现的详细说明。 1. 什么是 Windows 服务 Windows 服务是运行在 Windows 操作系统上的应用程序，具有以下特点： 后台运行：无需用…...
类型转换与IO流：C++世界的变形与交互之道
文章目录 前言🎄一、类型转换🎈1.1 隐式类型转换🎈1.2 显式类型转换🎁1. C 风格强制类型转换🎁2. C 类型转换操作符 🎈1.3 C 类型转换操作符详解🎁1. static_cast🎁2. dynamic_cast&…...
go的web框架介绍
Go 语言有许多优秀的 Web 框架，适用于不同类型的 Web 应用开发，涵盖从简单的 API 开发到复杂的微服务架构。以下是一些常见的 Go Web 框架： 1. Gin 简介：Gin 是一个高性能的 Go Web 框架，设计目标是让开发者能够以极…...
WPF+MVVM案例实战与特效（三十一）- 封装一个加载动画的自定义控件
文章目录 1、案例效果2、案例实现1、资源与文件创建2、自定义控件封装3、自定义控件使用4、总结1、案例效果 2、案例实现 在开发WPF应用程序时，我们常常需要一个灵活的加载动画控件，该控件可以根据窗口的大小自动调整其内部元素（如图片、边框和文本）的尺寸，并且能够通过简…...
cocos creator 3.8 抖音、字节跳动录制器 12
property(Node) luzhishijianDisplay: Node null!;//录制时间显示 property(Node) luzhikaishiBut: Node null!;//录制开始 property(Node) luzhijieshuBut: Node null!;//录制结束 luzhikaishiType: boolean false;//是否开始录制开始计时 gameluzhiTime: number 0;onLoa…...
汽车控制软件下载移动管家手机控车一键启动app
移动管家手机控制汽车系统是一款实现车辆远程智能控制的应用程序。通过下载并安装特定的APP，用户可以轻松实现以下功能：远程启动与熄火：无论身处何地，只要有网络，即可远程启动或熄火车辆，提前预冷或预…...
自由学习记录（28）
C# 中的流（Stream） 流（Stream）是用于读取和写入数据的抽象基类。 流表示从数据源读取或向数据源写入数据的矢量过程。 C# 中的流类是从 System.IO.Stream 基类派生的，提供了多种具体实现，每种实现都针对…...
HarmonyOS开发：关于签名信息配置详解
目录 前言 签名信息的重要性 签名的方式 自动化签名 1、连接真机 2、选择 手动签名 （一）生成密钥和证书请求文件 （二）申请调试证书 （三）注册调试设备 （四）申请调试Profil…...
react 组件双向绑定
1. 使用 state 实现双向绑定 对于双向绑定，需要同时处理表单元素的value属性（通过state来设置）和onChange事件（用于更新state）。 import { useState } from "react";const MyComponent () > {const [i…...