当前位置：首页 > news >正文

什么是数据仓库

news 来源：原创 2025/9/9 4:38:55

什么是数据仓库

Data warehouse

是面向主题的

主要根据各种数据来源，来进行历史分析

形成一个趋势分析

为数据挖掘、预测建模、机器学习提供基础数据

与传统数据库比如gaussdb的区别。数据仓库注重历史数据分析，guassdb注重实时事务处理

数据仓库时企业的战略级数据资产

主要是用来做数据分析的

整合了各种各样的数据源

对业务数据和生产数据进行业务分析

把数据会和到data warehouse中之后，整个企业都可以访问来看趋势和主题分析图，辅助管理人员对于企业经营、生产数据等做出决策

主要还是对趋势进行数据分析的

为企业和管理人员的决策提供数据支撑

数据仓库data warehouse就是提供数据分析用的。

数据湖：放的是原始数据

数据仓库：放的是过滤过的数据

湖仓一体

数仓架构师

数据仓库，基本上各种选型各种方案，实施起来都可以放在k8s平台上来实现。

什么是数据仓库

什么是数据仓库 Data warehouse 是面向主题的主要根据各种数据来源，来进行历史分析形成一个趋势分析为数据挖掘、预测建模、机器学习提供基础数据与传统数据库比如gaussdb的区别。数据仓库注重历史数据分析，guassdb注重实时事务处理数据仓库时企业的…...

编程日记 2025/9/9 4:38:55

【动态规划】二分优化最长上升子序列

最长上升子序列 II 题解题目传送门：AcWing 896. 最长上升子序列 II 一、题目描述给定一个长度为 N 的数列，求数值严格单调递增的子序列的长度最长是多少。输入格式： 第一行包含整数 N第二行包含 N 个整数，表示完整序列输…...

编程日记 2025/9/9 4:33:53

MySQL的安装与初始化流程

MySQL概述 MySQL是一个关系型数据库管理系统，由瑞典MySQL AB公司开发，MySQL AB公司被Sun公司收购，Sun公司又被Oracle公司收购，目前属于Oracle公司。 MySQL是目前最流行的关系型数据库管理系统，在WEB应用方面MySQL是最…...

编程日记 2025/9/9 4:37:22

flink standalone集群模式部署

一. 环境准备 1、下载并安装jdk11 2、下载flink 并解压 3、确保服务器之间的免密登录二、集群搭建搭建集群至少有三台机器，每台机器的分配角色如下 master: jobManager salve01：taskManager salve02：taskManager 1、在JobManager(…...

编程日记 2025/9/9 4:34:21

Linux线程概念与控制：【线程概念（页表）】【Linux线程控制】【线程ID及进程地址空间布局】【线程封装】

目录一. 线程概念 1.1什么是线程 1.2分页式存储管理 1.2.1虚拟地址和页表的由来 1.2.2物理内存管理 1.2.3页表 1.2.4页目录结构 1.2.5二级页表地址转换 1.3线程的优点二.进程VS线程三.Linux线程控制 3.1POSIX线程库 3.2创建线程编辑 pthread库是个什么东西 …...

编程日记 2025/9/9 4:34:19

7-6 混合类型数据格式化输入

本题要求编写程序，顺序读入浮点数1、整数、字符、浮点数2，再按照字符、整数、浮点数1、浮点数2的顺序输出。输入格式： 输入在一行中顺序给出浮点数1、整数、字符、浮点数2，其间以1个空格分隔。输出格式： 在一行中…...

编程日记 2025/9/7 1:30:01

Eclipse Leshan 常见问题解答 (FAQ) 笔记

本笔记基于 Eclipse Leshan Wiki - F.A.Q. 页面内容，旨在解答关于 Eclipse Leshan（一个开源的 LwM2M 服务器和客户端 Java 实现）的常见问题，帮助您更好地理解和使用该工具。一、Leshan 是什么，我该如何使用它&#x…...

编程日记 2025/9/9 4:37:22

【6】数据结构的栈篇章

目录标题栈的定义顺序栈的实现顺序栈的初始化入栈出栈获取栈顶元素顺序栈总代码与调试双端栈的实现双端栈的初始化入栈出栈双端栈总代码与调试链栈的实现链栈的初始化入栈出栈获取栈顶元素链栈总代码与调试栈的定义定义：栈（Stack）是一种…...

编程日记 2025/9/3 3:32:19

开源虚拟化管理平台Proxmox VE部署超融合

Proxmox VE 是一个功能强大、开源的虚拟化平台，结合了 KVM 和 LXC，同时支持高可用集群、存储管理（ZFS、Ceph）和备份恢复。相比 VMware ESXi 和 Hyper-V，PVE 具有开源、低成本、高灵活性的特点，适用于中小企…...

编程日记 2025/9/3 5:16:31

C语言基础要素(019)：输出ASCII码表

计算机以二进制处理信息，但二进制对人类并不友好。比如说我们规定用二进制值 01000001 表示字母’A’，显然通过键盘输入或屏幕阅读此数据而理解它为字母A，是比较困难的。为了有效的使用信息，先驱者们创建了一种称为ASCII码的交换代…...

编程日记 2025/9/9 4:38:55

函数柯里化（Currying）介绍（一种将接受多个参数的函数转换为一系列接受单一参数的函数的技术）

文章目录柯里化的特点示例普通函数柯里化实现使用Lodash进行柯里化应用场景总结函数柯里化（Currying）是一种将接受多个参数的函数转换为一系列接受单一参数的函数的技术。换句话说，柯里化将一个多参数函数转化为一系列嵌套的单参数函数。 …...

编程日记 2025/9/9 1:37:40

基于大模型的主动脉瓣病变预测及治疗方案研究报告

目录一、引言 1.1 研究背景 1.2 研究目的 1.3 研究意义二、大模型预测主动脉瓣病变原理 2.1 大模型介绍 2.2 数据收集与处理 2.3 模型训练与优化三、术前预测与评估 3.1 主动脉瓣病变类型及程度预测 3.2 患者整体状况评估 3.3 手术风险预测四、术中应用与监测…...

编程日记 2025/9/9 0:48:09

VSCode开发者工具快捷键

自动生成浏览器文件.html的快捷方式在文本里输入： ！ enter VSCode常用快捷键列表代码格式化：Shift Alt F向上或向下移动一行：Alt Up 或者 Alt Down快速复制一行代码：Shift Alt Up 或者 Shift Alt Down快速保…...

编程日记 2025/9/8 14:05:10

AI助力PPT制作，让演示变得轻松高效

AI助力PPT制作，让演示变得轻松高效！随着科技的进步，AI技术早已渗透到各行各业，特别是在办公领域，AI制作PPT已不再是未来的梦想，而是现实的工具。以前你可能需要花费数小时来制作一个完美的PPT，如…...

编程日记 2025/9/4 21:40:41

行业专家视角下的技术选型与任务适配深度解析

行业专家视角下的技术选型与任务适配深度解析一、任务属性与技术栈的映射逻辑 （1）学术类项目需优先考虑技术严谨性、可复现性和理论深度： 机器学习模型开发：PyTorchJupyterMLflow形成完整实验闭环，TensorFlow Exte…...

编程日记 2025/9/7 18:11:55

从零构建大语言模型全栈开发指南：第五部分：行业应用与前沿探索-5.2.1模型偏见与安全对齐（Red Teaming实践）

👉 点击关注不迷路 👉 点击关注不迷路 👉 点击关注不迷路文章大纲大语言模型全栈开发指南：伦理与未来趋势 - 第五部分：行业应用与前沿探索5.2.1 模型偏见与安全对齐（Red Teaming实践）一、模型偏见的来源与影响1. 偏见的定义与分类2. 偏见的实际影响案例二、安全对齐…...

编程日记 2025/9/4 3:18:36

JUC系列JMM学习之随笔

JUC: JUC 是 Java 并发编程的核心工具包，全称为 Java Util Concurrent，是 java.util.concurrent 包及其子包的简称。它提供了一套强大且高效的并发编程工具，用于简化多线程开发并提高性能。 CPU核心数和线程数的关系：1核处理1线程（同一时间单次） CPU内核结构：工作内…...

编程日记 2025/9/2 17:00:21

OpenRouter开源的AI大模型路由工具，统一API调用

简介 ‌OpenRouter是一个开源的路由工具‌，它可以绕过限制调用GPT、Claude等国外模型。以下是对它的详细介绍： 一、主要功能 OpenRouter专注于将用户请求智能路由到不同的AI模型，并提供统一的访问接口。它就像一个“路由器”，能…...

编程日记 2025/9/1 17:54:12

3.9/Q2，Charls最新文章解读

文章题目：Association between remnant cholesterol and depression in middle-aged and older Chinese adults: a population-based cohort study DOI：10.3389/fendo.2025.1456370 中文标题：中国中老年人残留胆固醇与抑郁症的关系&#xff1…...

编程日记 2025/9/5 18:23:34

水下图像增强与目标检测：标签缺失的“锅”？

水下图像增强与目标检测：标签缺失的“锅”？ 在水下计算机视觉领域，图像增强和目标检测一直是研究热点。然而，一个有趣的现象引起了研究者的关注：在某些情况下，增强后的水下图像用于目标检测时，…...

编程日记 2025/9/7 18:48:51

从扩展黎曼泽塔函数构造物质和时空的结构-13

得到这些数据到底有什么用呢？无非都是振动，只有频率不同。电性振动和磁性振动的正交环绕关系，本质上只是某个虚数单位的平方倍数， 既然如此，我们就可以考虑，把电和磁当成同一种东西。比如通过改变真空介电常…...

编程日记 2025/9/4 17:57:34

Android学习总结之handler源码级

一、核心类关系与线程绑定（ThreadLocal 的核心作用） 1. Looper 与 ThreadLocal 的绑定每个线程的 Looper 实例通过 ThreadLocal<Looper> sThreadLocal 存储，确保线程隔离： public final class Looper {// 线程本地存储&…...

编程日记 2025/9/3 14:15:57

多模态学习（八）：2022 TPAMI——U2Fusion: A Unified Unsupervised Image Fusion Network

论文链接：https://ieeexplore.ieee.org/stamp/stamp.jsp?tp&arnumber9151265 目录一.摘要 1.1 摘要翻译 1.2 摘要解析二.Introduction 2.1 Introduciton翻译 2.2 Introduction 解析三. related work 3.1 related work翻译 3.2 relate work解析四…...

编程日记 2025/9/8 10:16:54

adb检测不到原来的设备List of devices attached解决办法

进设备管理器-通用串行总线设备卸载无法检测到的设备驱动重新拔插数据线...

编程日记 2025/8/29 14:32:29

探索高通骁龙光线追踪技术

什么是光线追踪？ 光线追踪（Raytracing）是通过模拟现实世界中光线的传播过程并生成更加真实的效果的一种图形渲染技术。早期在电影，动画，设计等领域已经使用软件摸拟光线追踪来渲染更加真实的图像。一般的做法是从相…...

编程日记 2025/9/4 9:14:26

qRegisterMetaType函数使用

一、有两种形式： 1、int qRegisterMetaType(const char *typeName) template <typename T> int qRegisterMetaType(const char *typeName #ifndef Q_CLANG_QDOC, T * dummy nullptr, typename QtPrivate::MetaTypeDefinedHelper<T, QMetaTypeId2<T&g…...

编程日记 2025/9/8 19:22:49

【北京化工大学】神经网络与深度学习实验6 MATAR图像分类

本次实验使用老师发的雷达奇妙数据实验要求读取图像形式的MASTAR数据 1、划分数据集为test/train 2、归一化题目1：定义并训练线性分类器的神经网络注：本次老师的要求是不限方法，使用pytorch尽可能提升精度 1、准备函数 #本文用的…...

编程日记 2025/9/3 3:56:01

Flutter 的开发环境搭建教程

为了配置Flutter的运行环境，首先我们需要确保你的开发环境支持Flutter，且相关工具都已经安装好。以下是详细的配置步骤： 1. 安装Flutter SDK Flutter是Google推出的用于开发跨平台应用的框架，支持Android、iOS、Web、桌面等多平台…...

编程日记 2025/9/8 0:30:55

MCP：让 AI 应用更聪明，只需几分钟

用 Leonardo.AI 和 FLUX Dev 模型生成（作者制作） 现在 AI 世界最新的趋势是 MCP（模型上下文协议）。如果听起来无聊或者很复杂，别担心 —— 这是个非常简单又有效的工具，可以帮你从零开始构建更好的 AI 智能…...

编程日记 2025/9/4 13:09:03

【编程之路】动态格式化字符串

动态格式化字符串 1.代码功能2.关键组件解析3.完整流程4.示例场景5.注意事项6.典型用途7.总结 🚀 本文讨论的代码段来自《Python Cookbook》的《2.15.字符串中插入变量》。针对下面这段代码，我们一起来分析一下。 class safesub(dict):""&qu…...

编程日记 2025/9/4 8:22:29

接收灵敏度的基本概念与技术解析

接收灵敏度是指接收机在特定条件下能够正确提取有效信号的最小输入功率。其技术原理可概括如下：灵敏度主要受热噪声、系统噪声系数及解调所需信噪比共同影响。根据公式(S 10lg(kTB) NF SNR)计算，其中k为玻尔兹曼常数（1.3810⁻ J/K&#xf…...

编程日记 2025/9/6 4:27:14

KUKA机器人软件WorkVisual更改语言方法

KUKA机器人的常用的工作软件WorkVisual软件在使用时也可以更改软件操作界面的语言。如果安装时语言没有选择中文，安装完成后也可以进行更改。以下通过WorkVisual 5.0版本进行简单介绍。一、打开WorkVisual软件5.0版本； 二、在菜单栏选择【Ext…...

编程日记 2025/9/4 16:38:06

图形渲染: tinyrenderer 实现笔记(Lesson 5 - 7)

目录 Lesson 5: Gouraud shadingLesson 6: Shaders for the software rendererphongShading法线贴图Specular mapping 高光贴图tangent space normal mapping ‌切线空间法线贴图 Lesson 7: Shadow mapping GitHub主页：https://github.com/sdpyy 项目仓库:https://g…...

编程日记 2025/9/3 13:15:43

AiCube 试用 - 创建流水灯工程

AiCube 试用 - 创建流水灯工程本文介绍了 Aiapp-ISP 仿真调试平台软件的 AiCube 工具，实现流水灯工程的快速创建的主要流程。下载运行下载最新版 AIapp-ISP 软件； 解压并打开该软件，右侧操作界面选择并进入 Keil 仿真设置标签项&…...

编程日记 2025/9/5 1:28:09

DBAPI设置服务器开机自启动

在 /etc/systemd/system 目录下创建一个新的服务文件，例如 dbapi.service [Unit] Descriptiondbapi standalone Service Afternetwork.target[Service] ExecStart/your-path/dbapi-enterprise-4.2.2/bin/dbapi.sh start standalone Restartalways Userroot[Install…...

编程日记 2025/9/3 17:51:51

“Nural”传感科技带给高速吹风筒的技术革命---其利天下技术

风筒界的革命，戴森将高速风筒带到了我们生活里，高速风筒的产生，将无刷电机的运用再一次向推到了我们新的产品领域。然而随着智能家居领域的运用越来越广泛，戴森又将智能温控概念引入高速吹风筒，HD16引入“Nural”传感…...

编程日记 2025/9/8 0:52:18

DeepSeek-R1模型现已登录亚马逊云科技

在今年的Amazon re:Invent大会上，亚马逊CEO安迪贾西分享了公司内部开发近 1,000 个生成式 AI应用程序的经验教训。基于如此大规模的AI部署实践，贾西提出了三个关键观察，这些观察塑造了亚马逊在企业AI实施方面的方法。第一点是，当…...

编程日记 2025/8/31 8:01:03

Python入门（8）：文件

1. 文件基本概念文件：存储在计算机上的数据集合，Python 通过文件对象来操作文件。文件类型： 文本文件：由字符组成，如 .txt, .py 二进制文件：由字节组成，如 .jpg, .mp3 2. 文件打开与关闭…...

编程日记 2025/9/7 17:08:41

408 计算机网络知识点记忆（4）

前言本文基于王道考研课程与湖科大计算机网络课程教学内容，系统梳理核心知识记忆点和框架，既为个人复习沉淀思考，亦希望能与同行者互助共进。（PS：后续将持续迭代优化细节） 往期内容 408 计算机网络知识…...

编程日记 2025/8/29 14:32:12

《Java编程思想》读书笔记：第九章接口

目录 9.1抽象类和抽象方法 9.2接口 9.3完全解耦 9.4Java的多重继承 9.5通过继承来扩展接口 9.5.1组合接口时的名字冲突 9.6适配接口 9.7接口中的域 9.7.1初始化接口中的域 9.8嵌套接口 9.9接口与工厂 9.1抽象类和抽象方法在第8章所有“乐器”的例子中，基…...

编程日记 2025/9/4 7:07:33

【gdutthesis模板】章节标题有英文解决方案

按下面格式修改代码即可 \section{中文{\rmfamily{English}}中文}{Chinese English Chinese}效果如下：...

编程日记 2025/8/29 14:32:07

【C语言入门】由浅入深学习指针【第二期】

目录 1. 指针变量为什么要有类型？ 2. 野指针 2.1 未初始化导致的野指针 2.2 指针越界导致的野指针 2.3 如何规避野指针 3. 指针运算 3.1 指针加减整数 3.2 指针减指针 3.3 指针的关系运算 4. 二级指针 5. 指针数组 5.1 如何使用指针数组模拟二维数组上…...

编程日记 2025/9/8 3:38:42

循环神经网络 - 机器学习任务之异步的序列到序列模式

前面我们学习了机器学习任务之同步的序列到序列模式：循环神经网络 - 机器学习任务之同步的序列到序列模式-CSDN博客本文我们来学习循环神经网络应用中的第三种模式：异步的序列到序列模式！ 一、基本概述： 异步的序列到序列模式…...

编程日记 2025/9/4 21:59:21

Java 8 到 Java 21 系列之 Optional 类型：优雅地处理空值（Java 8）

Java 8 到 Java 21 系列之 Optional 类型：优雅地处理空值（Java 8） 系列目录 Java8 到 Java21 系列之 Lambda 表达式：函数式编程的开端（Java 8）Java 8 到 Java 21 系列之 Stream API：数据处理的…...

编程日记 2025/9/5 3:03:25

.NET 创建MCP使用大模型对话二：调用远程MCP服务

在上一篇文章.NET 创建MCP使用大模型对话-CSDN博客中，我们简述了如何使用mcp client使用StdIo模式调用本地mcp server。本次实例将会展示如何使用mcp client模式调用远程mcp server。一：创建mcp server 我们创建一个天气服务。新建WebApi项目&#x…...

编程日记 2025/9/5 12:46:24

podman和与docker的比较及podman使用

Podman 与 Docker 的比较和区别架构差异 Docker：采用客户端 - 服务器（C/S）架构，有一个以 root 权限运行的守护进程 dockerd 来管理容器的生命周期。客户端（docker 命令行工具）与守护进程进行通信&#x…...

编程日记 2025/9/4 13:11:29

智慧农业总体实施方案

智慧农业概念与背景智慧农业是结合现代信息技术，对农业生产全过程进行智能化管理和服务的新型农业模式。它基于物联网、云计算等技术，实现资源节约、效率提高，解决食品安全和环境污染问题。农业发展现状与问题当前农业面临资源短缺、食品安…...

编程日记 2025/9/3 7:01:47

基础科学中的人工智能︱如何用机器学习方法求解排列型组合优化问题？

排列（permutation）作为一个重要的离散数学概念，许多实际问题可以被刻画为n个候选对象的排列。基于给定的目标函数求解最优排列具有丰富的理论和应用价值。特别地，在以排列型问题为代表的组合优化问题中，近年来机器学习…...

编程日记 2025/9/5 9:49:14

脑影像分析软件推荐 | NBS-Predict：基于脑网络的机器学习预测工具包

目录 1.软件界面 2.工具包功能简介 3.软件安装注意事项 1.软件界面 2.工具包功能简介 NBS-Predict（Network-based Statistic Predict）工具包是一种用于神经影像数据分析的预测性扩展工具，它结合了网络基础统计（Network-based S…...

编程日记 2025/9/3 22:30:27

什么是数据仓库

相关文章：