17.【.NET 8 实战--孢子记账--从单体到微服务--转向微服务】--微服务基础工具与技术--loki
在微服务中,日志是非常重要的组成部分。它不仅可以帮助我们排查问题,还可以帮助我们分析系统的性能和使用情况。
一、loki简介
loki是一个开源的日志聚合系统,它可以帮助我们高效地收集、存储和分析日志数据。loki的设计理念是“简单、快速、可扩展”,它能够处理大规模的日志数据,并提供实时查询和分析功能。
loki的架构非常简单,它由三个主要组件组成:loki、promtail和grafana。loki是日志存储和查询的核心组件,promtail是日志收集和传输的代理,grafana是数据可视化和分析的工具。通过这三个组件的协同工作,我们可以实现高效的日志收集、存储和分析。
loki以其简单易用、快速高效的特点,成为了现代云原生应用程序日志管理的首选工具。它可以与Kubernetes、Docker等容器化平台无缝集成,并支持多种数据源的接入,如Prometheus、InfluxDB等。loki还提供了丰富的API和SDK,方便开发者进行二次开发和集成。
loki的设计理念是“简单、快速、可扩展”,它能够处理大规模的日志数据,并提供实时查询和分析功能。与传统的日志管理工具相比,loki具有更高的性能和更低的资源消耗。它采用了分布式架构,可以水平扩展以处理大规模的日志数据。同时,loki还支持多种存储后端,如S3、GCS等,可以根据实际需求选择合适的存储方案。此外,loki还提供了丰富的查询语言和API,方便用户进行数据分析和可视化。
loki的查询语言非常灵活,支持多种查询方式,如标签查询、正则表达式查询等。用户可以根据实际需求选择合适的查询方式,并结合Grafana进行数据可视化和分析。Grafana提供了丰富的图表和仪表盘,可以帮助用户快速了解系统的运行状态和性能指标。
loki的应用场景非常广泛,适用于各种类型的应用程序和系统。它可以用于日志收集、存储和分析,也可以用于监控和告警等场景。在微服务架构中,loki可以帮助我们高效地收集和分析各个微服务的日志数据,从而提高系统的可观察性和可维护性。此外,loki还可以与其他工具和平台进行集成,如Prometheus、Grafana等,从而实现更强大的数据分析和可视化功能。
二、loki的安装
loki的安装非常简单,以Docker为例,我们可以使用以下命令快速安装loki:
docker run -d -p 3100:3100 --name loki grafana/loki:latest
这条命令会在本地启动一个loki实例,并将其暴露在3100端口。我们可以通过访问http://localhost:3100
来查看loki的状态。
接下来,我们需要安装promtail,它是loki的日志收集和传输代理。我们可以使用以下命令安装promtail:
docker run -d -p 9080:9080 --name promtail grafana/promtail:latest -config.file=/etc/promtail/config.yml
promtail的配置文件config.yml
可以根据实际需求进行修改,以下是一个简单的配置示例:
server:http_listen_port: 9080grpc_listen_port: 0
positions:filename: /tmp/positions.yaml
clients:- url: http://loki:3100/loki/api/v1/push
scrape_configs:- job_name: varlogsstatic_configs:- targets:- localhostlabels:job: varlogs__path__: /var/log/*.log
在这个配置文件中,我们指定了promtail监听的端口、日志存储的位置、loki的地址以及要收集的日志文件路径。我们可以根据实际需求修改这些配置。
promtail启动后,会自动收集指定路径下的日志文件,并将其发送到loki。我们可以通过访问http://localhost:9080/metrics
来查看promtail的状态。
接下来,我们需要安装Grafana,它是loki的可视化和分析工具。我们可以使用以下命令安装Grafana:
docker run -d -p 3000:3000 --name grafana grafana/grafana:latest
Grafana启动后,我们可以通过访问http://localhost:3000
来查看Grafana的状态。默认的用户名和密码都是admin
,我们可以使用这个账号登录Grafana。
在Grafana中,我们需要添加loki作为数据源。我们可以在Grafana的设置页面中找到“Data Sources”选项,点击“Add data source”,选择“Loki”,然后输入loki的地址(http://localhost:3100
),点击“Save & Test”按钮即可。
添加完成后,我们可以在Grafana中创建仪表盘,选择loki作为数据源,并使用loki的查询语言进行数据分析和可视化。Grafana提供了丰富的图表和仪表盘,可以帮助我们快速了解系统的运行状态和性能指标。
在Grafana中,我们可以使用loki的查询语言进行数据分析和可视化。以下是一个简单的查询示例:
{job="varlogs"} |~ "error"
这个查询会返回所有包含“error”关键字的日志数据。我们可以根据实际需求修改查询条件,并结合Grafana进行数据可视化和分析。
三、.NET8与loki的集成
在.NET 8中集成loki可以通过使用Serilog和Serilog.Sinks.Loki来实现。Serilog是一个功能强大的日志库,支持多种日志输出方式,包括文件、控制台、数据库等。Serilog.Sinks.Loki是Serilog的一个扩展,可以将日志数据发送到loki。
以下是一个简单的示例,演示如何在.NET 8中集成loki:
首先在项目中安装Serilog和Serilog.Sinks.Loki的NuGet包:
dotnet add package Serilog
dotnet add package Serilog.Sinks.Grafana.Loki
然后在Program.cs
文件中配置Serilog和loki:
using Serilog;
using Serilog.Sinks.Grafana.Loki;// More Code...// loki 地址
var lokiUrl = "http://14.103.224.141:3100";
// 配置自定义标签
List<LokiLabel> labels = new List<LokiLabel>
{new LokiLabel { Key = "app", Value = "WebApplication" },new LokiLabel { Key = "env", Value = "development" },new LokiLabel { Key = "version", Value = "1.0.0" }
};// 配置Serilog
Log.Logger = new LoggerConfiguration().MinimumLevel.Information().Enrich.FromLogContext().WriteTo.GrafanaLoki(lokiUrl,labels: labels).CreateLogger();// 配置Serilog与ASP.NET Core的集成
builder.Host.UseSerilog(Log.Logger);
在这个示例中,我们首先安装了Serilog和Serilog.Sinks.Grafana.Loki的NuGet包,然后在Program.cs
文件中配置了Serilog和loki。我们指定了loki的地址,并配置了一些自定义标签。接下来,我们使用WriteTo.GrafanaLoki
方法将日志数据发送到loki。
在.NET 8中集成loki的优势在于,我们可以使用Serilog的强大功能和灵活性,将日志数据发送到loki进行存储和分析。通过使用Serilog,我们可以轻松地配置日志输出方式、日志格式、日志级别等,并将日志数据发送到多个目标,如文件、控制台、数据库等。
在微服务架构中,loki可以帮助我们高效地收集和分析各个微服务的日志数据,从而提高系统的可观察性和可维护性。通过使用Serilog,我们可以轻松地将日志数据发送到loki进行存储和分析,并结合Grafana进行数据可视化和分析。
四、总结
在本篇中,我们介绍了loki的基本概念、安装和配置方法,以及如何在.NET 8中集成loki进行日志记录。通过使用loki,我们可以高效地收集、存储和分析日志数据,提高系统的可观察性和可维护性。希望本篇能对你有所帮助。
相关文章:
17.【.NET 8 实战--孢子记账--从单体到微服务--转向微服务】--微服务基础工具与技术--loki
在微服务中,日志是非常重要的组成部分。它不仅可以帮助我们排查问题,还可以帮助我们分析系统的性能和使用情况。 一、loki简介 loki是一个开源的日志聚合系统,它可以帮助我们高效地收集、存储和分析日志数据。loki的设计理念是“简单、快速…...
OpenWrt开发第8篇:树莓派开发板做无线接入点
文/指尖动听知识库-谷谷 文章为付费内容,商业行为,禁止私自转载及抄袭,违者必究!!! 文章专栏:Openwrt开发-基于Raspberry Pi 4B开发板 树莓派开发板作为无线接入点的时候,可以通过电脑和手机打开WiFi功能搜索到相应打开的WiFi; 1 通过Web操作界面开启wifi 1...
电源架构与太阳能充电器电路设计分析
一、电源架构基本工作原理分析 #mermaid-svg-mEaBEAY5xdCMN9Uy {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-mEaBEAY5xdCMN9Uy .error-icon{fill:#552222;}#mermaid-svg-mEaBEAY5xdCMN9Uy .error-text{fill:#5522…...
英语句型结构
句型类型结构示例示例解释应用场合简单句主谓(SV)The bird flies.“The bird” 是主语,“flies” 是不及物动词作谓语,描述鸟 “飞” 的动作。描述事物基本行为,如动物习性、自然现象等。主谓宾(SVO&#x…...
什么是卷积神经网络
卷积神经网络(CNN)的全面解析 卷积神经网络(Convolutional Neural Network, CNN)是深度学习领域最成功的模型之一,尤其在图像处理和模式识别任务中表现卓越。以下从基本结构、核心组件、发展历程、应用场景、数学基础、训练方法及优缺点等方面展开详述。 一、基本定义与核…...
操作系统: 第三章节 :中断和处理机调度
一:中断与中断系统 -1:中断的概念: 在程序运行过程中出现某紧急事件,必须中止当前正在运行的程序,转去处理这个事件,然后再恢复原来运行的程序,这一过程称为中断. -2:中断装置(硬件): 发现并相应中断的硬件结构: 工作: -----…...
嵌入式硬件篇---IIC
文章目录 前言1. IC协议基础1.1 物理层特性两根信号线SCLSDA支持多主多从 标准模式电平 1.2 通信流程起始条件(Start Condition)从机地址(Slave Address)应答(ACK/NACK)数据传输:停止条件&#…...
SAP学习笔记 - 开发08 - Eclipse连接到 BTP Cockpit实例
有关BTP,之前学了一点儿,今天继续学习。 SAP学习笔记 - 开发02 - BTP实操流程(账号注册,BTP控制台,BTP集成开发环境搭建)_sap btp开发-CSDN博客 如何在Eclipse中连接BTP Cockpit开发环境实例。 1…...
安装typescript时,npm install -g typescript报错
删除C:\Users\用户\下的.npmrc文件,如果你的没有,看是不是因为将隐藏的项目勾选上了,然后去掉勾选。 重新输入...
支持selenium的chrome driver更新到136.0.7103.92
最近chrome释放新版本:136.0.7103.92 如果运行selenium自动化测试出现以下问题,是需要升级chromedriver才可以解决的。 selenium.common.exceptions.SessionNotCreatedException: Message: session not created: This version of ChromeDriver only su…...
Java在人工智能中的应用:机器学习与深度学习技术探讨
根据您提供的知识库内容,我发现其中主要涉及机器学习和深度学习的内容,而您的文章是关于Java面试技术的。两者的主题并不直接相关,因此无法直接使用知识库中的信息来润色您的文章。 如果您希望将机器学习和深度学习的内容融入文章中…...
C++23 新特性:深入解析 std::views::join_with(P2441R2)
文章目录 std::views::join_with 基本用法处理字符串集合std::views::join_with 与其他视图的结合使用总结 随着C23标准的逐步推进,我们迎来了许多令人兴奋的新特性,其中之一就是 std::views::join_with。这个新特性是C23中引入的视图适配器,…...
【工作记录】crmeb后端项目打开、运行
1、下载代码 1)安装git 不再详述 2)git拉代码 项目地址如下,在vscode-分支中拉代码 # 克隆项目 git clone https://gitee.com/ZhongBangKeJi/crmeb_java/ 截图如下是已经成功拉下来 注意安装对应版本 2、maven配置 安装配置见&#x…...
前端浏览器判断设备类型的方法
前端浏览器判断设备类型的方法 在前端开发中,判断设备类型(如手机、平板、桌面电脑)有多种方法,以下是常用的几种方式: 1. 使用 User Agent 检测 通过 navigator.userAgent 获取用户代理字符串进行判断:…...
python 新闻 api + react js 客户端。
1. 起因, 目的: 前面写了几个爬虫。 那么这些数据怎么使用。使用 api , 看看到底有哪些新闻。感受:最初只是一个想法,然而实现的过程中却很枯燥乏味, 甚至怀疑为什么要做这个事情. 2. 先看效果 效果就是能行。 3.…...
Vivado中可新建的工程类型解析
以下是Vivado中可新建的工程类型解析,按用途和场景分类说明: 1. RTL Project(RTL工程) 用途:从零开始基于RTL代码(Verilog/VHDL)设计FPGA逻辑,覆盖完整开发流程。适用阶段ÿ…...
TypeScript 中的泛型工具详解
TypeScript 提供了一系列强大的泛型工具类型,可以帮助我们更灵活地操作和转换类型。以下是主要的泛型工具类型及其用法: 1. 基础工具类型 1.1. Partial<T> 将类型 T 的所有属性变为可选。 interface User {name: string;age: number; }type Pa…...
OpenCV进阶操作:指纹验证、识别
文章目录 前言一、指纹验证1、什么是指纹验证2、流程步骤 二、使用步骤(案例)三、指纹识别(案例)1、这是我们要识别的指纹库2、这是待识别的指纹图3、代码4、结果 总结 前言 指纹识别作为生物识别领域的核心技术之一,…...
js前端分片传输大文件+mongoose后端解析
最近一直在完善mongoose做webserver的项目,其中程序升级要通过前端传输升级包到服务器。 因为第一次写前端代码,分片传输的逻辑,网上一堆,大同小异,而且版本啊,API不一致的问题,导致头疼的很。后…...
IPLOOK超轻量核心网,助力5G专网和MEC边缘快速落地
随着5G深入千行百业,行业客户对核心网的灵活性、可控性和部署效率提出了更高要求。IPLOOK面向数字化转型需求,推出了超轻量级核心网解决方案,具备体积小、资源占用少、部署灵活、易于维护等特性,广泛适用于专网、实验室、MEC边缘云…...
Spring框架(一)
Spring框架是Java开发中最为流行的框架之一,它以其强大的功能和灵活的设计,极大地简化了企业级应用的开发。本文将详细介绍Spring框架的核心概念、核心技术、依赖注入、多配置文件方式、开发程序的方式、IOC注解方式以及Spring与JUnit的整合。 目录 一、…...
Redis 基础详解:从入门到精通
在当今互联网应用开发领域,数据存储与处理的性能和效率至关重要。Redis(Remote Dictionary Server)作为一款开源的、基于内存的键值存储系统,凭借其出色的性能和丰富的功能,被广泛应用于数据库、缓存、消息中间件等场景…...
24、TypeScript:预言家之书——React 19 类型系统
一、预言家的本质 "TypeScript是魔法世界的预言家之书,用静态类型编织代码的命运轨迹!" 霍格沃茨符文研究院的巫师挥动魔杖,类型注解与泛型的星轨在空中交织成防护矩阵。 ——基于《国际魔法联合会》第12号类型协议,Ty…...
RabbitMQ--进阶篇
RabbitMQ 客户端整合Spring Boot 添加相关的依赖 <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-amqp</artifactId> </dependency> 编写配置文件,配置RabbitMQ的服务信息 spri…...
【GESP真题解析】第 19 集 GESP 二级 2025 年 3 月编程题 1:等差矩阵
大家好,我是莫小特。 这篇文章给大家分享 GESP 二级 2025 年 3 月编程题第 1 题:等差矩阵。 题目链接 洛谷链接:B4259 等差矩阵 一、完成输入 根据题意,一行,两个正整数 n,m。 n 和 m的数据范围…...
电池单元和电极性能
电芯设计中的挑战 对于电池制造商来说,提高电池能量和功率密度至关重要。在高功率密度和长循环寿命之间取得平衡是电池设计中的关键挑战,通常需要仔细优化材料、电极结构和热管理系统。另一个关键挑战是通过优化重量体积比来降低电池单元的总体成本。 工…...
MATLAB 矩阵与数组操作基础教程
文章目录 前言环境配置一、创建矩阵与数组(一)直接输入法(二)特殊矩阵生成函数(三)使用冒号表达式创建数组 二、矩阵与数组的基本操作(一)访问元素(二)修改元…...
理解 Token 索引 vs 字符位置
以下是对“理解 Token 索引与字符位置的区别”的内容整理,条理清晰,结构完整,保持技术细节,方便阅读,无多余解释: 🔍 理解 Token 索引 vs 字符位置 文本分块方法中返回的索引是 token 索引&…...
【RAG】11种Chunking Strategies分块策略介绍和选择
【今日鸡汤】学习之路上,勤奋是比 “聪明” 远远更珍贵的品质。 参考原文地址:https://masteringllm.medium.com/11-chunking-strategies-for-rag-simplified-visualized-df0dbec8e373 在构建强大的检索增强生成(RAG)系统时&…...
中继器:网络中的“血包”与“加时器”
在探讨网络技术时,我们往往会遇到各种专业术语和设备,中继器便是其中之一。然而,对于非技术人员或初学者来说,这些概念可能显得抽象且难以理解。今天,我将通过一个生动的比喻——将中继器比作网络中的“血包”与“加时…...
证明当||x||=1时,Ax=0的最小二乘解是的最小特征值对应的特征向量
问题:证明当||x||1时,Ax0的最小二乘解是的最小特征值对应的特征向量。 证明: 上个命题等同于:的最小特征值所对应的特征向量可使得||Ax||最小。以下分别对x为的特征向量和不为的特征向量这两种情况进行证明。 情况1: 若x为的特征…...
AI大模型学习十八、利用Dify+deepseekR1 +本地部署Stable Diffusion搭建 AI 图片生成应用
一、说明 最近在学习Dify工作流的一些玩法,下面将介绍一下Dify Stable Diffusion实现文生图工作流的应用方法 Dify与Stable Diffusion的协同价值 Dify作为低代码AI开发平台的优势:可视化编排、API快速集成 Stable Diffusion的核心能力:高效…...
linux基础操作4------(权限管理)
一.前言 今天我们来讲讲linux的权限管理,比如文件的权限,如果大家看过前面说的app逆向的frida,我们在手机里要给frida,我们都要设置一下chomd 777 frida ,这样就给了可执行权限,这就是这一章要讲的&#x…...
Linux数据库篇、第零章_MySQL30周年庆典活动
MySQL考试报名网站 Oracle Training and Certification | Oracle 中国 活动时间 2025年 MySQL的30周年庆典将于2025年举行。MySQL于1995年首次发布,因此其30周年纪念日是2025年。为了庆祝这一里程碑,MySQL将提供免费的课程和认证考试,活动…...
HVV面试题汇总合集
应急响应的命令 Linux ps -aux 查看进程 netstat -antlp 查看端口 top查看 cpu使用情况 Windows tasklist 查看进程 netstat -an 查看端口struts2原理特征 原理: 045:默认的content-type解析器会把用户传来的数据直接当成代码执行,造成rce 特征:ognl表达式&…...
Mac下Robotframework + Python3环境搭建
1.安装python3 1.0安装XCODE 1.打开浏览器,登陆苹果开发者网站:https://developer.apple.com/download/more/ 2.登陆你的apple账号,授权访问。 3.查看mac系统版本 需要下载与系统版本对应的Xcode 4.在搜索框中输入: 如果Mac 系统…...
stm32实战项目:无刷驱动
目录 系统时钟配置 PWM模块初始化 ADC模块配置 霍尔接口配置 速度环定时器 换相逻辑实现 主控制循环 系统时钟配置 启用72MHz主频:RCC_Configuration()设置PLL外设时钟使能:TIM1/ADC/GPIO时钟 #include "stm32f10x.h"void RCC_Configu…...
MNIST 手写数字分类
转自我的个人博客: https://shar-pen.github.io/2025/05/04/torch-distributed-series/1.MNIST/ 基础的单卡训练 本笔记本演示了训练一个卷积神经网络(CNN)来对 MNIST 数据集中的手写数字进行分类的过程。工作流程包括: 数据准备ÿ…...
【RuntimeError: Directory ‘static/‘ does not exist 】
背景 File “/root/miniforge3/lib/python3.10/site-packages/starlette/staticfiles.py”, line 56, in init raise RuntimeError(f"Directory ‘{directory}’ does not exist") RuntimeError: Directory ‘static/’ does not exist 运行读取pdf时候,…...
SQL:SELF JOIN(自连接)与CROSS JOIN(交叉连接)
目录 SELF JOIN(自连接) CROSS JOIN(交叉连接 / 笛卡尔积) 示例: SELF JOIN CROSS JOIN 如果没有 DATEDIFF() 函数怎么办? 🔍 SELF JOIN vs CROSS JOIN 对比总结 SELF JOIN(自…...
Linux网络基础 -- 局域网,广域网,网络协议,网络传输的基本流程,端口号,网络字节序
目录 1. 计算机网络背景 1.1 局域网 1.1.2 局域网的组成 1.2 广域网 1.1.2 广域网的组成 2. 初始网络协议 2.1 网络协议的定义和作用 2.2 网络协议的分层结构 2.2.1 OSI七层模型 2.2.2 TCP/IP 五层(四层)模型 3. 再识网络协议 3.1 为什么要有…...
当 Manus AI 遇上 OpenAI Operator,谁能更胜一筹?
自主智能体通过实现任务自动化,改变了我们与技术交互的方式,让我们的生活变得更加便捷。去年,OpenAI 为人工智能聊天机器人引入了定时任务和操作智能体,赋予了其代理功能,而 Anthropic 则在 Claude 上实现了类似的功能…...
iOS实名认证模块的具体实现过程(swift)
实名认证是当前APP的一个基础功能了,今天我集成了实名认证模块在iOS应用中的具体实现步骤,结合技术细节与最佳实践: 一、手机号验证 1. 发送短信验证码 技术实现:// 使用Alamofire调用第三方短信API AF.request("https://s…...
UE5定序器中摇臂挂载摄像机 让摄像机始终朝向目标
1. 搭建摄像机摇臂并加入 Sequencer 在关卡中: Cinematics → Add Level Sequence,新建并打开一个 Level Sequence。 在视口里 右键 → Cinematic → Cine Camera Actor Rig → Crane,放一个 CameraRig_Crane。 默认 Crane 自带一个 CineCa…...
Redis BigKey 问题是什么
BigKey 问题是什么 BigKey 的具体表现是 redis 中的 key 对应的 value 很大,占用的 redis 空间比较大,本质上是大 value 问题。 BigKey怎么找 redis-cli --bigkeysscanBig Key 产生的原因 1.redis数据结构使用不恰当 2.未及时清理垃圾数据 3.对业务预…...
硬件中断请求号和lspci命令查看到的device id有关系吗?
这是我忽然想到的一个人问题 硬件中断请求号(IRQ)与lspci命令查看到的设备ID(Device ID)没有直接对应关系,但两者在系统硬件管理中通过以下方式间接关联: 一、硬件层面的独立标识 Device ID的本质…...
Qt 中 QWidget涉及的常用核心属性介绍
欢迎来到干货小仓库 一匹真正的好马,即使在鞭子的影子下,也能飞奔 1.enabled API说明isEnabled()获取到控件的可用状态setEnabled()设置控件是否可使用.true:可用,false:禁用 禁用:指该控件不能接收任何用…...
编程日志5.3
串的习题 1.Problem - 2030 #include<iostream> using namespace std; int main() { char s[500]; int n; cin >> n; getchar();//去掉空格部分 while (n--) { gets(s);//老式写法 vs显示错误题目解答正确 int cnt 0; …...
sql的性能分析
慢查询日志:通过慢查询日志需要优化的sql语句。 慢查询日志记录了所有执行时间超过指定参数的所有sql语句。 开启慢日志查询开关:show_query_log1 设置慢查询日志的时间:long_query_time?。 show variables like ‘slow_query_log’&…...
JAVA 锁—— synchronized
32 位机器上java对象头中,markWord 示意图如上所示,64 位机器扩展前面标识位数,如 hashcode(25 -> 31),线程ID(23 -> 54) 如果启用了偏向锁: synchronized添加偏向锁:只有1个线程加锁的情况下&#…...