当前位置：首页 > news >正文

记一次 .NET某旅行社酒店管理系统卡死分析

news 来源：原创 2025/7/27 12:36:43

一：背景

1. 讲故事

年初有位朋友找到我，说他们的管理系统不响应了，让我帮忙看下到底咋回事? 手上也有dump，那就来分析吧。

二：为什么没有响应

1. 线程池队列有积压吗？

朋友的系统是一个web系统，那web系统的无响应我们首先要关注的就是 线程池，使用 !sos tpq 命令，参考输出如下：


0:000> !sos tpq
global work item queue________________________________
0x00000004010774C0 Microsoft.AspNetCore.Server.IIS.Core.IISHttpContextOfT<Microsoft.AspNetCore.Hosting.HostingApplication+Context>
0x0000000401077808 Microsoft.AspNetCore.Server.IIS.Core.IISHttpContextOfT<Microsoft.AspNetCore.Hosting.HostingApplication+Context>
....
0x000000030239DD78 Microsoft.AspNetCore.Server.IIS.Core.IISHttpContextOfT<Microsoft.AspNetCore.Hosting.HostingApplication+Context>
0x000000030239E0C0 Microsoft.AspNetCore.Server.IIS.Core.IISHttpContextOfT<Microsoft.AspNetCore.Hosting.HostingApplication+Context>local per thread work items_____________________________________
0x0000000100A46410 System.Threading.Tasks.Task<System.Threading.Tasks.Task>
...
0x000000010133F8C0 System.Threading.Tasks.Task<System.Threading.Tasks.Task>2 Work  Microsoft.AspNetCore.Http.Connections.Internal.HttpConnectionContext+<>c.<WaitOnTasks>b__123_14 Work  Microsoft.AspNetCore.Http.Connections.Internal.HttpConnectionContext+<>c.<WaitOnTasks>b__123_0266 Work  Microsoft.AspNetCore.SignalR.HubConnectionContext.AbortConnection----272

从卦中可以看到确实存在线程池积压的情况，那为什么会有积压呢？条件反射告诉我，是不是因为锁的原因，使用 !syncblk 观察。


0:000> !syncblk
Index         SyncBlock MonitorHeld Recursion Owning Thread Info          SyncBlock Owner
-----------------------------
Total           468
CCW             0
RCW             0
ComClassFactory 0
Free            120

从卦中看和锁没半毛钱关系，那就只能深入各个消费线程，看看这些线程为什么这么不给力。。。。

2. 线程都在干什么

要想观察各个线程都在做什么，可以用 ~*e !clrstack 观察各个线程调用栈，输出的调用栈太长，但仔细观察之后，发现很多线程都停留在 TryGetConnnection 上，截图如下：

从卦中可以看到大概有143个线程卡在 TryGetConnection 上，不知道 Connection 为啥取不到了，接下来观察问题代码，简化后如下：

private bool TryGetConnection(DbConnection owningObject, uint waitForMultipleObjectsTimeout, bool allowCreate, bool onlyOneCheckConnection, DbConnectionOptions userOptions, out DbConnectionInternal connection){DbConnectionInternal dbConnectionInternal = null;Transaction transaction = null;if (HasTransactionAffinity){dbConnectionInternal = GetFromTransactedPool(out transaction);}if (dbConnectionInternal == null){Interlocked.Increment(ref _waitCount);do{num = WaitHandle.WaitAny(_waitHandles.GetHandles(allowCreate), (int)waitForMultipleObjectsTimeout);} while (dbConnectionInternal == null);}}private DbConnectionInternal GetFromTransactedPool(out Transaction transaction){transaction = ADP.GetCurrentTransaction();DbConnectionInternal dbConnectionInternal = null;if (null != transaction && _transactedConnectionPool != null){dbConnectionInternal = _transactedConnectionPool.GetTransactedObject(transaction);//....}return dbConnectionInternal;}internal DbConnectionInternal GetTransactedObject(Transaction transaction){lock (_transactedCxns){flag = _transactedCxns.TryGetValue(transaction, out value);}if (flag){lock (value){int num = value.Count - 1;if (0 <= num){dbConnectionInternal = value[num];value.RemoveAt(num);}}}return dbConnectionInternal;}

从卦中源码看是 _transactedCxns 返回 null 所致，看样子是_transactedCxns中的Conenction耗尽，接下来使用 !dso 从 DbConnectionPool 字段中去挖，输出如下：


0:298> !dso
OS Thread Id: 0x42c0 (298)SP/REG           Object Name0005c087d020     0003ffc79528 Microsoft.Data.ProviderBase.DbConnectionPool0:298> !do 0003ffc79528
Name:        Microsoft.Data.ProviderBase.DbConnectionPool
MethodTable: 000007fe8dd714c8
EEClass:     000007fe8dd65438
Tracked Type: false
Size:        176(0xb0) bytes
File:        D:\APP\EnergyDotNet\runtimes\win\lib\net6.0\Microsoft.Data.SqlClient.dll
Fields:MT    Field   Offset                 Type VT     Attr            Value Name
000007fe8dd71370  40001a7       8c         System.Int32  1 instance                1 _state
...
000007fe8cd994b0  40001ad       94         System.Int32  1 instance              143 _waitCount
000007fe8e012c68  40001b4       78 ...tedConnectionPool  0 instance 00000003ffc7a3e8 _transactedConnectionPool
...
000007fe8cd994b0  40001b6       9c         System.Int32  1 instance              100 _totalObjects
...0:298> !DumpObj /d 00000003ffc7a520
Name:        System.Collections.Generic.Dictionary`2[[System.Transactions.Transaction, System.Transactions.Local],[Microsoft.Data.ProviderBase.DbConnectionPool+TransactedConnectionList, Microsoft.Data.SqlClient]]
MethodTable: 000007fe8e0146a0
EEClass:     000007fe8cd8af30
Tracked Type: false
Size:        80(0x50) bytes
File:        C:\Program Files\dotnet\shared\Microsoft.NETCore.App\6.0.22\System.Private.CoreLib.dll
Fields:MT    Field   Offset                 Type VT     Attr            Value Name
000007fe8cda8480  4002065        8       System.Int32[]  0 instance 0000000000000000 _buckets
000007fe8e3255d8  4002066       10 ...ivate.CoreLib]][]  0 instance 0000000000000000 _entries
000007fe8cd9ca08  4002067       30        System.UInt64  1 instance                0 _fastModMultiplier
000007fe8cd994b0  4002068       38         System.Int32  1 instance                0 _count
000007fe8cd994b0  4002069       3c         System.Int32  1 instance                0 _freeList
000007fe8cd994b0  400206a       40         System.Int32  1 instance                0 _freeCount
000007fe8cd994b0  400206b       44         System.Int32  1 instance                0 _version
000007fe8cdb7900  400206c       18 ...Private.CoreLib]]  0 instance 0000000000000000 _comparer
000007fe8da70c90  400206d       20 ...Private.CoreLib]]  0 instance 0000000000000000 _keys
000007fe8d2a1c60  400206e       28 ...Private.CoreLib]]  0 instance 0000000000000000 _values

从上面的卦中数据可知三点信息：

100 _totalObjects 当前的线程池存着100个Connection。
0 _count 当前100个Connection全部耗尽。
143 _waitCount 表示当前有 143 个线程在获取 Connection 上进行等待。

3. 池中之物都去了哪里

要想找到这个答案，继续观察线程栈，比如搜索TDS传输层方法 Microsoft.Data.SqlClient.TdsParserStateObject.TryReadByte ，可以看到刚好是 100 个，上层大多是 xxxx.GetRoomNosInDltParams 方法，截图如下：

挖掘各个线程栈，大概都是下面的sql，格式化如下：


SELECT [HotelId],[RoomId],[SubRoomId],[SupplierId],[RoomNo],[RoomCategory],[SellPrice],[RoomNoState],[CheckInDate]
FROM [xxx]
WHERE ((((((([RoomId] IN (673,674)) AND( [SellPrice] > @SellPrice1 ))AND ( [CheckInDate] >= @CheckInDate2 ))AND ( [CheckInDate] <= @CheckInDate3 ))AND ( [RoomCategory] <=@constant5))AND ( [RoomNoState] =@constant7))AND NOT ([RoomNo] LIKE @MethodConst8+'%') )

反编译源码发现有一个 useCached 字段形同虚设，导致每次都是从数据库读取，截图如下：

到这里基本上就能推测出来的，程序的卡死主要是 Connection 耗尽，优化建议如下：

SQL 加上 nolock，避免锁问题。
GetRoomNosInDltParams 方法尽量使用缓存。
观察数据库层的锁和负载情况。
设置更大的数据库连接池。

三：总结

这次卡死的生产事故，是大量数据库的慢请求导致SDK侧的数据库连接池(100)耗尽所致，如果有数据库侧的监控工具，我想一眼就能找到答案。

记一次 .NET某旅行社酒店管理系统卡死分析

一：背景 1. 讲故事年初有位朋友找到我，说他们的管理系统不响应了，让我帮忙看下到底咋回事? 手上也有dump，那就来分析吧。二：为什么没有响应 1. 线程池队列有积压吗？ 朋友的系统是一个web系统&#…...

编程日记 2025/7/27 12:36:43

[预备知识]1. 线性代数基础

线性代数基础线性代数是深度学习的重要基础，本章节将介绍深度学习中常用的线性代数概念和操作。 1. 标量、向量、矩阵与张量 1.1 标量（Scalar） 标量是单个数值，用 x ∈ R x \in \mathbb{R} x∈R 表示。在深度学习中常用于表…...

编程日记 2025/7/26 12:19:41

RESTful学习笔记（二）---简单网页前后端springboot项目搭建

新建项目： 项目结构 Pom.xml中添加依赖： 要有用于启动的父进程，有启动依赖，有lombok用于自动构建getter和setter方法等 <parent><groupId>org.springframework.boot</groupId><artifactId>spring-boot-…...

编程日记 2025/7/27 9:25:18

C++ AI模型部署优化实战：基于TensorRT的高效推理引擎开发

🧑 博主简介：CSDN博客专家、CSDN平台优质创作者，高级开发工程师，数学专业，10年以上C/C, C#, Java等多种编程语言开发经验，拥有高级工程师证书；擅长C/C、C#等开发语言，熟悉Java常用开…...

编程日记 2025/7/26 12:19:37

[特殊字符] Prompt如何驱动大模型对本地文件实现自主变更：Cline技术深度解析

在AI技术快速发展的今天，编程方式正在经历一场革命性的变革。从传统的"人写代码"到"AI辅助编程"，再到"AI自主编程"，开发效率得到了质的提升。Cline作为一款基于VSCode的AI编程助手，通过其独特的pro…...

编程日记 2025/7/27 13:42:35

DevOps功能详解

DevOps 详解 1. 什么是 DevOps？ DevOps 是 Development（开发） 和 Operations（运维） 的组合词，代表一种通过自动化工具、协作文化和流程优化来加速软件开发与交付的方法论。其核心目标是打破开发与运维…...

编程日记 2025/7/26 12:19:33

忽略 CS8616 警告在 Visual Studio 2022 中【C# 8.0 】

CS8616 警告是 C# 8.0 引入的可空引用类型(NRT)相关警告，表示"由于可空引用类型的特性，某个不可为 null 的字段可能未被初始化"。编辑项目csproj，直接删除<Nullable>enable</Nullable> 或者修改为disable或者annota…...

编程日记 2025/7/27 13:42:35

[架构之美]一键服务管理大师：Ubuntu智能服务停止与清理脚本深度解析

[架构之美]一键服务管理大师：Ubuntu智能服务停止与清理脚本深度解析服务展示： 运行脚本： 剩余服务： 一、脚本设计背景与核心价值在Linux服务器运维中，服务管理是日常操作的重要环节。本文介绍的智能服务管理脚本&a…...

编程日记 2025/7/26 12:19:29

23种设计模式-结构型模式之外观模式（Java版本）

Java 外观模式（Facade Pattern）详解 🧭 什么是外观模式？ 外观模式是结构型设计模式之一，为子系统中的一组接口提供一个统一的高层接口，使得子系统更易使用。就像是酒店前台，帮你处理入住、叫…...

编程日记 2025/7/26 12:19:27

《数据结构之美--双向链表》

引言之前我们学习了单链表这一数据结构，虽然单链表的功能比较多，但是也存在着一些局限性，因为在单链表中节点的指向都是单向的，因此我们想从某个节点找到它的上一个节点比较困难，来不及再迷恋单链表了，接…...

编程日记 2025/7/27 13:45:23

如何判断设备是否支持带电插拔——从原理到实操的全面解析

点击下面图片带您领略全新的嵌入式学习路线 🔥爆款热榜 88万阅读 1.6万收藏一、带电插拔的核心原理带电插拔（热插拔）的本质是通过电气隔离设计和顺序通断控制，避免电流突变对设备造成损害。 • 触点分级设计：支持热…...

编程日记 2025/7/27 13:44:43

Google Store 如何利用 glTF 3D 模型改变产品教育

Google 为全球广大用户提供种类繁多、持续改进的硬件产品。Google 的智能手机、智能手表、耳机、平板电脑、智能家居设备等产品均通过 Google Store(谷歌商店) 以及遍布全球的实体和数字第三方零售商销售。作为一个以在人工智能、智能家居和个人设备体验方面不断开拓创新而闻名…...

编程日记 2025/7/26 12:19:20

Android Studio版本 Flutter SDK 版本将依赖项添加到您的应用 flutter pub add flutter_riverpod flutter pub add riverpod_annotation flutter pub add dev:riverpod_generator flutter pub add dev:build_runner flutter pub add dev:custom_lint flutter pub add dev:riv…...

编程日记 2025/7/26 12:19:18

flutter 专题六十六 Flutter Dio包网络请求抓包解决方案

在Flutter中进行网络请求时，我们可以使用的库有3个，即Http请求库、HttpClient请求库和Dio请求库（详细介绍请参考：Flutter开发之Http网络请求），使用得最多的就是Dio请求库。因为相比Http请求库和HttpClient请…...

编程日记 2025/7/26 12:19:16

DSL(Domain Specific Language，领域特定语言)

DSL的定义和作用 DSL是为特定业务领域设计的专门语言，这里特指为欺诈检测场景设计的规则描述语言通过DSL，业务人员可以用接近自然语言的方式定义欺诈检测规则，而不需要编写复杂的代码DSL的具体实现：使用ANTLR4作为语法解析工具支…...

编程日记 2025/7/26 12:19:15

基于SpringBoot的心情疗愈平台-项目分享

基于SpringBoot的心情疗愈平台-项目分享项目介绍项目摘要管理员功能图用户实体图心理咨询师功能图系统功能图项目预览情感树洞发布帖子讲座信息心理医生心理医生管理最后项目介绍使用者：管理员、用户、心理咨询师开发技术：MySQLJavaSpringBootVue …...

编程日记 2025/7/26 12:19:13

富文本图片过大问题

在做若依的项目，碰到了若依自带的公告功能的图片上传后，再显示会出现图片过大的问题。在修改若依代码无果后，退而求其次修改展示页面的代码。问题描述： 在若依框架的打卡系统中，公告使用富文本上传图片后&#xff0…...

编程日记 2025/7/26 12:19:11

Python-Django系列—部件

部件是 Django 对 HTML 输入元素的表示。部件处理 HTML 的渲染，以及从对应于部件的 GET／POST 字典中提取数据。内置部件生成的 HTML 使用 HTML5 语法，目标是 <!DOCTYPE html>。例如，它使用布尔属性，如 checked…...

编程日记 2025/7/26 13:53:12

开发者视角：轻量便捷的AI视觉训推一体机如何实现AI模型快速开发

一、行业背景 1）数据与算力基础夯实：互联网、物联网和移动互联网的普及使得视觉数据呈爆发式增长，为AI视觉训推技术提供了丰富的“燃料”。同时，GPU、TPU等计算芯片的广泛使用，以及云计算的兴起，让计算能力…...

编程日记 2025/7/26 12:19:09

基于Python（Django）+SQLite实现（Web）校园助手

校园助手本校园助手采用 B/S 架构。并已将其部署到服务器上。在网址上输入 db.uplei.com 即可访问。使用说明可使用如下账号体验： 学生界面: 账号1：123 密码1：123 账户2：201805301348 密码2：1 # --------------…...

编程日记 2025/7/26 12:19:07

Django 入门指南：构建强大的 Web 应用程序

什么是 Django？ Django 是一个开源的高层次 Python Web 框架，旨在快速开发安全且可维护的网站。它通过简化常见的 Web 开发任务，帮助开发者专注于开发应用的核心功能。Django 实现了“快速开发”和“尽量少的重复”的理念，提供了…...

编程日记 2025/7/26 12:19:05

一文了解相位阵列天线中的真时延

本文要点真时延是宽带带相位阵列天线的关键元素之一。真时延透过在整个信号频谱上应用可变相移来消除波束斜视现象。在相位阵列中使用时延单元或电路板，以提供波束控制和相移。市场越来越需要更快、更可靠的通讯网络，而宽带通信系统正在努力满…...

编程日记 2025/7/26 12:19:04

LangChain实现PDF中图表文本多模态数据向量化及RAG应用实战指南

如何用LangChain实现PDF多模态数据向量化及RAG应用实战指南在大模型应用中，PDF文档因包含文本、表格、图片等异构数据，成为RAG（检索增强生成）系统的核心挑战。本文基于LangChain框架，结合多模态处理技术，…...

编程日记 2025/7/26 12:19:02

OkHttp入门

OkHttp 简介与使用示例 OkHttp 是一个高效的 HTTP 客户端，用于 Android、Java 应用程序以及 Kotlin 应用程序。它支持同步阻塞调用和异步调用，同时提供了强大的拦截器和重定向处理功能。OkHttp 由 Square 公司开发，因其高性能和易用性而广受…...

编程日记 2025/7/26 12:19:00

在ARM Linux应用层下驱动MFRC522

文章目录 1、前言2、IC卡和 IC卡读卡器3、MFRC5223.1、寄存器集3.2、命令集3.3、数据操作3.4、基础函数编写3.4.1、MFRC522接线3.4.2、编写SPI操作函数3.4.3、编写MFRC522基础函数3.4.3.1、完整的mfrc522.h3.4.3.2、写寄存器和读寄存器3.4.3.3、复位引脚操作3.4.3.4、天线操作…...

编程日记 2025/7/26 6:13:02

力扣第446场周赛

有事没赶上, 赛后模拟了一下, 分享一下我的解题思路和做题感受 1.执行指令后的得分题目链接如下：力扣给你两个数组：instructions 和 values，数组的长度均为 n。你需要根据以下规则模拟一个过程： 从下标 i 0 的第一个指令开始…...

编程日记 2025/7/26 5:12:55

close和shutdown

1.shutdown() 控制 TCP 连接的读写方向，不会关闭文件描述符，也不会触发四次挥手。 shutdown(sockfd, SHUT_RD): 关闭套接字的读方向。套接字不能再接收数据。 shutdown(sockfd, SHUT_WR): 关闭套接字的写方向。套接字不能再发送数据。 shutdown(sockfd…...

编程日记 2025/7/26 12:18:58

LeetCode算法题(Go语言实现)_54

题目给你两个正整数数组 spells 和 potions ，长度分别为 n 和 m ，其中 spells[i] 表示第 i 个咒语的能量强度，potions[j] 表示第 j 瓶药水的能量强度。同时给你一个整数 success 。一个咒语和药水的能量强度相乘如果大于等于 success &a…...

编程日记 2025/7/26 12:18:56

.NET应用UI框架DevExpress XAF v24.2新版亮点：支持.NET 9

DevExpress XAF是一款强大的现代应用程序框架，允许同时开发ASP.NET和WinForms。DevExpress XAF采用模块化设计，开发人员可以选择内建模块，也可以自行创建，从而以更快的速度和比开发人员当前更强有力的方式创建应用程序。在DevEx…...

编程日记 2025/7/26 12:18:54

前端通过jenkins和docker打包部署流程

通过jenkins实现镜像打包和上传 1.在jenkins上创建流水线任务点击新建任务填写任务名称选多分支流水线增加分支源选git 添加并选择凭据（有项目权限的git账号密码） 填写分支的正则表达式，多分支使用^(分支名|分支名)$ 保存 …...

编程日记 2025/7/26 13:53:10

SpringBoot自定义验证器：企业级参数校验架构设计与实践

一、需求分析与技术选型在复杂业务场景中，标准校验注解（如@NotBlank、@Pattern）往往无法满足特殊业务规则验证需求。例如：需要校验字段值在预定义的枚举范围内多字段之间存在关联性校验（如起始时间不能晚于结束时间）需要动态查询数据库进行业务规则校验架构设计原则：…...

编程日记 2025/7/26 13:53:08

4U带屏基于DSP/ARM+FPGA+AI的电力故障录波装置设计方案，支持全国产化

4U带屏DSP/ARMFPGAAI电力故障录波分析仪，支持国产化，含有CPU主控模块，96路模拟量采集，256路开关量，通讯扩展卡等#电力故障录波#4U带屏#新能源#电力监测主要特点 1）是采用嵌入式图形系统，以及…...

编程日记 2025/7/26 13:53:06

笔试题——第五周

目录 Day1 排序子序列消减整数最长上升子序列 Day2 爱吃素相差不超过k的最多数最长公共子序列(一) Day3 小红的口罩春游数位染色 Day4 素数回文活动安排合唱团 Day5 跳台阶扩展问题包含不超过两种字符的最长子串字符串的排列 Day6 ISBN号码 k…...

编程日记 2025/7/26 13:53:04

图论-Floyd算法

在搜索中bfs只适合无权图若是碰到有权图最简单的方法就是用邻接矩阵-二维矩阵存储每个点对之间的权重,然后用floyd 并且邻接矩阵还可以处理重边的问题（用min） INFfloat(inf) ma[[INF]*n for _ in range(n)]for i in range(n):ma[i][i]0for i in rang…...

编程日记 2025/7/26 13:53:01

使用pyinstaller打包fastapi项目的问题记录

文章目录 PyInstaller 相关介绍作用使用方式Spec 文件介绍 FastAPI 相关介绍什么是 FastAPI？使用方式使用 PyInstaller 打包 FastAPI 项目常见问题与解决方案 PyInstaller 相关介绍作用 PyInstaller 是一个将 Python 程序打包成独立可执行文件的工具&#xff0c…...

编程日记 2025/7/26 13:52:59

Java秒杀功能-案例

数据库表设计 CREATE TABLE user (id bigint(20) NOT NULL AUTO_INCREMENT,name varchar(100) NOT NULL,password varchar(100) NOT NULL,PRIMARY KEY (id) ) ENGINEInnoDB DEFAULT CHARSETutf8;CREATE TABLE order_info (id bigint(20) NOT NULL AUTO_INCREMENT,user_id bigi…...

编程日记 2025/7/26 22:53:40