当前位置：首页 > news >正文

Shell编程之正则表达式与文本处理器

news 来源：原创 2025/8/25 0:01:33

一、引言

二、正则表达式

2.1 定义与用途

2.2 基础正则表达式

2.2.1 查找特定字符

2.2.2 利用中括号 “[]” 查找集合字符

2.2.3 查找行首 “^” 与行尾字符 “$”

2.2.4 查找任意一个字符 “.” 与重复字符 “*”

2.2.5 查找连续字符范围 “{}”

2.3 元字符总结

2.4 扩展正则表达式

三、文本处理器

3.1 sed 工具

3.1.1 工作流程

3.1.2 命令选项

3.1.3 操作命令

3.1.4 用法示例

3.2 awk 工具

3.2.1 awk 工具概述与命令格式

3.2.2 awk 内建变量

3.2.3 awk 用法示例

一、引言

在 Shell 编程领域，正则表达式与文本处理器是极为关键的工具。正则表达式凭借其强大的字符串匹配能力，可精准定位符合特定规则的字符串；而 grep、sed、awk 等文本处理器，能高效处理文本内容，满足各类文本处理需求。掌握这些知识，对编写高效、灵活的 Shell 脚本意义重大，本笔记将深入学习相关内容。

二、正则表达式

2.1 定义与用途

正则表达式（Regular Expression，简称 RE），又称正规表达式、常规表达式，在代码中常简写为 regex、regexp 或 RE。它是用单个字符串描述、匹配一系列符合特定句法规则字符串的方法，在脚本编程、文本编辑器及多种编程语言中都占据核心地位。在 Shell 编程里，可利用正则表达式进行文本的查找、删除、替换等操作，提升文本处理效率。

2.2 基础正则表达式

学习基础正则表达式，需借助测试文件 test.txt，其内容如下：

he was short and fat. He was wearing a blue polo shirt with black pants.The home
of Football on BBC Sport online.
the tongue is boneless but it breaks bones.12!
google is the best tools for search keyword. The year ahead will test our political
establishment to the limit. P1=3.141592653589793238462643383249901429
a wood cross!
Actions speak louder than words
#woood #
#woooooood #
Axy zxyzxyzxyzC
I bet this place is really spooky late at night!
Misfortunes never come alone/single.
I shouldn't have lett so tast.

2.2.1 查找特定字符

使用 grep 命令查找特定字符。-n选项用于显示行号，-i选项表示不区分大小写，-v选项实现反向选择（查找不包含指定字符的行）。

查找 “the” 所在位置：

[root@localhost ~]# grep -n 'the' test.txt
4:the tongue is boneless but it breaks bones.12!
5:google is the best tools for search keyword. 
6:The year ahead will test our political establishment to the limit.

不区分大小写查找 “the”：

[root@localhost ~]# grep -in 'the' test.txt
3:The home of Football on BBC Sport online. 
4:the tongue is boneless but it breaks bones.12!
5:google is the best tools for search keyword. 
6:The year ahead will test our political establishment to the limit.

查找不包含 “the” 的行：

[root@localhost ~]# grep -vn 'the' test.txt
1:he was short and fat. 
2:He was wearing a blue polo shirt with black pants. 
3:The home of Football on BBC Sport online. 
7:p13.141592653589793238462643383249901429
8:a wood cross!
9:Actions speak louder than words
10:
11:#woood #
12:#wo0000ood #
13:AxyzxyzxyzxyzC
14:I bet this place is really spooky late at night!
15:Misfortunes never come alone/single. 
16:I shouldn't have lett so tast.

2.2.2 利用中括号 “[]” 查找集合字符

“[]” 内的多个字符仅代表一个字符。

查找 “shirt” 与 “short”：

[root@localhost ~]# grep -n 'sh[io]rt' test.txt
1:he was short and fat. 
2:He was wearing a blue polo shirt with black pants.

查找包含重复单个字符 “oo” 的字符串：

[root@localhost ~]# grep -n 'oo' test.txt
3:The home of Football on BBC Sport online. 
5:google is the best tools for search keyword. 
8:a wood cross!
11:#woood #
12:#woo00oood #
14:I bet this place is really spooky late at night!

查找 “oo” 前面不是 “w” 的字符串：

[root@localhost ~]# grep -n '[^w]oo' test.txt
3:The home of Football on BBC Sport online. 
5:google is the best tools for search keyword. 
11:#woood #
12:#wooo0oood #
14:I bet this place is really spoky late at night!

查找不希望 “oo” 前面存在小写字母的字符串：

[root@localhost ~]# grep -n '[^a-z]oo' test.txt
3:The home of Football on BBC Sport online.

查找包含数字的行：

[root@localhost ~]# grep -n '[0-9]' test.txt
4:the tongue is boneless but it breaks bones.12!
7:PI=3.141592653589793238462643383249901429

2.2.3 查找行首 “^” 与行尾字符 “$”

“^” 表示行首，“$” 表示行尾。

查找以 “the” 为行首的行：

[root@localhost ~]# grep -n '^the' test.txt
4:the tongue is boneless but it breaks bones.12!

查找以小写字母开头的行：

[root@localhost ~]# grep -n '^[a-z]' test.txt
1:he was short and fat. 
4:the tongue is boneless but it breaks bones.12!
5:google is the best tools for search keyword. 
8:a wood cross!

查找以大写字母开头的行：

[root@localhost ~]# grep -n '^[A-Z]' test.txt
2:He was wearing a blue polo shirt with black pants. 
3:The home of Football on BBC Sport online. 
6:The year ahead will test our political establishment to the limit.
7:PI=3.141592653589793238462643383249901429
9:Actions speak louder than words
13:AxyzxyzxyzxyzC
14:I bet this place is really spooky late at night!
15:Misfortunes never come alone/single. 
16:I shouldn't have lett so tast.

查找不以字母开头的行：

[root@localhost ~]# grep -n '^[^a-zA-Z]' test.txt
11:#woood #
12:#woo000ood #

查找以小数点 “.” 结尾的行（“.” 是元字符，需用 “\” 转义）：

[root@localhost ~]# grep -n '\.$' test.txt
1:he was short and fat. 
2:He was wearing a blue polo shirt with black pants. 
3:The home of Football on BBC Sport online. 
5:google is the best tools for search keyword.
6:The year ahead will test our political establishment to the limit. 
15:Misfortunes never come alone/single. 
16:I shouldn't have lett so tast.

查找空白行：

[root@localhost ~]# grep -n '^$' test.txt
10:

2.2.4 查找任意一个字符 “.” 与重复字符 “*”

“.” 代表任意一个字符，“*” 代表重复零个或多个前面的单字符。

查找 “w??d” 的字符串：

[root@localhost ~]# grep -n 'w..d' test.txt
5:google is the best tools for search keyword.
8:a wood cross!
9:Actions speak louder than words

查找包含至少两个 “o” 以上的字符串：

[root@localhost ~]# grep -n 'ooo*' test.txt
3:The home of Football on BBC Sport online. 
5:google is the best tools for search keyword. 
8:a wood cross!
11:#woood #
12:#woo00oood #
14:I bet this place is really spooky late at night!

查找以 “w” 开头 “d” 结尾，中间包含至少一个 “o” 的字符串：

[root@localhost ~]# grep -n 'woo*d' test.txt
8:a wood cross!
11:#woood #
12:#woooooood #

查找以 “w” 开头 “d” 结尾，中间字符可有可无的字符串：

[root@localhost ~]# grep -n 'w.*d' test.txt
1:he was short and fat. 
5:google is the best tools for search keyword. 
8:a wood cross!
9:Actions speak louder than words
11:#woood #
12:#woo00oood #

查找任意数字所在行：

[root@localhost ~]# grep -n '[0-9][0-9]*' test.txt
4:the tongue is boneless but it breaks bones.12!
7:PI=3.141592653589793238462643383249901429

2.2.5 查找连续字符范围 “{}”

“{}” 用于限制重复字符串的范围，在 Shell 中使用需转义。

查找两个 “o” 的字符：

[root@localhost ~]# grep -n 'o\{2\}' test.txt
3:The home of Football on BBC Sport online. 
5:google is the best tools for search keyword. 
8:a wood cross!
11:#woood #
12:#wo0000ood #
14:I bet this place is really spooky late at night!

查找以 “w” 开头以 “d” 结尾，中间包含 2 - 5 个 “o” 的字符串：

[root@localhost ~]# grep -n 'wo\{2,5\}d' test.txt
8:a wood cross!
11:#woood #

查找以 “w” 开头以 “d” 结尾，中间包含 2 个或 2 个以上 “o” 的字符串：

[root@localhost ~]# grep -n 'wo\{2,\}d' test.txt
8:a wood cross!
11:#woood #
12:#woo00oood #

2.3 元字符总结

字符	描述
\	将下一个字符标记为一个特殊字符、或一个原义字符、或一个向后引用、或一个八进制转义符。例如，'n' 匹配字符 "n"。'\n' 匹配一个换行符。序列 '\\' 匹配 "\" 而 "\(" 则匹配 "("。
^	匹配输入字符串的开始位置。如果设置了 RegExp 对象的 Multiline 属性，^ 也匹配 '\n' 或 '\r' 之后的位置。
$	匹配输入字符串的结束位置。如果设置了RegExp 对象的 Multiline 属性，$ 也匹配 '\n' 或 '\r' 之前的位置。
*	匹配前面的子表达式零次或多次。例如，zo* 能匹配 "z" 以及 "zoo"。* 等价于{0,}。
+	匹配前面的子表达式一次或多次。例如，'zo+' 能匹配 "zo" 以及 "zoo"，但不能匹配 "z"。+ 等价于 {1,}。
?	匹配前面的子表达式零次或一次。例如，"do(es)?" 可以匹配 "do" 或 "does" 。? 等价于 {0,1}。
{n}	n 是一个非负整数。匹配确定的 n 次。例如，'o{2}' 不能匹配 "Bob" 中的 'o'，但是能匹配 "food" 中的两个 o。
{n,}	n 是一个非负整数。至少匹配n 次。例如，'o{2,}' 不能匹配 "Bob" 中的 'o'，但能匹配 "foooood" 中的所有 o。'o{1,}' 等价于 'o+'。'o{0,}' 则等价于 'o*'。
{n,m}	m 和 n 均为非负整数，其中n <= m。最少匹配 n 次且最多匹配 m 次。例如，"o{1,3}" 将匹配 "fooooood" 中的前三个 o。'o{0,1}' 等价于 'o?'。请注意在逗号和两个数之间不能有空格。
?	当该字符紧跟在任何一个其他限制符 (*, +, ?, {n}, {n,}, {n,m}) 后面时，匹配模式是非贪婪的。非贪婪模式尽可能少的匹配所搜索的字符串，而默认的贪婪模式则尽可能多的匹配所搜索的字符串。例如，对于字符串 "oooo"，'o+?' 将匹配单个 "o"，而 'o+' 将匹配所有 'o'。
.	匹配除换行符（\n、\r）之外的任何单个字符。要匹配包括 '\n' 在内的任何字符，请使用像"(.\|\n)"的模式。
(pattern)	匹配 pattern 并获取这一匹配。所获取的匹配可以从产生的 Matches 集合得到，在VBScript 中使用 SubMatches 集合，在JScript 中则使用 $0…$9 属性。要匹配圆括号字符，请使用 '$' 或 '$'。
(?:pattern)	匹配 pattern 但不获取匹配结果，也就是说这是一个非获取匹配，不进行存储供以后使用。这在使用 "或" 字符 (\|) 来组合一个模式的各个部分是很有用。例如， 'industr(?:y\|ies) 就是一个比 'industry\|industries' 更简略的表达式。
(?=pattern)	正向肯定预查（look ahead positive assert），在任何匹配pattern的字符串开始处匹配查找字符串。这是一个非获取匹配，也就是说，该匹配不需要获取供以后使用。例如，"Windows(?=95\|98\|NT\|2000)"能匹配"Windows2000"中的"Windows"，但不能匹配"Windows3.1"中的"Windows"。预查不消耗字符，也就是说，在一个匹配发生后，在最后一次匹配之后立即开始下一次匹配的搜索，而不是从包含预查的字符之后开始。
(?!pattern)	正向否定预查(negative assert)，在任何不匹配pattern的字符串开始处匹配查找字符串。这是一个非获取匹配，也就是说，该匹配不需要获取供以后使用。例如"Windows(?!95\|98\|NT\|2000)"能匹配"Windows3.1"中的"Windows"，但不能匹配"Windows2000"中的"Windows"。预查不消耗字符，也就是说，在一个匹配发生后，在最后一次匹配之后立即开始下一次匹配的搜索，而不是从包含预查的字符之后开始。
(?<=pattern)	反向(look behind)肯定预查，与正向肯定预查类似，只是方向相反。例如，"(?<=95\|98\|NT\|2000)Windows"能匹配"2000Windows"中的"Windows"，但不能匹配"3.1Windows"中的"Windows"。
(?<!pattern)	反向否定预查，与正向否定预查类似，只是方向相反。例如"(?<!95\|98\|NT\|2000)Windows"能匹配"3.1Windows"中的"Windows"，但不能匹配"2000Windows"中的"Windows"。
x\|y	匹配 x 或 y。例如，'z\|food' 能匹配 "z" 或 "food"。'(z\|f)ood' 则匹配 "zood" 或 "food"。
[xyz]	字符集合。匹配所包含的任意一个字符。例如， '[abc]' 可以匹配 "plain" 中的 'a'。
[^xyz]	负值字符集合。匹配未包含的任意字符。例如， '[^abc]' 可以匹配 "plain" 中的'p'、'l'、'i'、'n'。
[a-z]	字符范围。匹配指定范围内的任意字符。例如，'[a-z]' 可以匹配 'a' 到 'z' 范围内的任意小写字母字符。
[^a-z]	负值字符范围。匹配任何不在指定范围内的任意字符。例如，'[^a-z]' 可以匹配任何不在 'a' 到 'z' 范围内的任意字符。
\b	匹配一个单词边界，也就是指单词和空格间的位置。例如， 'er\b' 可以匹配"never" 中的 'er'，但不能匹配 "verb" 中的 'er'。
\B	匹配非单词边界。'er\B' 能匹配 "verb" 中的 'er'，但不能匹配 "never" 中的 'er'。
\cx	匹配由 x 指明的控制字符。例如， \cM 匹配一个 Control-M 或回车符。x 的值必须为 A-Z 或 a-z 之一。否则，将 c 视为一个原义的 'c' 字符。
\d	匹配一个数字字符。等价于 [0-9]。
\D	匹配一个非数字字符。等价于 [^0-9]。
\f	匹配一个换页符。等价于 \x0c 和 \cL。
\n	匹配一个换行符。等价于 \x0a 和 \cJ。
\r	匹配一个回车符。等价于 \x0d 和 \cM。
\s	匹配任何空白字符，包括空格、制表符、换页符等等。等价于 [ \f\n\r\t\v]。
\S	匹配任何非空白字符。等价于 [^ \f\n\r\t\v]。
\t	匹配一个制表符。等价于 \x09 和 \cI。
\v	匹配一个垂直制表符。等价于 \x0b 和 \cK。
\w	匹配字母、数字、下划线。等价于'[A-Za-z0-9_]'。
\W	匹配非字母、数字、下划线。等价于 '[^A-Za-z0-9_]'。

2.4 扩展正则表达式

扩展正则表达式可简化指令，grep 命令仅支持基础正则表达式，使用扩展正则表达式需用 egrep 或 awk 命令。egrep 命令与 grep 用法相似，可搜索文件中的任意字符串和符号。

元字符	含义	示例及解释
+	匹配前面的子表达式一次或多次，即至少出现一次。	模式 `go+gle` 能匹配 `google`、`gooogle` 等，但无法匹配 `gle`。
?	匹配前面的子表达式零次或一次，也就是该字符可有可无。	模式 `colou?r` 能匹配 `color` 和 `colour`。
\|	表示或关系，用于匹配多个选择中的任意一个。	模式 `cat\|dog` 可以匹配 `cat` 或者 `dog`。
()	用于分组，将多个字符组合成一个整体，便于后续操作，还可用于后向引用。	模式 `(ab)+` 能匹配 `ab`、`abab` 等；`(\d{3})-(\d{4})` 可将电话号码分为区号和号码两部分，方便后续引用。
{m,n}	指定前面的子表达式出现的次数范围，m 是下限，n 是上限，都为非负整数且 m <= n。若省略 m，则表示 0 到 n 次；若省略 n，则表示至少 m 次。	模式 `a{2,4}` 能匹配 `aa`、`aaa`、`aaaa`；`a{3,}` 能匹配 `aaa`、`aaaa` 等。

例如，查询除文件中空白行与行首为 “#” 之外的行，基础正则表达式需用管道命令搜索两次：

[root@localhost ~]# grep -v '^$' test.txt|grep -v '^#'

扩展正则表达式可简化为：

[root@localhost ~]# egrep -v '^$|^#' test.txt

三、文本处理器

3.1 sed 工具

sed（Stream EDitor）是强大且简单的文本解析转换工具，可读取文本并编辑，广泛应用于 Shell 脚本。

3.1.1 工作流程

sed 工作流程包括读取、执行和显示三个过程：

读取：从输入流（文件、管道、标准输入）读取一行内容到临时缓冲区（模式空间）。
执行：默认在模式空间顺序执行 sed 命令，除非指定行地址，否则在所有行依次执行。
显示：将修改后的内容发送到输出流，发送后清空模式空间。该过程重复直至所有内容处理完。默认情况下，输入文件不会改变，除非用重定向存储输出。

3.1.2 命令选项

常见 sed 命令选项：

选项	完整形式	说明
-e	--expression=	用指定命令或脚本来处理输入文本文件
-f	--file=	用指定的脚本文件来处理输入文本文件
-h	--help	显示帮助
-n	--quiet、silent	仅显示处理后的结果
-i	无	直接编辑文本文件

3.1.3 操作命令

“操作” 指定对文件的动作行为，格式通常为 “[n1 [,n2]] 操作参数”，n1、n2 可选，代表操作的行数。常见操作：

操作	说明
a	在当前行下面增加一行指定内容
c	将选定行替换为指定内容
d	删除选定的行
i	在选定行上面插入一行指定内容
p	指定行则打印指定行，不指定则打印所有内容，有非打印字符以 ASCII 码输出，常与 “-n” 选项一起使用
s	替换指定字符
y	字符转换

3.1.4 用法示例

以 test.txt 文件为例：

输出符合条件的文本：
- 输出所有内容：

[root@localhost ~]# sed -n 'p' test.txt

输出第 3 行：

[root@localhost ~]# sed -n '3p' test.txt

输出 3 - 5 行：

[root@localhost ~]# sed -n '3,5p' test.txt

输出所有奇数行：

[root@localhost ~]# sed -n 'p;n' test.txt

输出所有偶数行：

[root@localhost ~]# sed -n 'n;p' test.txt

输出第 1 - 5 行之间的奇数行：

[root@localhost ~]# sed -n '1,5{p;n}' test.txt

输出第 10 行至文件尾之间的偶数行：

[root@localhost ~]# sed -n '10,${n;p}' test.txt

输出包含 “the” 的行：

[root@localhost ~]# sed -n '/the/p' test.txt

输出从第 4 行至第一个包含 “the” 的行：
```
[root@localhost ~]# sed -n '4,/the/p
```
3.2 awk 工具
3.2.1 awk 工具概述与命令格式
- awk 是功能强大的编辑工具，逐行读取文本，根据匹配模式查找、格式化输出或过滤处理。命令格式为：
```
awk选项'模式或条件{编辑指令}'文件1文件2...
awk -f脚本文件文件1文件2...
```
- awk 倾向于将一行分成多个 “字段” 处理，默认字段分隔符为空格或 tab 键，可使用逻辑操作符和进行数学运算。

3.2.2 awk 内建变量

`FS`	指定每行文本的字段分隔符，默认为空格或制表位
`NF`	当前处理的行的字段个数
`NR`	当前处理的行的行号（序数）
`$0`	当前处理的行的整行内容
`$n`	当前处理行的第 n 个字段（第 n 列）
`FILENAME`	被处理的文件名
`RS`	数据记录分隔，默认为`\n`，即每行为一条记录

3.2.3 awk 用法示例

按行输出文本：输出所有内容：

awk '{print}' test.txt
awk '{print $0}' test.txt

输出第 1 - 3 行内容：

awk 'NR==1, NR==3{print}' test.txt
awk '(NR>=1)&&(NR<=3){print}' test.txt

Shell编程之正则表达式与文本处理器

目录一、引言二、正则表达式 2.1 定义与用途 2.2 基础正则表达式 2.2.1 查找特定字符 2.2.2 利用中括号 “[]” 查找集合字符 2.2.3 查找行首 “^” 与行尾字符 “$” 2.2.4 查找任意一个字符 “.” 与重复字符 “*” 2.2.5 查找连续字符范围 “{}” 2.3 元字符总结…...

编程日记 2025/8/25 0:01:33

TMDOG——语言大模型进行意图分析驱动后端实践

语言大模型进行意图分析驱动后端实践项目概述项目地址：https://github.com/TMDOG666/AI_Backend_Demo 该项目通过语言大模型，通过分析用户意图、拆分任务、构建API调用链来驱动后端实践。以一个简单的教务系统后端为例，将教务系统后端…...

编程日记 2025/8/25 0:00:20

未启用CUDA支持的PyTorch环境** 中使用GPU加速解决方案

1. 错误原因分析根本问题：当前安装的PyTorch是CPU版本，无法调用GPU硬件加速。当运行以下代码时会报错：model YOLO("yolov8n.pt").to("cuda") # 或 .cuda()2. 解决方案步骤步骤1：验证CUDA可用性在Pyth…...

编程日记 2025/8/24 23:59:05

【mysql】Mac 通过 brew 安装 mysql 、启动以及密码设置

Mac 通过 brew 安装 mysql 、启动以及密码设置使用 brew 安装 mysqlmysql 启动mysql密码设置参考文章： 使用 brew 安装 mysql brew install mysqlmysql 启动下载完毕，终端告诉我们mysql数据库没有设置密码的，我们可以直接执行 mysql -u r…...

编程日记 2025/8/25 0:00:20

核心源码位置 Vue 2 的 nextTick 实现主要在 src/core/util/next-tick.js 文件中。完整源码结构 import { noop } from shared/util import { handleError } from ./error import { isIE, isIOS, isNative } from ./envexport let isUsingMicroTask falseconst callbacks …...

编程日记 2025/8/24 6:02:12

Ubuntu 安装 NVIDIA显卡驱动、CUDA 以及 CuDNN工具

文章目录一、简介二、查看显卡设备三、安装显卡驱动四、安装CUDA工具箱五、安装CuDNN小结一、简介 NVIDIA 驱动：操作系统与 NVIDIA 显卡硬件之间的桥梁，负责驱动显卡硬件的运行，显卡的“底层操作系统”，一切的基础。CUDA&#…...

编程日记 2025/8/22 13:08:55

LeetCode算法题(Go语言实现)_50

题目现有一个包含所有正整数的集合 [1, 2, 3, 4, 5, …] 。实现 SmallestInfiniteSet 类： SmallestInfiniteSet() 初始化 SmallestInfiniteSet 对象以包含所有正整数。 int popSmallest() 移除并返回该无限集中的最小整数。 void addBack(int num) 如果正整数 …...

编程日记 2025/8/23 23:32:44

idea报错java: 非法字符: ‘\ufeff‘解决方案

解决方案步骤以及说明 BOM是什么？1. BOM的作用2. 为什么会出现 \ufeff 错误？3. 如何解决 \ufeff 问题？ 最后重新编译，即可运行！！！ BOM是什么？ \ufeff 是 Unicode 中的 BOM&#xff0…...

编程日记 2025/8/25 0:00:22

WPF依赖注入IHostApplicationLifetime关闭程序

WPF依赖注入IHostApplicationLifetime关闭程序使用Application.Current.Shutdown();退出会报异常应该使用 app.Dispatcher.InvokeShutdown(); Application.Current.Shutdown();app.Dispatcher.InvokeShutdown();static App app new();[STAThread]public static void Main(…...

编程日记 2025/8/25 0:00:55

如何在 IntelliJ IDEA 中安装通义灵码 - AI编程助手提升开发效率

随着人工智能技术的飞速发展，AI 编程助手已成为提升开发效率和代码质量的强大工具。在众多 AI 编程助手之中，阿里云推出的通义灵码凭借其智能代码补全、代码解释、生成单元测试等丰富功能，脱颖而出，为开发者带来了全新的编程体验。…...

编程日记 2025/8/20 10:24:47

【力扣】两两交换链表中的节点

两两交换链表中的节点代码： /*** Definition for singly-linked list.* struct ListNode {* int val;* ListNode *next;* ListNode() : val(0), next(nullptr) {}* ListNode(int x) : val(x), next(nullptr) {}* ListNode(int x, ListNode *n…...

编程日记 2025/8/25 0:00:22

数据共享交换平台之文件交换

数据共享交换平台的文件交换管理功能提供部门与部门之间的文件交换通道，满足跨部门之间文件交换需求。文件交换需要能够按照交换业务场景对交换通道进行分类管理。文件交换管理需满足如下要求： 1.文件交换统计：支持查看本部门与其他部门之间…...

编程日记 2025/8/25 0:00:22

什么是全球代理？如何选择全球代理服务？

在全球化不断深化的今天，互联网已经成为人类沟通、工作和学习的重要纽带。而全球代理则是这一纽带上的关键技术之一，它赋予了我们探索不同地区网络资源的能力。今天，我们来聊聊什么是全球代理、它能做什么，以及如何选择合适的全球…...

编程日记 2025/8/24 23:59:04

Spring Boot整合Kafka的详细步骤

1. 安装Kafka 下载Kafka：从Kafka官网下载最新版本的Kafka。解压并启动： 解压Kafka文件后，进入bin目录。启动ZooKeeper：./zookeeper-server-start.sh ../config/zookeeper.properties。启动Kafka：./kafka-server-…...

编程日记 2025/8/17 20:33:10

【正点原子STM32MP257连载】第四章 ATK-DLMP257B功能测试——USB WIFI测试 #WIFI蓝牙二合一 #RTL8733BU

1）实验平台：正点原子ATK-DLMP257B开发板 2）浏览产品：https://www.alientek.com/Product_Details/135.html 3）全套实验源码手册视频下载：正点原子资料下载中心文章目录第四章 ATK-DLMP257B功能测试——USB…...

编程日记 2025/8/21 19:06:39

Doip功能寻址走UDP协议

目前使用 connect()函数的UDP客户端 ,这里接收数据解析的地方查看一下。如果使用 bind()、sendto()、recvfrom() 组合那么返回值和发送要在做调整，，根据业务需要后续在调整其余的和原来的逻辑都是一样的，只是协议变了而已。 if serv…...

编程日记 2025/8/25 0:00:21

硬件电路设计之51单片机（2）

声明：绘制原理图和PCB的软件为嘉立创EDA。根据B站尚硅谷嵌入式之原理图&PCB设计教程学习所作个人用笔记。目录一、原理图详解 1、TypeC接口 （1）TypeC接口介绍 （2）TypeC原理图 2、5V转3.3V 3、单片机电源开…...

编程日记 2025/8/21 18:54:48

Deeplizard 深度学习课程（一）—— Pytorch 和 Tensor 简介

前言该pytorch笔记参考deeplizard官方网站课程，有相应视频和博客，链接如下： deeplizardhttps://deeplizard.com/learn/video/v5cngxo4mIg 1.Pytorch 简介 PyTorch 是一个深度学习框架和一个科学计算包。PyTorch 的科学计算方面主要是 PyTo…...

编程日记 2025/8/24 23:58:28

Delphi HMAC算法

1. 前言今天做一个三方接口，接口文档描述签名采用MD5，但是实际测试过程中，始终校验不通过，经过和三方沟通，才知道采用的是HMAC-MD5。由于Delphi7没有对HMAC的支持，则采用XE版本来支持。本次使用Delphi XE …...

编程日记 2025/8/24 13:05:35

Ubuntu服务器性能调优指南：从基础工具到系统稳定性提升

一、性能监控工具的三维应用 1.1 监控矩阵构建通过组合工具搭建立体监控体系： # 实时进程监控 htop --sort-keyPERCENT_CPU# 存储性能采集 iostat -dx 2# 内存分析组合拳 vmstat -SM 1 | awk NR>2 {print "Active:"$5"MB Swpd:"$3"…...

编程日记 2025/8/25 0:01:32

深度解析C++开源OCR引擎：架构、编译优化与工业级部署指南

1. 引言：OCR技术演进与现状分析光学字符识别(OCR)技术经历了从传统模式识别到深度学习的三代发展：第一代：基于模板匹配（1970s-1990s）第二代：特征提取+分类器（1990s-2010s）第三代：端到端深度学习（2010s-至今）当前工业界主流方案呈现"双轨制"发展态势…...

编程日记 2025/8/23 7:32:02

关于Newtonsoft.Json

历史 Newtonsoft.Json（也称为 Json.NET）是由 James Newton - King 开发的一个开源的 JSON 处理库，它于 2007 年首次发布。在早期，.NET 平台缺乏一个强大且灵活的 JSON 处理工具，Newtonsoft.Json 应运而生，…...

编程日记 2025/8/17 18:35:31

Spark-Sql编程（三）

一、数据加载与保存通用方式：使用spark.read.load和df.write.save，通过format指定数据格式（如csv、jdbc、json等），option设置特定参数（jdbc格式下的url、user等），load和save指定路…...

编程日记 2025/8/22 11:10:14

CTF--好像需要管理员

一、原网页： 二、步骤： 1.扫描： 发现：robots.txt 2.打开robots.txt： 3.打开resul.php： 4.代码解析： if ($_GET[x]$password) //检查通过 URL 参数 x 传递的值是否等于变量 $password 的值详…...

编程日记 2025/8/22 4:14:17

耀圣控制设备有限公司总经理李雨蔓的创业之路

破浪者李雨蔓：从零到行业标杆的铿锵之路在浙江永嘉这片被誉为“中国泵阀之乡”的热土上，一位86年出生的女性企业家，用十年光阴书写了一段白手起家的传奇。她，是一曲关于勇气、智慧与匠心的赞歌。从技术员到行业标杆的缔造者&…...

编程日记 2025/8/24 1:45:38

Spring Boot JPA 开发之Not an entity血案

项目状况介绍项目环境 JDK 21Spring Boot 3.4.3Hibernate： 6.6.13.Final项目描述因为是微服务架构，项目层级如下 project-parent project-com project-A … project-X 其中： project-parent定义依赖库的版本project-com 定义了一些公用的方法和配置，包括持久层的配置。…...

编程日记 2025/8/23 8:32:06

什么是车规级MCU?STM32也能上车规级场景？

一、车规级MCU的定义车规级MCU（Microcontroller Unit）是专为汽车电子系统设计的微控制器芯片，集成CPU、存储器、外设接口等功能模块，用于实现车辆控制、数据处理和实时响应。其核心特点包括： 高可靠性：需在…...

编程日记 2025/8/24 17:58:45

vue3.2 + element-plus 实现跟随input输入框的弹框，弹框里可以分组或tab形式显示选项

效果基础用法（分组选项） 高级用法（带Tab栏）  <template><div class"smart-selector-container"><el-popover :visible"visible" :w…...

编程日记 2025/8/21 2:13:59

go 指针接收者和值接收者的区别

go 指针接收者和值接收者的区别指针接收者和值接收者的区别主要有两点： Go 中函数传参是传值，因此指针接收者传递的是接收者的指针拷贝，值接收者传递的是接收者的拷贝---在方法中指针接收者的变量会被修改，而值接收者的成员变量…...

编程日记 2025/8/19 10:51:31

部署qwen2.5-VL-7B

简单串行执行 from transformers import Qwen2_5_VLForConditionalGeneration, AutoProcessor from qwen_vl_utils import process_vision_info import torch, time, threadingdef llm(model_path,promptNone,imageNone,videoNone,imagesNone,videosNone,max_new_tokens2048,t…...

编程日记 2025/8/17 21:09:09

一、引言

二、正则表达式

2.1 定义与用途

2.2 基础正则表达式

2.2.1 查找特定字符

2.2.2 利用中括号 “[]” 查找集合字符

2.2.3 查找行首 “^” 与行尾字符 “$”

2.2.4 查找任意一个字符 “.” 与重复字符 “*”

2.2.5 查找连续字符范围 “{}”

2.3 元字符总结

2.4 扩展正则表达式

三、文本处理器

3.1 sed 工具

3.1.1 工作流程

3.1.2 命令选项

3.1.3 操作命令

3.1.4 用法示例

3.2 awk 工具

3.2.1 awk 工具概述与命令格式

3.2.2 awk 内建变量

3.2.3 awk 用法示例

相关文章：