当前位置：首页 > news >正文

Shell 中的 Globbing：原理、使用方法与实现解析（中英双语）

news 来源：原创 2025/5/9 14:44:30

Shell 中的 Globbing：原理、使用方法与实现解析

在 Unix Shell（如 Bash、Zsh）中，globbing 是指 文件名模式匹配（filename pattern matching），它允许用户使用特殊的通配符（wildcards）来匹配多个文件，而不需要手动列出所有文件名。这一功能是 Shell 解析命令时的一个重要步骤，极大地提高了命令行操作的灵活性。

1. 什么是 Globbing？

Globbing 是 Shell 解释用户输入的命令时，将包含通配符的模式 扩展为符合匹配规则的文件名列表 的过程。例如：

ls *.txt

在执行 ls *.txt 时，Shell 不会将 *.txt 直接传递给 ls，而是会 先解析 *.txt 并匹配当前目录下的所有 .txt 文件，然后把结果传递给 ls 命令。例如，当前目录下有：

file1.txt file2.txt file3.log

则：

ls *.txt

实际上等价于：

ls file1.txt file2.txt

其中 file3.log 因不符合 *.txt 的模式匹配规则而被排除。

2. Globbing 的常见通配符

Shell 的 globbing 机制支持多种 通配符（wildcards），常见的有以下几种：

通配符	作用	示例	匹配内容
`*`	匹配任意数量的字符（包括 0 个字符）	`*.txt`	`a.txt`、`b.txt`、`test.txt`
`?`	匹配任意单个字符	`file?.txt`	`file1.txt`、`file2.txt`，但不匹配 `file10.txt`
`[abc]`	匹配 `[]` 内的任意一个字符	`file[12].txt`	`file1.txt`、`file2.txt`
`[a-z]`	匹配某个范围内的字符	`file[a-z].txt`	`filea.txt`、`fileb.txt`
`{a,b,c}`	匹配逗号分隔的任意一个模式	`file{1,2,3}.txt`	`file1.txt`、`file2.txt`、`file3.txt`
`**` (仅 Bash 4.0+)	递归匹配所有子目录	`*/.txt`	匹配当前目录及所有子目录中的 `.txt` 文件

3. Globbing 的执行流程

在 Shell 处理用户输入的命令时，globbing 是命令解析（parsing）过程中的一个步骤。执行流程如下：

用户输入命令（例如 ls *.txt）。
Shell 解析命令：
- 如果命令行包含通配符（如 *），Shell 进入 globbing 处理。
- Shell 读取当前目录下的文件列表，并 匹配符合规则的文件名。
Shell 替换通配符模式：
- *.txt 被替换为所有匹配的文件名，如 file1.txt file2.txt。
Shell 执行最终命令：
- ls file1.txt file2.txt

注意：如果没有任何文件匹配通配符模式，大多数 Shell 会直接返回原始模式，如：
echo *.xyz
如果 *.xyz 没有匹配的文件，Bash 会直接输出 *.xyz，而不会报错。

4. Globbing 与正则表达式的区别

Globbing 并不是正则表达式，它们有以下主要区别：

特性	Globbing	正则表达式
作用	文件名匹配	处理文本模式匹配
`*` 含义	匹配任意字符（包括空字符）	匹配前一个字符 0 次或多次
`?` 含义	匹配任意单个字符	匹配前一个字符 0 或 1 次
`.` 含义	作为普通字符匹配	代表任意单个字符

示例：

ls *.txt    # 使用 globbing，匹配所有 .txt 结尾的文件
grep 'a.*b' file.txt   # 使用正则表达式，匹配 'a' 到 'b' 之间的任何字符

5. 禁用 Globbing

有时候，我们希望 Shell 不要自动展开通配符，而是让命令接收到原始的 * 或 ? 等字符。可以使用以下方法：

使用单引号 ''

echo '*.txt'  # 输出 *.txt，而不是匹配的文件列表

使用 set -f 关闭 globbing

set -f
echo *.txt   # 直接输出 *.txt
set +f       # 重新开启 globbing

6. Shell 中的 Globbing 实现

Globbing 在 Shell 内部是如何实现的呢？主要分为以下几步：

读取命令：Shell 读取用户输入的命令字符串。
解析通配符：
- 遍历当前目录文件列表。
- 依次对文件名进行 模式匹配（Pattern Matching）。
- 使用 字符串匹配算法 进行匹配，如：
  - * 进行贪心匹配（Greedy Match）。
  - ? 进行单字符匹配。
  - [a-z] 进行范围匹配。
替换匹配项：
- 匹配的文件列表替换原始通配符字符串。
执行命令：Shell 执行替换后的命令。

Shell 通常使用 系统调用 opendir() 和 readdir() 访问目录并进行匹配。

7. 编写 C 代码实现简单的 Globbing

下面是一个使用 fnmatch() 函数进行 Shell 风格模式匹配的 C 代码示例：

具体原理和代码解析请看笔者的另一篇博客：深入解析 fnmatch()：C 语言中的模式匹配函数（中英双语）

#include <stdio.h>
#include <stdlib.h>
#include <dirent.h>
#include <fnmatch.h>void list_matching_files(const char *pattern) {struct dirent *entry;DIR *dir = opendir(".");if (!dir) {perror("opendir");return;}while ((entry = readdir(dir)) != NULL) {if (fnmatch(pattern, entry->d_name, 0) == 0) {printf("%s\n", entry->d_name);}}closedir(dir);
}int main() {list_matching_files("*.c");  // 匹配当前目录下的所有 .c 文件return 0;
}

运行示例：

$ gcc globbing.c -o globbing
$ ./globbing
main.c
utils.c
shell.c

8. 结论

Globbing 是 Shell 解析命令的重要步骤，主要用于 文件名匹配，其实现涉及 字符串匹配算法、系统目录读取 等技术。用户可以利用 通配符 灵活地批量操作文件，但要注意它与 正则表达式 的区别。此外，用户可以通过 单引号 或 set -f 禁用 Globbing，使 Shell 直接传递原始字符串。理解 Globbing 的原理可以帮助我们更高效地使用 Shell 命令，提高自动化任务的执行效率。

这篇博客详细介绍了 Globbing 的概念、用法、实现原理、C 代码示例，希望能帮助你更深入地理解这个 Shell 机制！ 🚀

Shell Globbing: Principles, Usage, and Implementation

Globbing in Unix Shell (such as Bash, Zsh) refers to filename pattern matching, where users can use special wildcard characters to match multiple files without manually listing their names. This feature enhances the flexibility of command-line operations.

1. What is Globbing?

Globbing is the process where the Shell expands wildcard patterns into matching filenames before executing a command.

For example, consider the command:

ls *.txt

Instead of passing *.txt as an argument to ls, the Shell first expands the pattern by searching for files in the current directory that match the pattern. If the directory contains:

file1.txt file2.txt file3.log

then the command:

ls *.txt

is actually executed as:

ls file1.txt file2.txt

while file3.log is ignored because it does not match *.txt.

2. Common Wildcards in Globbing

Shell globbing supports several wildcards for flexible pattern matching:

Wildcard	Description	Example	Matches
`*`	Matches any number of characters (including none)	`*.txt`	`a.txt`, `b.txt`, `test.txt`
`?`	Matches any single character	`file?.txt`	`file1.txt`, `file2.txt` (not `file10.txt`)
`[abc]`	Matches any single character in brackets	`file[12].txt`	`file1.txt`, `file2.txt`
`[a-z]`	Matches any character in the range	`file[a-z].txt`	`filea.txt`, `fileb.txt`
`{a,b,c}`	Matches any of the comma-separated patterns	`file{1,2,3}.txt`	`file1.txt`, `file2.txt`, `file3.txt`
`**` (Bash 4.0+)	Recursively matches files in subdirectories	`*/.txt`	All `.txt` files in the directory tree

3. How Globbing Works Internally

When a user enters a command, Shell processing follows these steps:

User inputs a command (e.g., ls *.txt).
Shell scans for wildcards:
- If a command argument contains a wildcard (*, ?, etc.), Shell performs globbing.
- It retrieves the list of files in the current directory.
- It matches filenames against the pattern.
Shell replaces the pattern with matching filenames:
- If *.txt matches file1.txt file2.txt, the final command becomes:
```
ls file1.txt file2.txt
```
Shell executes the command.

Note: If no files match, some shells return the original pattern (e.g., echo *.xyz outputs *.xyz).

4. Difference Between Globbing and Regular Expressions

Globbing is not the same as regular expressions. Key differences:

Feature	Globbing	Regular Expressions
Purpose	Matches filenames	Matches text patterns
`*`	Matches any characters	Matches previous character zero or more times
`?`	Matches one character	Matches previous character zero or one time
`.`	Treated as a normal character	Matches any character

Example:

ls *.txt         # Uses globbing to list all .txt files
grep 'a.*b' file.txt  # Uses regex to match 'a' followed by 'b'

5. Disabling Globbing

To prevent Shell from expanding wildcards, use:

Single quotes (''):

echo '*.txt'  # Outputs *.txt without expansion

Disable globbing with set -f:

set -f
echo *.txt   # Outputs *.txt
set +f       # Re-enables globbing

6. How Globbing is Implemented in Shell

Internally, globbing is handled in these steps:

Shell reads the command string.
Pattern matching against directory contents:
- It retrieves files using system calls like opendir() and readdir().
- It applies pattern matching algorithms.
Matches are substituted before executing the command.

7. Implementing Globbing in C

The following C program demonstrates pattern matching using fnmatch(), which applies glob-style matching:

#include <stdio.h>
#include <stdlib.h>
#include <dirent.h>
#include <fnmatch.h>void list_matching_files(const char *pattern) {struct dirent *entry;DIR *dir = opendir(".");if (!dir) {perror("opendir");return;}while ((entry = readdir(dir)) != NULL) {if (fnmatch(pattern, entry->d_name, 0) == 0) {printf("%s\n", entry->d_name);}}closedir(dir);
}int main() {list_matching_files("*.c");  // Matches all `.c` files in the directoryreturn 0;
}

Example Output

If the directory contains main.c utils.c shell.c, running:

$ gcc globbing.c -o globbing
$ ./globbing
main.c
utils.c
shell.c

8. Conclusion

Globbing is a key feature of Shell parsing, allowing users to efficiently match filenames using wildcards. It differs from regular expressions and is processed before executing commands. Understanding globbing helps users write more efficient command-line operations and scripts. It is implemented at the Shell level using directory scanning and pattern matching algorithms.

Mastering globbing enables more effective batch file operations, automation, and scripting in Unix-based systems! 🚀

后记

2025年2月4日于山东日照。在GPT4o大模型辅助下完成。

Shell 中的 Globbing：原理、使用方法与实现解析（中英双语）

Shell 中的 Globbing：原理、使用方法与实现解析在 Unix Shell（如 Bash、Zsh）中，globbing 是指文件名模式匹配（filename pattern matching），它允许用户使用特殊的通配符（wildcards…...

编程日记 2025/5/9 14:44:30

解决 ssh connect to host github.com port 22 Connection timed out

一、问题描述本地 pull/push 推送代码到 github 项目报 22 端口连接超时，测试连接也是 22 端口连接超时 ssh 密钥没问题、也开了 Watt Toolkit 网络是通的，因此可以强制将端口切换为 443 二、解决方案 1、测试连接 ssh -T gitgithub.com意味着无法通…...

编程日记 2025/4/28 12:57:45

CSS的媒体查询语法

CSS的媒体查询语法常见的媒体类型常见的特性示例 CSS的媒体查询语法可以根据不同的设备特性（如屏幕尺寸、分辨率等）应用不同的样式。基本语法如下： media 媒体类型 and (特性: 值) {/* 样式规则 */ }常见的媒体类型 screen：用于…...

编程日记 2025/5/9 14:29:10

生产环境超实用shell脚本一

生产环境超实用shell脚本一 Shell脚本作为一种强大的自动化工具，能够帮助运维人员轻松应对各种复杂的任务。本文将为您介绍服务器健康检查、日志清理、备份以及监控等多个方面，并详细阐述每个脚本的功能和应用场景，助力您提升运维效率&…...

编程日记 2025/5/6 13:33:52

【1】高并发导出场景下，服务器性能瓶颈优化

高并发导出场景下，服务器性能瓶颈通常出现在 CPU、内存、磁盘 I/O 或网络带宽等方面。为了解决这些问题，可以从以下几个方面进行优化： 1. 优化导出逻辑减少计算复杂度：检查导出逻辑中是否存在不必要的计算或重复操作，…...

编程日记 2025/5/6 4:53:00

go的sync包学习

包含了sync.Mutex,sync.RWMutex,sync.Cond,sync.Map,sync.Once等demo sync.Mutex //讲解mutex import ("fmt""math/rand""sync""time" )type Toilet struct {m sync.Mutex } type Person struct {Name string }var DateTime "2…...

编程日记 2025/5/6 5:31:21

一文读懂：TCP网络拥塞的应对策略与方案

TCP（传输控制协议）是互联网中广泛使用的可靠传输协议，它通过序列号、确认应答、重发控制、连接管理以及窗口控制等机制确保数据的可靠传输。然而，在网络环境中，由于多个主机共享网络资源，网络拥塞成为了一个…...

编程日记 2025/5/7 7:00:20

用DeepSeek分析总结一下DeepSeek发表过的8篇论文

1. 《深度求索大语言模型：以长期主义拓展开源语言模型》（2024年1月5日） 2. 《深度求索代码模型：当大语言模型遇上编程——代码智能的崛起》（2024年1月26日） 3. 《深度求索视觉语言模型：迈向真…...

编程日记 2025/5/9 14:33:48

node.js使用mysql2对接数据库

一、引言在现代Web开发中，Node.js作为一种高效、轻量级的JavaScript运行时环境，已经广泛应用于后端服务的开发中。而MySQL，作为一个广泛使用的关系型数据库管理系统（RDBMS），提供了强大的数据存储和查询功能…...

编程日记 2025/5/5 9:11:48

华为支付-免密支付接入免密代扣说明

免密代扣包括支付并签约以及签约代扣场景。开发者接入免密支付前需先申请开通签约代扣产品（即申请配置免密代扣模板及协议模板ID）。华为支付以模板维度管理每一个代扣扣费服务，主要组成要素如下： 接入免密支付需注意&#x…...

编程日记 2025/5/5 11:10:48

Java 面试真题解析与技巧分享

Java 面试对于每一位 Java 开发者来说都是至关重要的，它不仅是对我们技术能力的检验，更是我们迈向理想工作岗位的关键一步。在面试中，掌握常见真题的解题思路和回答技巧，能够让我们更加自信地展示自己的实力。本文将结合具体的面试…...

编程日记 2025/5/4 12:25:12

使用 Python 编程语言来实现机器学习小项目教程案例

以下是一个简单的机器学习小项目教程案例，使用 Python 编程语言和 Scikit-learn 库来实现一个分类任务。我们将使用经典的鸢尾花（Iris）数据集来训练一个分类器，预测鸢尾花的种类。项目目标使用机器学习算法对鸢尾花数据集进行分类，预测鸢尾花的类别（Setosa、Versicolor…...

编程日记 2025/5/9 5:11:13

网络安全 | 零信任架构：重构安全防线的未来趋势

网络安全 | 零信任架构：重构安全防线的未来趋势一、前言二、零信任架构的核心概念与原理2.1 核心概念2.2 原理三、零信任架构的关键技术组件3.1 身份管理与认证系统3.2 授权与访问控制系统3.3 网络与安全监测系统3.4 加密与数据保护技术四、零信任架构与传统安全…...

编程日记 2025/5/6 2:26:44

react关于手搓antd pro面包屑的经验（写的不好请见谅）

我们先上代码，代码里面都有注释，我是单独写了一个组件，方便使用，在其他页面引入就行了还使用了官方的Breadcrumb组件 import React, { useEffect, useState } from react; import { Breadcrumb, Button } from antd; import { …...

编程日记 2025/5/3 17:02:10

PHP-运算符

[题目信息]： 题目名称题目难度PHP-运算符2 [题目考点]： PHP运算符优先级[Flag格式]: SangFor{zEk4r_djfgy0CibPz6LdXpwBrXRckhIT}[环境部署]： docker-compose.yml文件或者docker tar原始文件。 http://分配ip:2067[题目writeup]&#x…...

编程日记 2025/5/7 3:02:18

chrome浏览器chromedriver下载

chromedriver 下载地址 https://googlechromelabs.github.io/chrome-for-testing/ 上面的链接有和当前发布的chrome浏览器版本相近的chromedriver 实际使用感受 chrome浏览器会自动更新，可以去下载最新的chromedriver使用，自动化中使用新的chromedr…...

编程日记 2025/5/7 7:31:24

BurpSuite抓包与HTTP基础

文章目录前言一、BurpSuite1.BurpSuite简介2.BurpSuite安装教程(1)BurpSuite安装与激活(2)安装 https 证书 3.BurpSuite使用4.BurpSuite资料二、图解HTTP1.HTTP基础知识2.HTTP客户端请求消息3.HTTP服务端响应消息4.HTTP部分请求方法理解5.HTTPS与HTTP 总结前言在网络安全和…...

编程日记 2025/5/8 0:04:48

SQLAlchemy 2.0的简单使用教程

SQLAlchemy 2.0相比1.x进行了很大的更新，目前网上的教程不多，以下以链接mysql为例介绍一下基本的使用方法环境及依赖 Python:3.8 mysql:8.3 Flask:3.0.3 SQLAlchemy:2.0.37 PyMySQL:1.1.1使用步骤 1、创建引擎，链接到mysql engine crea…...

编程日记 2025/5/9 14:18:03

Android原生开发问题汇总

Fragment顶部出现一个白条怎么办？父类布局搞事情。 layer-list被拉伸问题 Android之 ImageView android:src和tools:src的区别是什么? Android运行时权限的总结，以及EasyPermissions框架的使用 Android Studio添加EasyPemissions Android中module怎…...

编程日记 2025/5/9 14:41:04

springboot中使用注解实现分布式锁

下面将详细介绍如何在 Spring Boot 里借助注解实现分布式锁，以login_lock:作为锁的 key 前缀，使用请求参数里的phone值作为 key，等待时间设为 0 秒，锁的持续时间为 10 秒。我们会使用 Redis 来实现分布式锁，同时借助 S…...

编程日记 2025/5/3 14:36:02

Android TabLayout 使用进阶（含源码）

android:layout_height“match_parent” android:orientation“vertical” tools:context“.mode2.ClassificationActivity”> <com.google.android.material.tabs.TabLayout android:id“id/tab_layout” android:layout_width“match_parent” android:layout_he…...

编程日记 2025/5/9 14:14:28

数据库系统概论的第六版与第五版的区别，附pdf

我用夸克网盘分享了「数据库系统概论第五六版资源」，点击链接即可保存。链接：https://pan.quark.cn/s/21a278378dee 第6版教材修订的主要内容为了保持科学性、先进性和实用性，在第5版教材基础上对全书内容进行了修改、更新和充实。在科…...

编程日记 2025/5/9 14:09:51

管理etcd的存储空间配额

如何管理etcd的存储空间配额 - 防止集群存储耗尽指南本文基于etcd v3.4官方文档编写为什么需要空间配额？ 在分布式系统中，etcd作为可靠的键值存储，很容易成为系统瓶颈。当遇到以下情况时： 应用程序频繁写入大量数据未及时清理…...

编程日记 2025/5/9 10:16:55

深入浅出 NRM：加速你的 npm 包管理之旅

文章目录前言一、NRM 是什么？二、为什么需要 NRM？三、NRM 的优势四、NRM 的安装与使用4.1 安装 NRM4.2 查看可用的 npm 源4.3 切换 npm 源4.4 测试 npm 源速度4.5 添加自定义 npm 源4.6 删除 npm 源五、NRM 的进阶使用六、总结前言作为一名 JavaScr…...

编程日记 2025/5/9 14:02:29

ESP32开发学习记录---》GPIO

she 2025年2月5日，新年后决定开始充电提升自己，故作此记,以前没有使用过IDF开发ESP32因此新年学习一下ESP32。 ESPIDF开发环境配置网上已经有很多的资料了，我就不再赘述，我这里只是对我的学习经历的一些记录。首先学习一个…...

编程日记 2025/5/8 20:07:17

stm32点灯 GPIO的输出模式

目录 1.选择RCC时钟 2.SYS 选择调试模式 SW 3.GPIO 配置 4.时钟树配置（ 默认不变）HSI 高速内部时钟8Mhz 5.项目配置 6.代码延时1s循环LED亮灭 1.选择RCC时钟 2.SYS 选择调试模式 SW 3.GPIO 配置 4.时钟树配置（ 默认不变&#xff09…...

编程日记 2025/5/9 13:45:43

[paddle] 矩阵的分解

特征值设 A A A 是一个 n n n \times n nn 的方阵， λ \lambda λ 是一个标量， v \mathbf{v} v 是一个非零向量。如果满足以下方程： A v λ v A\mathbf{v} \lambda\mathbf{v} Avλv 则称 λ \lambda λ 为矩阵 A A A 的一个特征值…...

编程日记 2025/5/4 17:30:58

【基于SprintBoot+Mybatis+Mysql】电脑商城项目之修改密码和个人资料

🧸安清h：个人主页 🎥个人专栏：【Spring篇】【计算机网络】【Mybatis篇】 🚦作者简介：一个有趣爱睡觉的intp，期待和更多人分享自己所学知识的真诚大学生。目录 🎃1.修改密码 -持久…...

编程日记 2025/5/6 8:57:30

【深度学习】DataLoader自定义数据集制作

第一步导包 import os import matplotlib.pyplot as plt %matplotlib inline import numpy as np import torch from torch import nn import torch.optim as optim import torchvision from torchvision import transforms,models,datasets import imageio import time impo…...

编程日记 2025/5/5 17:43:13