当前位置：首页 > news >正文

对subprocess启动的子进程使用VSCode python debugger

news 来源：原创 2025/8/6 9:47:16

文章目录

1 情况概要（和文件结构）
2 具体设置和启动步骤
- 2.1 具体配置
- - Step 1 针对attach debugger到子进程
  - Step 2 针对子进程的暂停
  - (可选) Step 3 判断哪个进程id是需要的子进程
- 2.2 启动步骤和过程
3 其他问题解决
- 3.1
- 3.2 ptrace: Operation not permitted
其他解决方案*2
- 方案一（ChatGPT提供，对我不可行）
- 方案二（Github issue翻到）
参考

1 情况概要（和文件结构）

环境：Linux Ubuntu

最近在跑大模型，遇到一份代码的具体程序是通过subprocess.run()来启动的，而vscode的debug功能无法追踪进去。也就是说，我有父进程launch.py来启动subprocess.run()，调用子进程文件run.py。我可以单步调试追踪到subprocess这一步并进入run()函数，但是无法继续进入子进程的工作，无法追踪到run.py看我真正想看的代码。

这里父进程文件和子进程文件的概念我没有细究，大概意思是主动调用subprocess.run()来创建子进程的是父进程文件，被subprocess.run()跑起来的是子进程文件。

附上文件结构的简单示意。

test.sh：python launch.py并传一堆参数
launch.py：父进程，主要内容为

def python_launch(args):"""Vanilla python launcher for degbugging purposes"""# ....# 构造cmdcmd = f"python {args.run_file}" # 省略一堆参数# 启动subprocesssubprocess.run(cmd, shell=True)

run.py：子进程，主要内容为

def main(cfg):# 环境变量设置，数据读取，新建文件夹之类的之类的# ...# 初始化trainer并训练trainer = build_trainer(cfg)trainer.run()

2 具体设置和启动步骤

我们的目标是，我从某个地方把程序起起来并创建了子进程，然后把debugger连接到子进程上，于是它可以在子进程的断点地方停下、正常调试。

那么我们需要做到两件事情：1）把Debugger attach到子进程；2）子进程要能等待我们attach，而不是一股脑往下运行，那就来不及停在断点。

2.1 具体配置

我们分别对这两件事情做配置。

Step 1 针对attach debugger到子进程

采用vscode的python debugger插件，新建debugger config如下（编辑的是launch.json）

{"name": "Python: Attach to Subprocess", //随便起名"type": "python","request": "attach", //附加到子进程"processId": "${command:pickProcess}" //选择进程id
}

这里用${command:pickProcess}是采用vscode自带的命令，从进程列表中手动选择，而不是写死进程id。
实测这些内容就够了，不需要其他key比如ChatGPT建议的justMyCode和subProcess。

Step 2 针对子进程的暂停

在子进程文件，你需要断点的代码前面，或者索性最前面，加上一行：

    input("Continue...")

这行会让代码停下，直到你在命令行中随便敲点什么，回车也行，才继续执行。

(可选) Step 3 判断哪个进程id是需要的子进程

因为我实在小白，我不确定哪个进程才是我要的，所以我在子进程文件里加了几行，输出父进程id和子进程id。

    print(f"Parent PID (PPID): {os.getppid()}")print(f"Current PID: {os.getpid()}")

Current PID就是我们要的子进程id

以上，配置完了，我的run.py最终长这样：

def main(cfg):#### for debug ########## 输出父进程和子进程idprint(f"Parent PID (PPID): {os.getppid()}")print(f"Current PID: {os.getpid()}")# 可选，用来检查user id，原因后面说print(f"UID: {os.getuid()}, EUID: {os.geteuid()}") # 暂停input("Continue...")########################## 环境变量设置，数据读取，新建文件夹之类的之类的# ...trainer = build_trainer(cfg)trainer.run()

2.2 启动步骤和过程

需要你操作的地方写了人工，其他的是自动执行顺序。

（人工）正常通过命令行执行sh test.sh，启动脚本
程序进入launch.py，启动subprocess
程序进入run.py
3.1. 输出父进程id和子进程id供参考
3.2. 在input(Continue...)处暂停，等待键入字符才能继续执行
（人工）启动debug的Subprocess Attach，选择子进程，附加到正确的id上，等待…
attach到子进程，可能需要一会。
在DEBUG CONSOLE里会提示结果，要么是attach成功（如图），要么是弹窗报错然后在DEBUG CONSOLE里看错误信息。
此时可以看到调试工具栏表示正在执行、没有暂停，因为我们还在被input()暂停着。
（人工）在命令行里敲个回车，跳出input(Continue...)
断点停止在run.py中的对应位置
（人工）正常调试

3 其他问题解决

3.1

--- Starting attach to pid: 1103 ---
/bin/sh: 1: gdb: not found

解决方案是安装gdb

apt-get update
apt-get upgrade -y
apt-get install gdb

3.2 ptrace: Operation not permitted

解释一下前面python里为什么写了一句进程创建用户id查询

我在第5步attach环节遇到了一个错误，ptrace: Operation not permitted，是个权限错误。

--- Starting attach to pid: 654608 ---
Could not attach to process.  If your uid matches the uid of the target
process, check the setting of /proc/sys/kernel/yama/ptrace_scope, or try
again as the root user.  For more details, see /etc/sysctl.d/10-ptrace.conf
ptrace: Operation not permitted.

问了下ChatGPT：

/proc/sys/kernel/yama/ptrace_scope 文件
这个文件控制了 ptrace 系统调用的访问权限。ptrace 是 Linux 的一个系统调用，允许一个进程跟踪和控制另一个进程，是调试器工作的核心。
ptrace_scope 参数的值
0: 允许任何进程使用 ptrace 附加到其他进程（受用户权限约束）。
1: 仅允许父进程（如直接启动的调试器进程）附加到子进程。
2: 禁止所有非父子关系的调试。
3: 禁止所有 ptrace 附加操作。
默认值通常为 1，为了安全性避免恶意进程滥用 ptrace。

查询了一下这个值（cat /proc/sys/kernel/yama/ptrace_scope），输出是1。但是显然我的父进程和子进程都是同一个user启用的，不懂为什么说我权限错误。

查询进程创建用户有好几个方法，我是在python里写了一句这个。（解释了前文的查询用户id是啥用）

print(f"UID: {os.getuid()}, EUID: {os.geteuid()}")

但是到处折腾了一圈别的方案没解决，还是回来把这个值设为0了，真就解决了。

这个值的设置需要root权限。废话，如果本来就是用root在跑的话权限统一也不会报这个错了。

echo 0 | sudo tee /proc/sys/kernel/yama/ptrace_scope

ChatGPT也说了，这个值设置为0的话不太安全，建议用完就给它改回去。于是写了个脚本方便切换值，插入在.bashrc文件里（vim ~/.bashrc）

ptrace_scope() {current_value=$(cat /proc/sys/kernel/yama/ptrace_scope) echo "[INTRO] Script for changing between 0 & 1 value for /proc/sys/kernel/yama/ptrace_scope. The value should vary from [0,3] for different safety levels, default as 1"echo; # 换行echo "current value = $current_value" # 获取当前值# 根据当前值，在0和1之间切换if [ "$current_value" -eq 1 ]; thenecho "Now changing to 0..."echo 0 | sudo tee /proc/sys/kernel/yama/ptrace_scopeelif [ "$current_value" -eq 0 ]; thenecho "Now changing to 1 ..."echo 1 | sudo tee /proc/sys/kernel/yama/ptrace_scopeelseecho "[Warning] Unknown ptrace_scope current value. Nothing takes effect."exit 1fi# 检查是否执行成功，并提醒恢复0值current_value=$(cat /proc/sys/kernel/yama/ptrace_scope)echo "[INFO] ptrace_scope changed to $current_value"echo;if [ "$current_value" -eq 1 ]; thenecho "[INFO] Safe default setting ^-^"elif [ "$current_value" -eq 0 ]; thenecho "[INFO] Unsafe setting, remember to change back to value = 1."fiecho;
}

记得source ~/.bashrc使配置生效。

效果如下，通过ptrace_scope change指令实现0-1切换。
在这里插入图片描述

其他解决方案*2

方案一（ChatGPT提供，对我不可行）

针对debugger监听子进程这个事情，ChatGPT还给了我一套方案，但用不了。记一下大概配置，哪哪都折腾过了，这个debugpy的wait for client啊就是不知道wait到了什么，直接就监听到了，但我明明还没开debugger的attach！

在子进程文件里写

import debugpyint main():# 启动调试服务debugpy.listen(("0.0.0.0", 5678))print("Debugpy is listening on port 5678")# 等待客户端连接debugpy.wait_for_client()print("Debugger is attached!")# trainer.......

在debugger config里写一个针对test脚本执行的config，和debug普通python文件一个写法。另外再写一个attach用的config，用的监听路径，大概如下：

{"name": "Python: Attach to Subprocess","type": "python","request": "attach","connect": {"host": "localhost","port": 5678},"justMyCode": false,"subProcess": false
}

方案二（Github issue翻到）

还看到一个更暴力的是是直接改写，不用subprocess，见GitHub: embodied-generalist/issues/33
因为它只是inference但是我要train…小白还不知道不开子进程会不会有影响，就没碰

参考

StackOverflow Attaching a VSCode Debugger to a Sub Process in Python
GitHub: embodied-generalist/issues/33

对subprocess启动的子进程使用VSCode python debugger

文章目录 1 情况概要（和文件结构）2 具体设置和启动步骤2.1 具体配置Step 1 针对attach debugger到子进程Step 2 针对子进程的暂停(可选) Step 3 判断哪个进程id是需要的子进程 2.2 启动步骤和过程 3 其他问题解决3.13.2 ptrace: Operation not permitted…...

编程日记 2025/8/6 9:47:16

MATLAB实现GARCH(广义自回归条件异方差)模型计算VaR(Value at Risk)

MATLAB实现GARCH(广义自回归条件异方差)模型计算VaR(Value at Risk) 1.计算模型介绍使用GARCH（广义自回归条件异方差）模型计算VaR（风险价值）时，方差法是一个常用的方法。GARCH模型能够捕捉到金融时间序列数据中的波…...

编程日记 2025/8/4 22:10:27

Android中常见内存泄漏的场景和解决方案

本文讲解Android 开发中常见内存泄漏场景及其解决方案，内容包括代码示例、原因分析以及最佳实践建议。 1. 静态变量导致的内存泄漏静态变量的生命周期与应用进程一致，如果静态变量持有了对 Activity 或其他大对象的引用，就可能导致内存泄漏…...

编程日记 2025/8/5 10:56:29

爬取链家二手房房价数据存入mongodb并进行分析

感谢您的关注！需要完整源码评论区获取~ 【实验目的】 1. 使用 python 将爬虫数据存入 mongodb； 2. 使用 python 读取 mongodb 数据并进行可视化分析。【实验原理】 MongoDB 是文档数据库，采用 BSON 的结构来存储数据。在文档中可嵌套其…...

编程日记 2025/8/6 9:45:24

《TCP/IP网络编程》学习笔记 | Chapter 13：多种 I/O 函数

《TCP/IP网络编程》学习笔记 | Chapter 13：多种 I/O 函数《TCP/IP网络编程》学习笔记 | Chapter 13：多种 I/O 函数send & recv 函数Linux 平台下的 send 和 recv 函数MSG_OOB：发送紧急消息紧急模式的工作原理检查输入缓冲 readv & w…...

编程日记 2025/8/6 8:27:42

详细介绍下oracle冷备（coolbackup)

冷备，也就说数据库不是运行（热的状态）的备份。有些时候我们的数据库比较小，进行同操作系统数据迁移和恢复的时候就比较好用。下面我们详细介绍下oracle数据库的冷备（我们使用最简单的拷贝数据文件方式进行冷备&#xf…...

编程日记 2025/8/3 23:03:23

MYSQL——多表设计以及数据库中三种关系模型

大致介绍数据库中三种关系模型一对多（1:N） 定义： 一个实体可以与另一个实体的多个实例相关联，而后者只能与前者的一个实例相关联。例子： 学生和课程的关系。学生（1）：每个学生…...

编程日记 2025/8/2 18:08:59

泷羽sec学习打卡-html基础

声明学习视频来自B站UP主泷羽sec,如涉及侵权马上删除文章笔记的只是方便各位师傅学习知识,以下网站只涉及学习内容,其他的都与本人无关,切莫逾越法律红线,否则后果自负关于云技术基础的那些事儿-捕获帅照 html基础什么是html？ 常用的html标签html示例 css基础什…...

编程日记 2025/7/28 16:29:54

国标GB28181摄像机接入EasyGBS国标GB28181设备管理软件：GB28181-2022媒体传输协议解析

随着信息技术的飞速发展，视频监控领域正经历从传统安防向智能化、网络化安防的深刻转变。在这一转变过程中，国标GB28181设备管理软件EasyGBS成为了这场技术变革的重要一环。 GB28181-2022媒体传输协议媒体传输命令包括实时视音频点播、历史视音频回放/…...

编程日记 2025/8/1 23:43:20

鸿蒙网络编程系列50-仓颉版TCP回声服务器示例

1. TCP服务端简介 TCP服务端是基于TCP协议构建的一种网络服务模式，它为HTTP（超文本传输协议）、SMTP（简单邮件传输协议）等高层协议的应用程序提供了可靠的底层支持。在TCP服务端中，服务器启动后会监听一个或…...

编程日记 2025/8/5 18:37:01

JMeter监听器与压测监控之 InfluxDB

1. 简介在本文中，我们将介绍如何在 Kali Linux 上通过 Docker 安装 InfluxDB，并使用 JMeter 对其进行性能监控。InfluxDB 是一个高性能的时序数据库，而 JMeter 是一个开源的性能测试工具，可以用于对各种服务进行负载测试和性能监…...

编程日记 2025/7/31 10:18:46

混合上下文学习；In-Context Learning（ICL）

目录 In-Context Learning（ICL）混合上下文学习核心内容核心创新点的原理与理论举例说明 In-Context Learning（ICL）是一种在大语言模型（LLM）中使用的技术，它允许模型通过提供一组输入输出示例（即“demonstrations”）来适应新任务，而无需对模型参数进行显…...

编程日记 2025/8/3 7:59:41

【STM32】软件I2C读写MPU6050

文章目录软件I2C读写MPU6050接线图代码整体框架MyI2C模块MyI2C.cMyI2C.h MPU6050模块MPU6050.cMPU6050_Reg.h MPU6050.h main.c 源程序软件I2C读写MPU6050 要实现软件I2C读写MPU6050分为两个部分： 完成软件I2C协议时序基于I2C协议读写寄存器操控MPU6050 接线图…...

编程日记 2025/8/6 6:50:36

HarmonyOS鸿蒙系统上File文件常用操作

HarmonyOS鸿蒙系统上，file文件常用操作记录 1.创建文件 createFile(fileName: string, content: string): string {// 获取应用文件路径let context getContext(this) as common.UIAbilityContext;let filesDirPath context.filesDir / fileName;// 新建并打开…...

编程日记 2025/8/4 21:56:18

如何解决Java EasyExcel 导出报内存溢出

如何解决Java EasyExcel 导出报内存溢出 EasyExcel大数据量导出常见方法 1. 分批写入 EasyExcel支持分批写入数据，可以将数据分批加载到内存中，分批写入Excel文件，避免一次性将大量数据加载到内存中。示例代码： String fileNa…...

编程日记 2025/8/5 18:29:26

[产品管理-91]：产品经理的企业运营的全局思维-1

目录前言：企业架构图产品经理的企业运营全局思维 1、用户 - 用户价值与体验：真正的需求，真正的问题，一切的原点 2、大势 - 顺应宏观大势：政策趋势、行业趋势、技术趋势 3、市场 - 知己知彼：市场调研…...

编程日记 2025/8/6 5:04:38

学习笔记——stm32看门狗

目录一、WDG简介二、IWDG框图 2.1独立看门狗结构 2.2键寄存器 2.3超时时间三、WWDG框图 3.1窗口看门狗结构 3.2WWDG时序图 3.3最早、最晚时间四、IWDG和WWDG对比五、IWDG相关库函数和应用 5.1相关库函数 5.2应用六、WWDG相关库函数和应用 6.1相关库函数 6…...

编程日记 2025/8/3 18:14:14

2411rust,cargo清理缓存

原文 Cargo最近在晚间通道上取得了一个不稳定的功能(从nightly-2023-11-17开始),它可自动清理Cargo主目录中的缓存内容. 总之,请求使用晚间通道的人启用此功能,并在Cargo问题跟踪器上报告问题.要启用它,请在你的一般在~/.cargo/config.toml或%USERPROFILE%\.cargo\config.tom…...

编程日记 2025/8/4 18:00:44

高级java每日一道面试题-2024年11月19日-基本篇-获取一个类Class对象的方式有哪些?

如果有遗漏,评论区告诉我进行补充面试官: 获取一个类Class对象的方式有哪些? 我回答: 在 Java 中，获取一个类的 Class 对象有多种方式。这些方式各有优缺点，适用于不同的场景。以下是常见的几种方法及其详细解释： 1. 使用 new 关键字实…...

编程日记 2025/8/1 23:05:51

Vue 3与TypeScript集成指南：构建类型安全的前端应用

在Vue 3中使用TypeScript，可以让你的组件更加健壮和易于维护。以下是使用TypeScript与Vue 3结合的详细步骤和知识点： 1. 环境搭建首先，确保你安装了Node.js（推荐使用最新的LTS版本）和npm或Yarn。然后，安…...

编程日记 2025/8/3 17:31:15

可视化建模与UML《活动图实验报告》

你当像鸟飞往你的山。一、实验目的： 1、熟悉活动图的基本功能和使用方法。 2、掌握使用建模工具软件绘制协作图的方法二、实验环境： window7 | 10 | 11 EA15 三、实验内容： <1>绘制学生选课系统中添加课程(Add Course)用例的活动图…...

编程日记 2025/8/4 17:02:04

接雨水

接雨水 1、题目描述2、解题思路 1、题目描述给定 n 个非负整数表示每个宽度为 1 的柱子的高度图，计算按此排列的柱子，下雨之后能接多少雨水。 2、解题思路本题使用了双指针，根据下图可以得出，下标 i 处能接的雨水量由左边…...

编程日记 2025/8/1 14:32:14

i春秋-签到题

练习平台地址竞赛中心题目描述题目内容点击GUESS后会有辨识细菌的选择题全部完成后会有弹窗提示输入nickname后提示获得flag F12检查元素中没有发现信息检查后发现flag在控制台中 flag flag{663a5c95-3050-4c3a-bb6e-bc4f2fb6c32e} 注意事项 flag不一定要在元素中找&a…...

编程日记 2025/8/4 1:46:33

Selenium + 数据驱动测试：从入门到实战！

引言在软件测试中，测试数据的多样性和灵活性对测试覆盖率至关重要。而数据驱动测试（Data-Driven Testing）通过将测试逻辑与数据分离，极大地提高了测试用例的可维护性和可扩展性。本文将结合Selenium这一流行的测试工具&#xff0…...

编程日记 2025/8/4 5:08:50

考研倒计时30天丨和西电一起向前！再向前！

上岸后就能来西安电子科技大学和学长学姐一起吃饭，XDU食堂都有你想要的一切 ①、海棠篇：海棠新生初入校园，还在犹豫吃什么？宿舍楼边的海棠餐厅物美价廉，满足你一日三餐的需求与期盼！ 俗话说&#xff1a…...

编程日记 2025/8/4 20:54:33

json数组写入文件每行一条数据

我们知道将json或json数组写入文件，一般是用JSON.stringify先将json或json数组转成字符串，再写入文件。JSON.stringify()的语法是这样的：JSON.stringify(value[, replacer[, space]]) JSON.stringify(value)调用则不带空格tab换行等分隔符&am…...

编程日记 2025/8/1 18:15:10

EasyExcel并行导出多个excel文件并压缩下载

EasyExcel并行导出多个excel文件并压缩下载在SpringBoot应用中，采用同步方式导出Excel文件会导致服务器在生成文件期间阻塞，特别是在处理大量数据时，这种效率较低的方法会严重影响性能。为了解决这个问题，可以采用以下改进措施：首先将导出的数据进行拆分，然后利用Compl…...

编程日记 2025/8/6 6:56:20

hadoop3.x 新特性

hadoop3.x 新特性 FeaturesHadoop 2.xHadoop 3.xMinimum Required Java VersionJDK 6 and above.JDK 8 is the minimum runtime version of JAVA required to run Hadoop 3.x as many dependency library files have been used from JDK 8.Fault ToleranceFault Tolerance is …...

编程日记 2025/8/5 11:02:38