可视化工作流编排参数配置完整方案设计文档
一、背景及需求分析
1. 背景
在复杂的工作流程中,后续程序需要动态构造输入参数,这些参数源自多个前序程序的 JSON 数据输出。为了增强系统的灵活性和可扩展性,配置文件需要支持以下功能:
- 灵活映射前序程序的 JSON 数据。
- 支持简单映射、条件逻辑、循环体、字段合并等。
- 参数可直接使用常量或动态值作为输入。
2. 核心需求
- 简单参数映射: 从单一来源提取数据。
- 复杂逻辑支持: 条件逻辑 (
if-then-else
)、循环体、字段合并等。 - 多来源支持: 从多个前序程序中提取数据,并支持合并策略(如拼接、去重、优先级)。
- 常量支持: 参数可以直接为固定值,跳过数据映射逻辑。
二、设计目标
- 通用性: 提供统一的 JSON 配置结构,覆盖多种场景。
- 灵活性: 支持动态逻辑(条件、循环、多来源合并)。
- 易读性: 配置文件结构清晰,用户容易理解和使用。
- 可扩展性: 配置结构支持新增逻辑类型,无需大规模修改现有代码。
三、架构概览
+----------------+ +----------------+ +----------------+
| 前序程序输出 | ------> | 参数映射服务 | -------> | 后序程序输入参数 |
| JSON 数据 | | (JSON 配置驱动) | | 动态生成 |
+----------------+ +----------------+ +----------------+ 主要组件:
1. **前序程序输出:** 提供 JSON 数据(多个来源)。
2. **参数映射服务:** 基于 JSON 配置解析前序数据,生成后续输入。
3. **参数配置文件:** JSON 格式,定义参数映射规则及逻辑。
4. **后序程序输入:** 动态生成符合后续程序要求的参数。
四、配置结构设计
1. 参数类
每个参数由参数类描述,包含以下字段:
表格
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
name | 字符串 | 必填 | 参数名称,用于后续程序的输入标识。 |
value | 对象 | 必填 | 参数的值对象,由值对象基类及其子类定义。 |
description | 字符串 | 可选 | 参数描述信息,便于理解参数用途。 |
2. 值对象基类及子类
值对象基类
所有值对象从基类继承,区分逻辑通过 type
字段。
表格
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
type | 字符串 | 必填 | 值对象类型(如 constant , jmespath , multiSource , loop , conditional )。 |
值对象子类设计
1. 常量值子类 (ConstantValue)
返回固定值。
表格
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
type | 字符串 | 必填 | 固定为 constant 。 |
value | 任意类型 | 必填 | 常量值,直接返回固定值。 |
示例:
{ "type": "constant", "value": 42 }
2. 单一来源值子类 (SingleSourceValue)
使用 JMESPath 从单一来源提取值。
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
type | 字符串 | 必填 | 固定为 jmespath 。 |
jmespath | 字符串 | 必填 | 包含来源的 JMESPath 表达式(如 programA.outputA.key )。 |
示例:{ "type": "jmespath", "jmespath": "programA.outputA.simpleKey" }
3. 多来源值子类 (MultiSourceValue)
支持从多个来源合并数据,并按指定策略处理。
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
type | 字符串 | 必填 | 固定为 multiSource 。 |
sources | 对象 | 必填 | 多来源数据的键值对,键为前序程序名称,值为 JMESPath 表达式。 |
mergeStrategy | 字符串 | 可选 | 合并策略(如 concat , unique , priority 等)。 |
示例:{ "type": "multiSource", "sources": { "programA": "outputA.arrayA", "programB": "outputB.arrayB" }, "mergeStrategy": "concat" }
4. 循环体值子类 (LoopValue)
处理数组数据,支持动态字段映射。
表格
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
type | 字符串 | 必填 | 固定为 loop 。 |
jmespath | 字符串 | 必填 | 包含来源的 JMESPath 表达式,提取数组元素及字段。 |
mappings | 对象 | 可选 | 动态映射规则,键为目标字段名,值为提取规则(支持默认值)。 |
示例:{ "type": "loop", "jmespath": "programB.outputB.items", "mappings": { "id": "id", "value": "value || 'defaultValue'", "optionalField": "optionalField || 'defaultOptional'" } }
5. 条件值子类 (ConditionalValue)
根据条件逻辑动态返回值,支持默认值。
表格
字段名称 | 类型 | 是否必填 | 说明 |
---|---|---|---|
type | 字符串 | 必填 | 固定为 conditional 。 |
jmespath | 字符串 | 必填 | 数据来源及条件逻辑使用的 JMESPath 表达式。 |
conditions | 数组 | 必填 | 条件逻辑数组,每个条件包含 if 和 then 值对象。 |
else | 对象 | 可选 | 默认值,当所有条件不满足时返回的值。 |
示例:
{ "type": "conditional", "jmespath": "programA.outputA", "conditions": [ { "if": "status == 'success'", "then": { "type": "jmespath", "jmespath": "successMessage" } }, { "if": "status == 'error'", "then": { "type": "jmespath", "jmespath": "errorMessage" } } ], "else": { "type": "constant", "value": "defaultMessage" } }
五、完整配置示例
{ "parameters": [ { "name": "constantParam", "value": { "type": "constant", "value": 42 }, "description": "A constant parameter with a fixed value" }, { "name": "simpleParam", "value": { "type": "jmespath", "jmespath": "programA.outputA.simpleKey" }, "description": "A simple parameter mapped from programA" }, { "name": "combinedParam", "value": { "type": "multiSource", "sources": { "programA": "outputA.arrayA", "programB": "outputB.arrayB" }, "mergeStrategy": "concat" }, "description": "A combined parameter concatenating arrays from two sources" }, { "name": "complexArrayParam", "value": { "type": "loop", "jmespath": "programB.outputB.items", "mappings": { "id": "id", "value": "value || 'defaultValue'", "optionalField": "optionalField || 'defaultOptional'" } }, "description": "An array parameter with dynamic attributes and default values" }, { "name": "conditionalParam", "value": { "type": "conditional", "jmespath": "programA.outputA", "conditions": [ { "if": "status == 'success'", "then": { "type": "jmespath", "jmespath": "successMessage" } }, { "if": "status == 'error'", "then": { "type": "jmespath", "jmespath": "errorMessage" } } ], "else": { "type": "constant", "value": "defaultMessage" } }, "description": "A conditional parameter with fallback value" } ]
}
六、运行逻辑解析
-
常量参数:
无需数据来源,直接返回固定值。 -
单一来源:
根据jmespath
表达式提取对应字段值。 -
多来源合并:
遍历sources
,提取数据并按mergeStrategy
合并。 -
循环体:
遍历数组元素,按mappings
提取字段值,支持默认值。 -
条件逻辑:
按conditions
顺序匹配条件,返回第一个满足条件的值;若无匹配,则返回else
。
七、设计亮点
-
去冗余设计:
将source
合并到jmespath
,结构更简洁。参数类只负责元信息(如名称、描述),具体值交由值对象处理。 -
灵活性:
支持常量、单一来源、多来源、循环体、条件逻辑等多种复杂场景。 -
高可读性:
jmespath
表达式直观显示来源和提取规则,易于理解和维护。 -
扩展性:
值对象子类支持进一步扩展,例如动态计算值、复杂逻辑等。 -
直观配置:
JSON 配置清晰、简洁,便于前端用户或配置生成工具使用。
八、扩展方向
-
支持动态计算:
增加对动态生成值的支持,例如通过公式计算。 -
前端配置工具:
提供可视化工具,动态生成 JSON 配置,支持实时校验。 -
运行时校验:
针对jmespath
表达式的校验,确保数据提取逻辑的正确性。
相关文章:
可视化工作流编排参数配置完整方案设计文档
一、背景及需求分析 1. 背景 在复杂的工作流程中,后续程序需要动态构造输入参数,这些参数源自多个前序程序的 JSON 数据输出。为了增强系统的灵活性和可扩展性,配置文件需要支持以下功能: 灵活映射前序程序的 JSON 数据。…...
Linux sysfs虚拟文件系统
文章目录 简介sysfs接口sysfs和procfs参考 本文拟对Linux sysfs虚拟文件系统进行简单的介绍和原理分析 简介 测试环境:Linux dev-PC 5.18.17-amd64-desktop-hwe #20.01.00.10 SMP PREEMPT_DYNAMIC Thu Jun 15 16:17:50 CST 2023 x86_64 GNU/Linux sysfs虚拟文件系统…...
C++ 设计模式 - 访问者模式
一:概述 访问者模式将作用于对象层次结构的操作封装为一个对象,并使其能够在不修改对象层次结构的情况下定义新的操作。 《设计模式:可复用面向对象软件的基础》一书中的访问者模式因两个原因而具有传奇色彩:一是因为它的复杂性&a…...
微软编程之C#如何学习,C#学习路线:从入门到精通
引言 C# 是一种由微软开发的面向对象编程语言,广泛应用于 Windows 应用程序开发、游戏开发(Unity)、Web 开发(ASP.NET)等领域。对于初学者来说,掌握 C# 不仅能够打开编程世界的大门,还能为未来…...
PromptSource官方文档翻译
目录 核心概念解析 提示模板(Prompt Template) P3数据集 安装指南 基础安装(仅使用提示) 开发环境安装(需创建提示) API使用详解 基本用法 子数据集处理 批量操作 提示创建流程 Web界面操作 手…...
深入理解QT的View-Model-Delegate机制和用法
文章目录 Model-View-Delegate机制Model(数据模型)设置模型属性访问元素操作元素数据排序封装好的模型View(视图)显示数据数据选择Delegate(代理)数据选择易用封装类QListWidgetQTreeWidgetQTableWidget元素拖拽代理模型参考示例Model-View-Delegate机制 Qt的View/Model/Deleg…...
【JavaScript】JavaScript 运行原理
执行上下文 JavaScript引擎会在执行代码之前,会在堆内存中创建一个全局对像:Global Object(GO) 该对象所有的作用域(scope)都可以访问,在浏览器中这个对象就是window;里面会包含Date、Array、StringNumber、setTimeout、setInte…...
力扣hot100刷题第一天
哈希 1. 两数之和 题目 给定一个整数数组 nums 和一个整数目标值 target,请你在该数组中找出 和为目标值 target 的那 两个 整数,并返回它们的数组下标。 你可以假设每种输入只会对应一个答案,并且你不能使用两次相同的元素。你可以按任意…...
数据结构-find()-判断字符串s1中是否包含字符串s2
find()库函数 #include <iostream> using namespace std;bool check(string s1,string s2){int n s1.size();int m s2.size();if(n0||m0 || n<m){return false;}if(s1.find(s2) ! string::npos){return true;}else{return false;} }int main () {string a "…...
寒假2.7
题解 web:[HCTF 2018]WarmUp 打开是张表情包 看一下源代码 访问source.php,得到完整代码 代码审计 <?phphighlight_file(__FILE__);class emmm{public static function checkFile(&$page){$whitelist ["source">"source.p…...
【韩顺平linux】部分上课笔记整理
整理一下一些韩顺平老师上课时候的笔记 课程:【小白入门 通俗易懂】韩顺平 一周学会Linux linux环境:使用阿里云服务器 笔记参考 : [学习笔记]2021韩顺平一周学会Linux 一、自定义函数 基本语法 应用实例: 计算两个参数的和…...
Linux proc虚拟文件系统
文章目录 简介proc常用节点pid节点procfs接口参考 简介 测试环境:Linux dev-PC 5.18.17-amd64-desktop-hwe #20.01.00.10 SMP PREEMPT_DYNAMIC Thu Jun 15 16:17:50 CST 2023 x86_64 GNU/Linux proc虚拟文件系统是linux内核提供的一种让用户和内核内部数据结构进行交…...
IDEA中常见问题汇总
🍓 简介:java系列技术分享(👉持续更新中…🔥) 🍓 初衷:一起学习、一起进步、坚持不懈 🍓 如果文章内容有误与您的想法不一致,欢迎大家在评论区指正🙏 🍓 希望这篇文章对你有所帮助,欢…...
Spring Security 学习大纲
Spring Security 系统学习大纲 一、基础入门 Spring Security 概述 安全框架的核心功能(认证、授权、攻击防护)核心组件:SecurityFilterChain, UserDetailsService, AuthenticationProvider, AccessDecisionManager与 Servlet 容器的集成原理…...
本地部署模型全攻略阶段二_3---Kiln AI
Kiln AI && Ollma && DeepSeek Kil AI:简单介绍与入门教程Kiln AI简介核心功能优势与特点二、Kiln AI安装步骤下载安装创建项目和任务使用界面Fine Tuning三、资源与支持Kil AI:简单介绍与入门教程 Kiln AI简介 简述Kiln AI是什么 Kiln AI是一款开源的AI开发…...
从零开始:使用Jenkins实现高效自动化部署
在这篇文章中我们将深入探讨如何通过Jenkins构建高效的自动化部署流水线,帮助团队实现从代码提交到生产环境部署的全流程自动化。无论你是Jenkins新手还是有一定经验的开发者,这篇文章都会为你提供实用的技巧和最佳实践,助你在项目部署中走得…...
机器学习 - 线性回归(最大后验估计)
最大似然估计的一个缺点是当训练数据比较少时会发生过拟合,估计的参数可能不准确.为了避免过拟合,我们可以给参数加上一些先验知识. 一、先从最大似然估计的一个缺点入手 最大似然估计(MLE)在处理小样本数据时,容易发…...
Web前端开发--HTML
HTML快速入门 1.新建文本文件,后缀名改为.html 2.编写 HTML结构标签 3.在<body>中填写内容 HTML结构标签 特点 1.HTML标签中不区分大小写 2.HTML标签属性值中可以使用单引号也可使用双引号 3.HTML语法结构比较松散(但在编写时要严格一点&…...
Linux | 系统调用
文章目录 Linux | 系统调用open 系统调用功能头文件和函数原型参数解释返回值示例代码 其他常用系统调用read 系统调用write 系统调用close 系统调用lseek 系统调用stat 系统调用 Linux | 系统调用 前言:在Linux系统中,系统调用是用户空间程序与内核进行…...
用easyExcel如何实现?
要使提供的 ExcelModelListener 类来解析 Excel 文件并实现批量存储数据库的功能,需要结合 EasyExcel 库来读取 Excel 数据。具体来说,可以使用 EasyExcel.read() 方法来读取 Excel 文件,并指定 ExcelModelListener 作为事件监听器。 下面是…...
ASP.NET Core SignalR身份验证
在需要登录才能访问的集线器类上或者方法上添加[Authorize]。也支持角色等设置,可以设置到Hub或者方法上。 配置好User、Role、MyDbContext、JWTSettings、IdentityHelper Program.cs using SignaIR的基本使用; using Scalar.AspNetCore; using Identity框架; us…...
查询语句来提取 detail 字段中包含 xxx 的 URL 里的 commodity/ 后面的数字串
您可以使用以下 SQL 查询语句来提取 detail 字段中包含 oss.kxlist.com 的 URL 里的 commodity/ 后面的数字串: <p><img style"max-width:100%;" src"https://oss.kxlist.com//8a989a0c55e4a7900155e7fd7971000b/commodity/20170925/20170…...
linux本地部署deepseek
目录 安装ollama安装open-webui网页客户端界面本地安装open-webui直接安装在裸机上安装在docker中 外部服务器安装open-webui,并链接本地的ollama服务直接安装在外部服务器裸机上配置systemd启动open-webui 安装在docker中 最后更新时间2024-05-24 安装ollama olla…...
ESP32_H2(IDF)学习系列-蓝牙基础学习(上)
一、简介 参考:[乐鑫-蓝牙] Bluetooth LE 的分层架构 Bluetooth LE 协议定义了三层软件结构,自上而下分别是 应用层 (Application Layer) 应用层(Application Layer) 主机层 (Host Layer) 控制器层 (Controller Layer) 应用…...
防御综合实验
需求一 配置vlan [SW2]int g 0/0/2 [SW2-GigabitEthernet0/0/2]port link-type access [SW2-GigabitEthernet0/0/2]port default vlan 10 [SW2-GigabitEthernet0/0/2]int g0/0/3 [SW2-GigabitEthernet0/0/3]port link-type access [SW2-GigabitEthernet0/0/3]port default vl…...
Blazor-<select>
今天我们来说说<select>标签的用法,我们还是从一个示例代码开始 page "/demoPage" rendermode InteractiveAuto inject ILogger<InjectPage> logger; <h3>demoPage</h3> <select multiple>foreach (var item in list){<…...
zy.21
PHP(续) PHP代码执行漏洞 1.PHP中代码漏洞的概念 代码执行漏洞就是在代码中若存在eval、assert等能将所接收的参数作为代码去执行,并且拼接的内容可被访问者控制,也就是把传入的参数给拼接进去了,造成了额外的代码执行,也就造成了代码执行漏洞。(大概原理&#x…...
【c++】四种类型转换形式
【c】四种类型转换形式 编译时: static_cast(静态转换) const_cast(去常性转换) reinterpret_cast(重新解释转换,直接转换地址) 运行时: dynamic_cast(动态转换,运行时类…...
在npm上传属于自己的包
最近在整理代码,上传到npm方便使用,所以学习了如何在npm发布一个包,整理写成一篇文章和大家一起交流。 1、注册npm账号 npm | Home 2、确保是登录状态 (在包目录下,终端执行 npm login) 按enter键自动打开页面&…...
关系型数据库主备高可用方案对比笔记
目录标题 数据库高可用性解决方案对比Oracle Data GuardMySQL 主从复制SQL Server AlwaysOnPG Patroni 流复制达梦 DMDataWatch人大金仓 repmgr 备库故障是否影响主库?表格关系型数据库主备高可用方案对比笔记 数据库高可用性解决方案对比 Oracle Data Guard Orac…...
怎么查看电脑显存大小(查看电脑配置)
这里提供一个简单的方法查看 winr打开cmd 终端输入dxdiag进入DirectX 点击显示查看设备的显示内存(VRAM) 用这个方法查看电脑配置和显存是比较方便的 dxdiag功能 Dxdiag是Windows的DirectX诊断工具,其主要作用包括但不限于以下几点&#…...
深入理解指针(二)
深入理解指针(二) 前言:一、const修饰指针1.const修饰变量2.const修饰的指针变量 二、野指针1.野指针的成因(1).指针的未初始化(2).指针的越界访问(3).指针的空间释放 2.如何规避野指针(1).指针初始化(2).小心访问越界(3)指针不再使用的时候&…...
非华为电脑制作一碰传NFC贴纸
前提: 在笔记本上安装好华为电脑管家,可以在 github 上下载,并测试可以正常和手机或平板连接步骤: 1、打开电脑华为电脑管家,点【快捷服务】,记录下序列号,一般安装后会生成16位的序列号 2、…...
Wpf美化按钮,输入框,下拉框,dataGrid
Wpf美化按钮,输入框,下拉框,dataGrid 引用代码后 引用资源 <ControlTemplate x:Key"CustomProgressBarTemplate" TargetType"ProgressBar"><Grid><Border x:Name"PART_Track" CornerRadius&q…...
Office/WPS接入DeepSeek等多个AI工具,开启办公新模式!
在现代职场中,Office办公套件已成为工作和学习的必备工具,其功能强大但复杂,熟练掌握需要系统的学习。为了简化操作,使每个人都能轻松使用各种功能,市场上涌现出各类办公插件。这些插件不仅提升了用户体验,…...
【深度学习】多目标融合算法(四):多门混合专家网络MMOE(Multi-gate Mixture-of-Experts)
目录 一、引言 二、MMoE(Multi-gate Mixture-of-Experts,多门混合专家网络) 2.1 技术原理 2.2 技术优缺点 2.3 业务代码实践 2.3.1 业务场景与建模 2.3.2 模型代码实现 2.3.3 模型训练与推理测试 2.3.4 打印模型结构 三、总结 一、…...
git submodule使用
git submodule 用于关联其他独立的仓库。 它有着几点好处: 代码复用:可以将工具代码放到单独的仓库,再通过 submodule 关联。模块化开发:可以将项目拆分成多个模块,每个模块设置单独仓库独立开发,再通过 su…...
朝天椒USB服务器:解决加密狗远程连接
本文探讨朝天椒USB服务器用Usb Over Network技术,解决加密狗在虚拟机、云主机甚至异地的远程连接问题。 在企业数字化转型的浪潮中,加密狗作为防止软件盗版的重要手段,广泛应用于各类软件授权场景。然而,随着企业超融合进程不断加…...
[笔记.AI]deepseek-r1的不同版本(满血版、蒸馏版、量化)
满血版:是原始的高性能模型; 蒸馏版(Distill):是指将大型模型(教师模型)的知识转移到较小的模型(学生模型)中,以保持性能的同时减少计算资源的需求࿱…...
Kokoro 开源文本转语音引擎上线!多语言支持,无需联网,浏览器内极速运行
Kokoro 是一款轻量级的开源文本转语音(TTS)引擎,凭借其高效能和轻量化设计,迅速在技术社区中引起关注。本文将详细介绍 Kokoro 的主要特点,并提供在浏览器和 Python 环境中的代码示例,帮助您快速上手。 1. Kokoro:可在浏览器中运行的 TTS 引擎 1.1 简介 Kokoro 是一个…...
Unity 基础编程
在这个练习中将新建unity脚本,控制player的运动与转动,实现用代码检测碰撞与删除物体。 该练习将应用附件中的项目文件,该文件与Unity快速练习的文件是同一个项目文件。 一、构建Player运动脚本 该部分将构建一个在场景中由玩家控制游戏物…...
CTFHub-RCE系列wp
目录标题 引言什么是RCE漏洞 eval执行文件包含文件包含php://input读取源代码远程包含 命令注入无过滤过滤cat过滤空格过滤目录分隔符过滤运算符综合过滤练习 引言 题目共有如下类型 什么是RCE漏洞 RCE漏洞,全称是Remote Code Execution漏洞,翻译成中文…...
基于YoloV11和驱动级鼠标模拟实现Ai自瞄
本文将围绕基于 YoloV11 和驱动级鼠标实现 FPS 游戏 AI 自瞄展开阐述。 需要着重强调的是,本文内容仅用于学术研究和技术学习目的。严禁任何个人或组织将文中所提及的技术、方法及思路应用于违法行为,包括但不限于在各类游戏中实施作弊等违规操作。若因违…...
基于微信小程序的博物馆预约系统的设计与实现
hello hello~ ,这里是 code袁~💖💖 ,欢迎大家点赞🥳🥳关注💥💥收藏🌹🌹🌹 🦁作者简介:一名喜欢分享和记录学习的在校大学生…...
R语言LCMM多维度潜在类别模型流行病学研究:LCA、MM方法分析纵向数据
全文代码数据:https://tecdat.cn/?p39710 在数据分析领域,当我们面对一组数据时,通常会有已知的分组情况,比如不同的治疗组、性别组或种族组等(点击文末“阅读原文”获取完整代码数据)。 然而,…...
python卷积神经网络人脸识别示例实现详解
目录 一、准备 1)使用pytorch 2)安装pytorch 3)准备训练和测试资源 二、卷积神经网络的基本结构 三、代码实现 1)导入库 2)数据预处理 3)加载数据 4)构建一个卷积神经网络 5࿰…...
如何把邮件批量导出到本地
最近遇到邮箱满了的问题,需要把邮件批量导出到本地,然后清空邮箱。 问题是这个邮箱的官网,没有批量导出按钮,比较麻烦;总不能一封一封下载到本地,上万的。 找到了一个好用的工具,Mozilla Thun…...
C++智能指针的使用
文章目录 智能指针的使用和原理智能指针的使用场景RAII和智能指针C标准库智能指针的使用 智能指针的使用和原理 智能指针的使用场景 1. 下面的程序中,new了以后,我们也delete了,但是因为抛异常导致后面的delete没有得到执行,所以…...
Docker安装Redis
一、保证Docker提起来了 systemctl status docker想这没有启动要先启动一下 systemctl status docke二、拉取Redis(默认拉最新版) sudo docker pull redis检查一下拉成功没有 docker images三、创建相关目录 mkdir -p /home/redis/{conf,data}四、…...
深入理解MySQL索引底层数据结构
文章目录 前言一、MySQL索引是什么?二、索引的核心需求三、MySQL为什么选择BTree做为数据结构1.如果使用的是Hash 做为数据结构2.如果使用二叉树做为数据结构3.使用红黑树做为数据结构4.使用B-Tree做为数据结构5.BTree做为数据结构 4.BTree深度剖析结构特性与 B-Tre…...