当前位置：首页 > news >正文

H.264添加 SEI 信息技术文档

news 来源：原创 2025/5/14 19:28:16

概述
本文档描述如何在 H.264 视频流中动态插入自定义 SEI信息。SEI 是 H.264/AVC 标准中定义的一种元数据格式，可用于携带时间戳、版权信息、场景标记等附加数据。本方案基于 FFmpeg 的 AVPacket 结构和标准 H.264 NAL 单元格式实现，支持与视频帧的精确同步。
SEI 核心概念
SEI 的作用
1. 元数据承载：传递与视频帧相关的非压缩数据（如 GPS 信息、时间戳）。
2. 解码辅助：提供解码器增强信息（如颜色空间描述）。
3. 流分析：用于视频流完整性校验或内容标记。
SEI 结构
字段长度描述
NAL Header 1 byte NAL 单元类型（0x06 表示 SEI）
Payload Type 可变长度 SEI 数据类型（如用户自定义=5）
Payload Size 可变长度负载数据的字节长度
Payload Data N bytes 实际负载内容
实现原理
整体流程
A[输入H.264数据包] --> B[生成SEI NAL单元]
B --> C[合并到原始数据前]
C --> D[更新AVPacket]
D --> E[写入封装层]
关键技术点
1. NAL 单元封装：遵循 H.264 Annex B 格式，添加 0x00000001 起始码。
2. 可变长度编码：对 payload_type 和 payload_size 进行多字节编码。
3. 内存管理：使用 FFmpeg 的 AVBufferRef 安全管理数据内存。
代码实现详解
代码实现
// 将字符串转换为二进制表示
std::vector<uint8_t> string_to_binary(const std::string& str) {
return std::vector<uint8_t>(str.begin(), str.end());
}

// 编码payloadType和payloadSize
void encode_sei_header(std::vector<uint8_t>& nal_unit, uint32_t payload_type, size_t payload_size) {
while (payload_type > 0x7F) {
nal_unit.push_back((payload_type & 0x7F) | 0x80);
payload_type >>= 7;
}
nal_unit.push_back(payload_type);

    while (payload_size > 0x7F) {nal_unit.push_back((payload_size & 0x7F) | 0x80);payload_size >>= 7;}nal_unit.push_back(payload_size);

}

// H.264起始码
const uint8_t H264_START_CODE[] = {0x00, 0x00, 0x00, 0x01};

void append_custom_sei_to_packet(AVPacket *pkt, const std::string &sei_message)
{
// 创建SEI负载
std::vector<uint8_t> sei_payload = string_to_binary(sei_message);

// 构建SEI NAL单元
std::vector<uint8_t> sei_nal;
sei_nal.insert(sei_nal.end(), H264_START_CODE, H264_START_CODE + 4);  // 添加起始码
sei_nal.push_back(0x06);                                              // SEI NAL单元头// 编码SEI消息头
encode_sei_header(sei_nal, 5, sei_payload.size());  // payloadType=5 表示用户数据未注册// 合并NAL头和负载
sei_nal.insert(sei_nal.end(), sei_payload.begin(), sei_payload.end());// 分配新内存并复制数据
size_t   new_size = pkt->size + sei_nal.size();
uint8_t *new_data = (uint8_t *)av_malloc(new_size);
if (!new_data)
{fprintf(stderr, "Memory allocation failed\n");return;
}
memcpy(new_data, sei_nal.data(), sei_nal.size());
memcpy(new_data + sei_nal.size(), pkt->data, pkt->size);// 更新pkt的数据和大小
av_packet_unref(pkt);
pkt->data = new_data;
pkt->size = new_size;// 创建AVBufferRef
AVBufferRef *buffer_ref = av_buffer_create(new_data, new_size, av_buffer_default_free, NULL, 0);
if (!buffer_ref)
{fprintf(stderr, "Failed to create AVBufferRef\n");av_free(new_data);return;
}
pkt->buf = buffer_ref;

}

void MP4Recorder::receiveH264Stream(const uint8_t *data, size_t size, const std::string &sei)
{
if (!m_bIsRecording || !ofmt_ctx) return;

    AVPacket pkt;init_packet(&pkt);pkt.data = const_cast<uint8_t*>(data);pkt.size = size;// 动态生成并附加SEI到当前帧append_custom_sei_to_packet(&pkt, sei);write_video_packet(pkt);av_packet_unref(&pkt);

}
2. 函数说明
1. string_to_binary：将字符串转换为二进制数据
2. encode_sei_header：编码 SEI 头部（Payload Type + Size）,nal_unit: 输出的 NAL 单元容器，payload_type: SEI 类型（如 5=用户未注册数据）,payload_size: 负载数据长度，每个字节最高位为延续标志（1 表示后续还有字节），其余7 位存储数据，按小端序排列
3. append_custom_sei_to_packet：将 SEI 添加到 AVPacket 开头，构建 SEI NAL 单元（起始码 + NAL头 + 负载），合并原始视频数据，更新 AVPacket 内存引用

H.264添加 SEI 信息技术文档

概述本文档描述如何在 H.264 视频流中动态插入自定义 SEI信息。SEI 是 H.264/AVC 标准中定义的一种元数据格式，可用于携带时间戳、版权信息、场景标记等附加数据。本方案基于 FFmpeg 的 AVPacket 结构和标准 H.264 NAL 单元格式实现，支持与视频帧的精确…...

编程日记 2025/5/14 19:28:16

ICMP协议

ICMP协议一、ICMP基本概念 1、ICMP协议 Internet控制报文协议，用于在IP主机、路由器之间传递控制消息，控制消息指网络通不通、主机是否可达、路由是否可用等等ICMP是属于网络层的协议，封装在传输层与网络层之间 2、ICMP报文格式类型 (t…...

编程日记 2025/5/1 12:32:02

react中封装一个预览.doc和.docx文件的组件

主要用到了mammoth这个插件,mammoth.js‌是一个JavaScript库，主要用于将Microsoft Word文档（.docx格式）转换为HTML。它可以通过Node.js环境使用，也可以直接在浏览器中使用。关键代码: import mammoth from mammoth; import { u…...

编程日记 2025/5/14 18:28:11

驾驭音质，尽享四通道力量——AXPA17851

AXPA17851: 4x48W 车用AB类四通道桥式输出音频功率放大器 AXPA17851是采用BCD(双极型，CMOS，DMOS)工艺技术设计的四通道桥式输出AB类车用音频功率放大器，采用完全互补的P型/ N型输出结构， 具有轨到轨的输出电压摆幅，高输…...

编程日记 2025/5/1 12:30:58

人格伤疤测试：发现内心深处的情感创伤

人格伤疤测试：发现内心深处的情感创伤工具介绍我们开发了一个专业的人格伤疤测试工具，帮助您发现和了解内心深处的情感创伤。这个在线测评从十个关键维度全面评估您的心理状态： 核心维度情感创伤: 评估童年经历对当前情绪的影响自我认…...

编程日记 2025/5/14 18:09:02

CANopen协议简单介绍和使用

文章目录一、CAN总线介绍二、CAN总线的帧类型三、CAN总线的特性四、Linux中的CAN帧驱动结构体五、CAN总线升级版本-CANFD六、更高层封装的协议-应用层封装的CANopen协议总结一、CAN总线介绍 CAN总线（Controller Area Network） 是一种串行通信协议&…...

编程日记 2025/5/13 19:55:33

数据隐私在Web3环境下的重要性及实现方法

在这个信息爆炸的时代，我们正站在 Web3 的门槛上，迎接着一个全新的网络架构和用户交互方式。Web3 不仅仅是技术的迭代，它还代表了一种全新的网络架构和用户交互方式。在 Web3 环境下，数据隐私成为了一个至关重要的话题。本文将探讨…...

编程日记 2025/5/14 19:01:49

【每日八股】复习 Redis Day4：线程模型

文章目录复习 Redis Day4：线程模型介绍一下 Redis 的线程模型核心线程模型（Redis 6.0 之前）Redis 6.0 的多线程改进Redis 真的是单线程吗？Redis 的线程模型剖析上一篇 Redis 的应用我今天才完成，因此明天一并复习 Re…...

编程日记 2025/5/14 19:21:51

手动创建一份konga对应helm的chart项目

rootiZj6c72dzbei17o2cuksmeZ:~/yaml/konga# helm create konga-chart Creating konga-chart更改对应的文件 deployment.yaml rootiZj6c72dzbei17o2cuksmeZ:~/yaml/konga/konga-chart# cat templates/deployment.yaml apiVersion: apps/v1 kind: Deployment metadata:name: k…...

编程日记 2025/5/14 18:38:17

GD32F407单片机开发入门(十九)DMA详解及ADC-DMA方式采集含源码

文章目录一.概要二.GD32F407VET6单片机DMA外设特点三.GD32单片机DMA内部结构图四.DMA各通道请求五.GD32F407VET6单片机ADC-DMA采集例程六.工程源代码下载七.小结一.概要基本概念： DMA是Direct Memory Access的首字母缩写,是一种完全由硬件执行数据交换的工作方式…...

编程日记 2025/5/1 12:25:37

AI HR新范式：易路iBuilder如何通过“技术隐身，价值凸显”，成为HR身份转型的好帮手

HR的身份危机与转型机遇面对本轮AI引发的组织重构浪潮，HR在组织中的角色发生了哪些变化？ 传统，HR负责构建公司“人员流程”的体系与专业服务，涵盖招聘、发展、薪酬、支持等职能。但在企业持续追求“生产力”的当下，…...

编程日记 2025/5/12 2:58:20

栈与队列 Part 7

队列的链式存储结构及实现队列的链式存储结构，其实就是线性表的单链表，只不过它只能尾进头出而已，我们把它简称为链队列为了操作上的方便，我们将队头指针指向链队列的头结点，而队尾指针指向终端结点，如图…...

编程日记 2025/5/14 18:53:48

pinia实现数据持久化插件pinia-plugin-persist-uni

在学习uniapp过程中，看到了pinia-plugin-persist-uni插件，以前面试过程中也有面试过说vuex数据刷新之前的数据就丢失了，之前回答的是把数据存储到数据库或者本地存储。pinia-plugin-persist-uni本质上数据也是本地存储。 1、安装 npm instal…...

编程日记 2025/5/1 12:25:34

32单片机——独立看门狗

1、IWDG的简介 IWDG：Independent watchdog，即独立看门狗独立看门狗本质上是一个定时器，该定时器是一个12位的递减计数器，当计数器的值减到0的时候，就会产生一个复位信号如果在计数没减到0之前，重置计数器…...

编程日记 2025/5/8 3:00:18

人工智能数学基础（五）：概率论

概率论是人工智能中处理不确定性的核心工具，它为机器学习、数据科学和统计分析提供了理论基础。本文将深入浅出地介绍概率论的重要概念，并结合 Python 实例，帮助读者更好地理解和应用这些知识。资源绑定附上完整资源供读者参考学习&#xff0…...

编程日记 2025/5/5 4:49:18

Hbuilder 开发鸿蒙应用，打包成 hap 格式（并没有上架应用商店，只安装调试用）

效果这个是打包后的 hap 文件，（并没有上架应用商店，只安装调试用） 拖到模拟器里，可以正常安装这是鸿蒙的版本前置注册华为开发者账号下载 DevEco-studio 软件 hbuilder 阿尔法版本大致思路然后注册…...

编程日记 2025/5/1 12:22:25

第一章 OpenCV篇-配置及基础知识-Python

目录一.Python配置OpenCV 二.图像基本操作 1.数据读取-图像 2.数据读取-视频三.ROI区域 1.任意提取区域 2.边界填充四.数值计算 1.图像相加 2.图像融合此章节主要讲解计算机视觉也就是OpenCV，这是我即将开启的篇章，其中这一章主要运用的语…...

编程日记 2025/5/14 18:49:19

NPTL原理分析

1. NPTL 简介 1.1. 定义与核心目的原生 POSIX 线程库 (Native POSIX Thread Library, NPTL) 是 GNU C 库 (glibc) 中针对 Linux 操作系统的 POSIX Threads (pthreads) 标准规范的现代实现。其根本作用在于为 Linux 系统提供高效且符合标准的并发多线程编程能力。NPTL 并非一…...

编程日记 2025/5/3 20:03:06

先知AIGC超级工场，如何助力企业降本增效？

北京先智先行科技有限公司，作为行业内备受瞩目的企业，销售有“先知大模型”、“先行AI商学院”“先知AIGC超级工场”三个旗舰产品。其中，先知大模型私有化部署、先知AIGC超级工场、AI训练师、先知人力资源服务、先知产业联盟，构成…...

编程日记 2025/5/14 18:23:10

【数学建模国奖速成系列】优秀论文绘图复现代码（三）

文章目录引言箱线图面积图面积图2热图矩阵散点图完整复现代码引言数模比赛的绘图是非常重要得，这篇文章给大家分享我自己复现国奖优秀论文的代码，基于Matalab来实现，可以直接运行出图。之前的文章也有分享【折线图】【柱状图】的绘制&…...

编程日记 2025/5/14 18:15:12

架构进阶：72页集管IT基础设施蓝图设计方案【附全文阅读】

该方案适用于集团企业的 IT 决策者、架构师、运维管理人员等。方案指出，企业在发展和市场机遇下面临信息化挑战，需加强统一建设。其核心是打造以云平台为核心的统一敏捷应用平台。通过分析现状，明确能力需求，提出建设统一、安全、高效的 IaaS 和 PaaS 相结合的技术资源云目…...

编程日记 2025/5/1 12:20:15

从技术角度看Facebook的隐私保护机制

在数字化时代，隐私保护成为了公众关注的焦点。作为全球最大的社交网络平台之一，Facebook 在隐私保护方面采取了一系列技术措施。本文将从技术角度探讨 Facebook 的隐私保护机制，揭示它是如何在提供个性化服务的同时，确保用户隐私信…...

编程日记 2025/5/1 12:20:14

网络安全之浅析Java反序列化题目

前言这段时间做了几道Java反序列化题目，发现很多题目都是类似的，并且可以通过一些非预期gadget打进去，就打算总结一下常见的题目类型以及各种解法，并提炼出一般性的思维方法。正文分析入口点拿到题目，有附件最…...

编程日记 2025/5/14 19:06:07

make报错：Cannot open jobserver /tmp/GMfifo12676r: No such file or directory

报错描述执行的命令 make -j16 报错显示：Cannot open jobserver /tmp/GMfifo12676r: No such file or directory 解决办法 make -j16 --jobserver-stylepipe 参考的 Re: Cannot open jobserver ... ## 祝你好运hope("大神多多指点") topic("有…...

编程日记 2025/5/14 19:21:51

企业的呼入语音智能体是什么样子？

当传统客服模式陷入瓶颈，一场沟通革命正在悄然发生——云蝠智能呼入语音智能体，正以AI技术为核心驱动力，为企业重塑服务生态。深夜11点，客户突然来电咨询订单进度；节假日高峰，客服热线被挤爆却无人应答&am…...

编程日记 2025/5/14 19:02:53

Arduino程序结构详解与嵌入式开发对比指南

Arduino编程详解：从基础到进阶实践一、Arduino程序的核心架构与扩展设计 1.1 程序框架的深度解析 Arduino程序的基石setup()和loop()函数构成了整个开发体系的核心逻辑。这两个函数的设计哲学体现了嵌入式系统开发的两个关键维度： 初始化阶段&#…...

编程日记 2025/5/1 12:15:58

华为云汪维敏：AI赋能应用现代化，加速金融生产力跃升

4月24日，在2025第四届中国国际软件发展大会的“应用现代化赋能数智金融新时代”论坛上，华为云PaaS服务产品部副部长、应用现代化产业联盟特邀顾问汪维敏先生发表“AI赋能应用现代化，加速金融生产力跃升”主题演讲，介绍了未来应用智…...

编程日记 2025/5/1 12:15:57

linux find命令妙用

对于需要查找一定时间的文件，可以使用find 命令处理格式参考 find /path/to/search -type f -name "pattern" -mtime -2 -exec sh /path/to/XXX.sh {} /;更多细节讲解看这里find命令时间细讲那么实际工作中使用的案例核心命令 find /var/path/ -ty…...

编程日记 2025/5/14 18:57:22

利用v0与Cursor优化开发流程和效率

以下是 v0.dev 与 Cursor 的深度对比分析，基于最新功能（截至2025年4月）和实际开发场景： 一、核心定位对比维度v0.devCursor本质定位AI驱动的前端设计工具AI增强的代码编辑器核心目标快速生成可交互的UI原型提升全栈开发效率&am…...

编程日记 2025/5/1 12:13:52

ReSearch: Learning to Reason with Search for LLMs via Reinforcement Learning

🧠 一、论文背景：为什么需要 ReSearch？ 🌍 大语言模型（LLM）的问题： 尽管 GPT、Claude、Qwen 等 LLMs 在推理上取得了巨大进展，但它们仍面临几个关键挑战： 信息孤岛&am…...

编程日记 2025/5/1 12:12:49

瑞芯微芯片算法开发初步实践

文章目录一、算法开发的一般步骤1.选择合适的深度学习框架2.对于要处理的问题进行分类，是回归问题还是分类问题。3.对数据进行归纳和整理4.对输入的数据进行归一化和量化，保证模型运行的效率和提高模型运行的准确度5.在嵌入式处理器上面运行模型&#x…...

编程日记 2025/5/1 12:11:46

大连理工大学选修课——机器学习笔记（1）：概述

机器学习概述机器学习的本质机器学习是为了设计解决问题的算法。为输入与输出建立某种映射： 类似于函数关系： Y f ( X ) Yf(X) Yf(X) 不同的映射方法体现了不同的思想。相关概念深度学习是机器学习的一个分支深度学习是深层次化的神经网…...

编程日记 2025/5/5 14:04:38

（4）python中jupyter lab使用python虚拟环境

1. 先了解IPython和IPyKernel简介 IPython 是一个功能强大的交互式 Python 解释器和开发环境。它提供了一种增强的 Python Shell,使得用户能够以交互的方式探索、分析和可视化数据。IPython 的名称来源于 "Interactive Python",体现了其交互式的特性。 IPyKernel 是…...

编程日记 2025/5/1 12:08:31

VSCode Auto Rename Tag插件不生效

目录一、问题二、解决方法一、问题 1.Auto Rename Tag插件安装后不生效，每次打开右下角都有一个弹框提示： The Auto Rename Tag server crashed 5 times in the last 3 minutes. The server will not be restarted. 大概意思：Auto …...

编程日记 2025/5/1 12:08:30

git did not exit cleanly (exit code 128) 已解决

在回退代码的时候遇到这个报错提示： 网上搜索的时候看到有几种解决办法： 1.更改地址 TortoiseGit --> "Settings" --> "Network" 将"C:\Program Files\TortoiseGit\bin\TortoiseGitPlink.exe" 修改为"C:\…...

编程日记 2025/5/14 19:06:08

一个完整的神经网络训练流程详解（附 PyTorch 示例）

🧠 一个完整的神经网络训练流程详解（附 PyTorch 示例） 📌 第一部分：神经网络训练流程概览（总） 在深度学习中，构建和训练一个神经网络模型并不是简单的“输入数据、得到结果”这么简…...

编程日记 2025/5/1 12:07:25

2025年-redis（p1-p10）

1.redis介绍 （1）基础：常见的数据结构及命令、jedis的应用和优化、springDataRedis的应用和优化 （2）企业实战的应用场景：共享session、缓存解决问题、秒杀中的redis应用、社交app中的redis应用、redis特殊结…...

编程日记 2025/5/14 18:38:17

一、OrcaSlicer源码编译

一、下载 1、OrcaSlicer 2.3.0版本的源码 git clone https://github.com/SoftFever/OrcaSlicer.git -b v2.3.0 二、编译 1、在OrcaSlicer目录运行cmd窗口，输入build_release.bat 2、如果出错了，可以多运行几次build_release.bat 3、在OrcaSlicer\b…...

编程日记 2025/5/9 23:14:27

Linux 基础IO（上）--文件与文件描述符fd

前言： 在生活里，我们常和各种文件打交道，像用 Word 写文档、用播放器看视频，这些操作背后都离不开文件的输入输出（I/O）。在 Linux 系统中，文件 I/O 操作更是复杂且关键。接下来我们将深入探讨…...

编程日记 2025/5/14 19:05:01

泛微OA.E9--07--IDEA搭建后端二开环境

泛微OA.E9–07–IDEA搭建后端二开环境一.前期准备 1.安装IDEA 2.从服务器中把ecology和JDK这几个文件拷贝到本地。 （ecology太大的话可以不拷log日志文件） 3.拷到本地后，在ecology文件下创建src文件夹二.配置IDEA 1.启动IDEA后&#xff0…...

编程日记 2025/5/14 19:26:07

美的人形机器人即将投入实际应用

国内家电巨头美的集团近日公布了其自主研发的人形机器人的具体落地计划。根据公司披露的信息，这款机器人将于5月在湖北荆州的洗衣机工厂率先投入使用，承担设备运维、质量检测和物料搬运等工作任务。预计今年下半年，该机器人还将进入美的线下门…...

编程日记 2025/5/14 19:20:45

【使用小皮面板 + WordPress 搭建本地网站教程】

🚀 使用小皮面板 WordPress 搭建本地网站教程（快速上手） 本教程将手把手教你如何使用小皮面板（XAMPP 类似工具） 和 WordPress 搭建一个完全本地化的网站环境。适合初学者 / 博主 / Web开发者本地练习使用&#xf…...

编程日记 2025/5/1 12:03:08

EWM 流程全自动化实现方法

目录 1 简介 2 实现方法 2.1 EWM 内向交货单自动创建 2.2 EWM 自动收货 2.3 当 EWM GR 的时候，自动触发 EWM 上架仓库任务。 2.4 确认 EWM 仓库任务/订单 3 写在最后 1 简介当仓库遇到 EWM 的时候，大家首先想到的是 EWM 的业务操作多且功能复杂，甚至有些客户还会考…...

编程日记 2025/5/14 18:33:40

智能驾驶新时代：NVIDIA高级辅助驾驶引领未来出行安全

智能驾驶新时代：NVIDIA高级辅助驾驶引领未来出行安全在全球汽车产业数字化转型的时代潮流中，高级辅助驾驶技术已逐渐成为推动产业革新的核心动力。作为这一领域的领导者之一，NVIDIA通过其先进的技术解决方案，正在积极塑造未来的…...

编程日记 2025/5/14 19:19:32

NVIDIA DRIVE AGX平台：引领智能驾驶安全新时代

随着科技的不断进步，汽车行业正迎来前所未有的变革，智能驾驶技术成为全球产业竞相布局的焦点之一。然而，这场技术革命的背后，最关键且被广泛关注的是安全性问题。近日，我认真研读了NVIDIA发布的《自动驾驶安全报告》白…...

编程日记 2025/5/1 12:03:06

聚焦数字中国|AI赋能与安全守护：Coremail引领邮件办公智能化转型

4月28日，第八届数字中国建设峰会在福州拉开序幕。当天，数字中国新产品新技术发布会开讲，Coremail受邀亮相现场，与与会嘉宾分享AI在邮件产品领域的最新应用成果和实践经验。 Coremail首席客户代表刘子建以《AI赋能与安全守护&#…...

编程日记 2025/5/14 18:23:11

OpenCV的grabCut算法分割图像

OpenCV计算机视觉开发实践：基于Qt C - 商品搜索 - 京东基本概念使用grabCut算法可以用最小程度的用户交互来分解前景。从用户角度来看，grabCut算法是怎么工作的呢？首先画一个矩形方块把前景图圈起来，前景区域应该完全在矩形内…...

编程日记 2025/5/1 12:01:00

[计算机科学#6]：从锁存器到内存，计算机存储的构建与原理

【核知坊】：释放青春想象，码动全新视野。我们希望使用精简的信息传达知识的骨架，启发创造者开启创造之路！！！ 内容摘要：在上一篇文章中，我们深入了解了计算机如…...

编程日记 2025/5/1 11:59:57

练习001

目录前言数字诗意分析代码封闭图形个数分析代码回文数组分析代码商品库存管理分析代码挖矿分析代码回文字符串分析代码前言好久不更新了，今天来更新一下。当然不是主包偷懒啊，是最近的事情实在是有点多QAQ。…...

编程日记 2025/5/1 11:57:50

【Linux调整FTP端口】

Linux调整FTP端口一、确保新端口未被占用在修改端口之前，可以使用以下命令检查端口是否被占用： 二、修改vsftpd配置文件1. 打开vsftpd配置文件2. 找到并修改端口配置3. 保存并退出4. 重启vsftpd服务三、配置防火墙在Linux系统中修改FTP端口&#xff0…...

编程日记 2025/5/1 11:56:46

相关文章：