Protocol Buffer
1、什么是 Protocol Buffers？
Protocol Buffers （protobuf） 是一种序列化结构化数据的方法，由 Google 开发。它们提供了一种与语言无关、与平台无关且可扩展的机制，用于高效序列化结构化数据。
- Protocol Buffers 中的数据结构是在架构文件（.proto 文件）中使用简单的与语言无关的接口定义语言 （IDL） 定义的。
- Protocol Buffers 将数据序列化为二进制格式。这种二进制格式可通过网络高效传输，并且与基于文本的格式（如 XML 或 JSON）相比，序列化和反序列化速度更快。
- Protocol Buffers 支持多种编程语言，包括 C++、Java、Python、Go 等。
- Google 提供了编译器工具（protobuf 编译器），这些工具基于 .proto 架构文件生成这些语言的数据访问类和序列化/反序列化代码。
- Protocol Buffers 支持向后和向前兼容性。可以将新字段添加到架构中，而不会中断可能仍在使用旧版本架构的现有客户端或服务器。
- 这使得在大型系统中随时间推移演变数据格式变得更加容易。
- Protocol Buffers 通常用于对结构化数据进行高效序列化、传输和存储至关重要的场景。这包括网络通信协议（例如 gRPC，默认情况下使用 protobuf）、在数据库中存储数据，以及设计需要有效处理大量数据的 API。
2、示例实现
Protocol Buffers支持以 C++、C#、Dart、Go、Java 和 科特林 / Objective-C、Python 和 Ruby。使用 proto3，您还可以使用 PHP。
message Person {optional string name = 1;optional int32 id = 2;optional string email = 3;
}原型定义
// Java code
Person john = Person.newBuilder().setId(1234).setName("John Doe").setEmail("jdoe@example.com").build();
output = new FileOutputStream(args[0]);
john.writeTo(output);使用生成的类来持久保存数据。
// C++ code
Person john;
fstream input(argv[1],ios::in | ios::binary);
john.ParseFromIstream(&input);
id = john.id();
name = john.name();
email = john.email();使用生成的类解析持久化数据
// C++ code
Person john;
fstream input(argv[1],ios::in | ios::binary);
john.ParseFromIstream(&input);
id = john.id();
name = john.name();
email = john.email();3、protobuf-net
protobuf-net是用于.NET代码的基于契约的序列化程序，它以Google设计的“protocol buffers”序列化格式写入数据，适用于大多数编写标准类型并可以使用属性的.NET语言。
protobuf-net可通过NuGet安装程序包，也可直接访问github下载源码：https://github.com/protobuf-net/protobuf-net
https://github.com/protobuf-net/protobuf-net 下面的代码参考：C#中protobuf-net的编码结构及使用方法 - 二次元攻城狮 - 博客园
using System;
using System.IO;/// <summary>
/// ProtoBuf-Net扩展方法类
/// </summary>
public static class ProtoBufExtension
{/// <summary>/// 将对象实例序列化为字符串（Base64编码格式）——ProtoBuf/// </summary>/// <typeparam name="T">对象类型</typeparam>/// <param name="obj">对象实例</param>/// <returns>字符串（Base64编码格式）</returns>public static string SerializeToString_PB<T>(this T obj){using (MemoryStream ms = new MemoryStream()){ProtoBuf.Serializer.Serialize(ms, obj);return Convert.ToBase64String(ms.GetBuffer(), 0, (int)ms.Length);}}/// <summary>/// 将字符串（Base64编码格式）反序列化为对象实例——ProtoBuf/// </summary>/// <typeparam name="T">对象类型</typeparam>/// <param name="txt">字符串（Base64编码格式）</param>/// <returns>对象实例</returns>public static T DeserializeFromString_PB<T>(this string txt){byte[] arr = Convert.FromBase64String(txt);using (MemoryStream ms = new MemoryStream(arr))return ProtoBuf.Serializer.Deserialize<T>(ms);}/// <summary>/// 将对象实例序列化为字节数组——ProtoBuf/// </summary>/// <typeparam name="T">对象类型</typeparam>/// <param name="obj">对象实例</param>/// <returns>字节数组</returns>public static byte[] SerializeToByteAry_PB<T>(this T obj){using (MemoryStream ms = new MemoryStream()){ProtoBuf.Serializer.Serialize(ms, obj);return ms.ToArray();}}/// <summary>/// 将字节数组反序列化为对象实例——ProtoBuf/// </summary>/// <typeparam name="T">对象类型</typeparam>/// <param name="arr">字节数组</param>/// <returns></returns>public static T DeserializeFromByteAry_PB<T>(this byte[] arr){using (MemoryStream ms = new MemoryStream(arr))return ProtoBuf.Serializer.Deserialize<T>(ms);}/// <summary>/// 将对象实例序列化为二进制文件——ProtoBuf/// </summary>/// <typeparam name="T">对象类型</typeparam>/// <param name="obj">对象实例</param>/// <param name="path">文件路径（目录+文件名）</param>public static void SerializeToFile_PB<T>(this T obj, string path){using (var file = File.Create(path)){ProtoBuf.Serializer.Serialize(file, obj);}}/// <summary>/// 将二进制文件反序列化为对象实例——ProtoBuf/// </summary>/// <typeparam name="T"></typeparam>/// <param name="path"></param>/// <returns></returns>public static T DeserializeFromFile_PB<T>(this string path){using (var file = File.OpenRead(path)){return ProtoBuf.Serializer.Deserialize<T>(file);}}
}使用参考
static void Main(string[] args)
{var person = new Person{Id = 12345,Name = "Fred",Address = new Address{Line1 = "Flat 1",Line2 = "The Meadows"}};string str = person.SerializeToString_PB(); var strPerson = str.DeserializeFromString_PB<Person>();Console.WriteLine("序列化结果（字符串）：" + str);var arr = person.SerializeToByteAry_PB();var arrPerson = arr.DeserializeFromByteAry_PB<Person>();Console.WriteLine("序列化结果（字节数组）：" + BitConverter.ToString(arr));string path = "person.bin"; person.SerializeToFile_PB(path);var pathPerson = path.DeserializeFromFile_PB<Person>();Console.WriteLine("序列化结果（二进制文件）：" + BitConverter.ToString(File.ReadAllBytes(path)));Console.ReadLine();
}序列化结果
序列化结果（字符串）：CLlgEgRGcmVkGhUKBkZsYXQgMRILVGhlIE1lYWRvd3M=
序列化结果（字节数组）：08-B9-60-12-04-46-72-65-64-1A-15-0A-06-46-6C-61-74-20-31-12-0B-54-68-65-20-4D-65-61-64-6F-77-73
序列化结果（二进制文件）：08-B9-60-12-04-46-72-65-64-1A-15-0A-06-46-6C-61-74-20-31-12-0B-54-68-65-20-4D-65-61-64-6F-77-73相关文章：
Protocol Buffer
1、什么是 Protocol Buffers？ Protocol Buffers （protobuf） 是一种序列化结构化数据的方法，由 Google 开发。它们提供了一种与语言无关、与平台无关且可扩展的机制，用于高效序列化结构化数据。 Protocol Buffers 中的…...
高等数学学习笔记 ☞ 连续与间断
1. 连续 1. 点连续定义： 设函数在点的某邻域内有定义，取附近的点，对应的函数值分别和， 令，当时，若，则称函数在点处连续。 记作。 此式为增量形式。 又知，则可改写为：。 …...
【three.js】Shader着色器
原始着色器材质RawShaderMaterial 两种着色器材质的 RawShaderMaterial 和 ShaderMaterial 的区别和用法 区别： ShaderMaterial 会自动将一些初始化着色器的参数添加到代码中（内置 attributes 和 uniforms） RawShaderMaterial 则什么都不会添…...
在 macOS 中，设置自动将文件夹排在最前
文章目录 1、第一步访达设置2、第二步排序方式 需要两步设置 1、第一步访达设置 按名称排序的窗口中 2、第二步排序方式 选择名称...
创建并配置华为云虚拟私有云
目录 私有云 创建虚拟私有云 私有云 私有云是一种云计算模式，它将云服务部署在企业或组织内部的私有基础设施上，仅供该企业或组织内部使用，不对外提供服务.私有云的主要特点包括： 私密性：私有云的资源（如…...
Spark是什么？Flink和Spark区别
Spark是什么？Flink和Spark区别 一、Spark二、Spark和Flink区别三、总结 一、Spark Apache Spark 是一个开源的大数据处理框架，主要用于大规模数据处理和分析。它支持多种数据处理模式，包括批处理、流处理、SQL 查询、机器学习和图处理等。 核…...
代码随想录 day 25
第七章 回溯算法 part04 491.递增子序列 本题和大家刚做过的 90.子集II 非常像，但又很不一样，很容易掉坑里。 https://programmercarl.com/0491.%E9%80%92%E5%A2%9E%E5%AD%90%E5%BA%8F%E5%88%97.html 视频讲解：https://www.bilibili.com/…...
数据仓库中的指标体系模型介绍
数据仓库中的指标体系介绍 文章目录 数据仓库中的指标体系介绍前言什么是指标体系指标体系设计有哪些模型?1. 指标分层模型2. 维度模型3. 指标树模型4. KPI（关键绩效指标）模型5. 主题域模型6.平衡计分卡（BSC）模型7.数据指标框架模…...
xr-frame 通过shader去除视频背景色，加载透明视频
目录 前言 实现思路 获取 XR 框架系统： 注册自定义效果 创建效果对象 渲染通道配置 着色器代码 顶点着色器 片元着色器（颜色分量g达到条件的片元将被透透明） effect-removeBlack 完整代码 wxml中使用 前言 实现了一个用于注册自定…...
论文解读 | NeurIPS'24 IRCAN：通过识别和重新加权上下文感知神经元来减轻大语言模型生成中的知识冲突...
点击蓝字 关注我们 AI TIME欢迎每一位AI爱好者的加入！ 点击 阅读原文 观看作者讲解回放！ 作者简介 史丹，天津大学博士生 内容简介 大语言模型（LLM）经过海量数据训练后编码了丰富的世界知识。最近的研究表明，…...
Kraft模式安装Kafka（含常规、容器两种安装方式）
一、#创作灵感# 公司使用Kafka的软件项目较多，故写技术笔记巩固知识要点 二、软件环境 - Kafka 3.9.0 官方下载地址：Kafka 3.9.0 - Docker Desktop 4.37 容器图形化工具 官方下载地址：Docker Desktop 4.37 特别说明 - Docker Desktop…...
旷视科技C++面试题及参考答案
在 Linux 系统下常用的命令有哪些？ 在 Linux 系统中有许多常用命令。首先是文件和目录操作相关的命令。“ls” 命令用于列出目录的内容，它有很多选项，比如 “ls -l” 可以以长格式显示文件和目录的详细信息，包括文件权限、所有者、大小、修改时间等；“ls -a” 则会显示所有…...
)
IWOA-GRU和GRU时间序列预测(改进的鲸鱼算法优化门控循环单元)
时序预测 | MATLAB实现IWOA-GRU和GRU时间序列预测(改进的鲸鱼算法优化门控循环单元) 目录 时序预测 | MATLAB实现IWOA-GRU和GRU时间序列预测(改进的鲸鱼算法优化门控循环单元)预测效果基本介绍模型描述程序设计参考资料 预测效果 基本介绍 MATLAB实现IWOA-GRU和GRU时间序列预测…...
edeg插件/扩展推荐:助力生活工作
WeTab 此插件在我看来有2个作用 1.改变edeg的主页布局和样式,使其更加精简,无广告 2.提供付费webtab Ai(底层是chatGpt) 沉浸式翻译 此插件可翻译网页的内容 假设我们浏览github 翻译前 翻译后 Better Ruler 可以对网页的距离进行测量 适合写前端的小伙伴 用法示例:...
TPS和QPS的区别
TPS全称（Transactions Per Second）QPS全称（Queries Per Second）它们都是衡量系统性能的指标，都是表示单位时间内处理的事务或者查询的数量 TPS 定义：TPS指的是系统每秒可以处理的事务数量，一个…...
鸿蒙HarmonyOS开发：拨打电话、短信服务、网络搜索、蜂窝数据、SIM卡管理、observer订阅管理
文章目录 一、call模块（拨打电话）1、使用makeCall拨打电话2、获取当前通话状态3、判断是否存在通话4、检查当前设备是否具备语音通话能力 二、sms模块（短信服务）1、创建短信2、发送短信 三、radio模块（网络搜索&#x…...
如何处理 JavaScript 中的函数防抖问题？
在 JavaScript 中，函数防抖（Debouncing）是一种控制函数执行频率的技术，通常用于处理用户输入事件（例如键盘输入、滚动事件等）。防抖的核心思想是：在连续触发某个事件时，只有在事件停…...
sql server期末复习
表操作 创建create 删除drop 修改alter 数据操作 查询 select from <tableName> 插入 insert into <tableName> values 修改 update <tableName> set 删除 delete from <tableName> 授权与收回对数据的操作权限 授予 grant <权…...
初学STM32 --- 外部SRAM
目录 SRAM简介 SRAM特性: XM8A51216 功能框图 8080并口读时序编辑 8080并口写时序 SRAM 读写操作步骤 FSMC介绍 FSMC时序介绍 FSMC控制器对内核地址映射编辑 FSMC HAL库相关驱动 SRAM驱动步骤 SRAM简介 静态随机存取存储器（Static Random-Access Memory&am…...
XXX公司面试真题
一、一面问题 1.线程池的主要参数 核心线程数最大线程数空闲线程存活时间存活时间单位任务队列线程工厂拒绝策略允许核心线程超时 2. 线程的状态 新建状态就绪状态运行状态阻塞状态死亡状态 补充：线程阻塞的原因 线程调用sleep()方法进入睡眠状态 线程得到一个…...
MySQL 01 02 章——数据库概述与MySQL安装篇
一、数据库概述 （1）为什么要使用数据库 数据库可以实现持久化，什么是持久化：数据持久化意味着将内存中的数据保存到硬盘上加以“固化”持久化的主要作用是：将内存中的数据存储在关系型数据库中，当然也可以…...
[读书日志]8051软核处理器设计实战（基于FPGA）第四篇：verilog语法特性
第一篇https://blog.csdn.net/m0_74021449/article/details/144796689 第二篇https://blog.csdn.net/m0_74021449/article/details/144813103 第三篇https://blog.csdn.net/m0_74021449/article/details/144834117 4.verilog硬件描述语言基础 这部分主要讲述verilog基础语法…...
大模型高效推理综述
大模型高效推理综述 1 Introduction2 Preliminaries2.1 transformer架构的LLM2.2 大模型推理过程2.3 推理效率分析 3 TAXONOMY(分类)4.数据级别优化4.1输入压缩4.1.1 提示词裁剪（prompt pruning）4.1.2 提示词总结（prompt summary）…...
HTML5实现好看的博客网站、通用大作业网页模板源码
HTML5实现好看的博客网站、通用大作业网页模板源码 前言一、设计来源1.1 主界面1.2 列表界面1.3 文章界面 二、效果和源码2.1 动态效果2.2 源代码 源码下载结束语 HTML5实现好看的博客网站、通用大作业网页模板源码，博客网站源码，HTML模板源码࿰…...
在Microsoft Windows上安装MySQL
MySQL仅适用于Microsoft Windows 64位操作系统，在Microsoft Windows上安装MySQL有不同的方法：MSI、包含您解压缩的所有必要文件的标准二进制版本（打包为压缩文件）以及自己编译MySQL源文件。 注意：MySQL8.4服务器需要在…...
adaface人脸特征提取之ncnn推理
目录 1. 背景2. 准备工作2.1 ncnn库下载2.2 adaface模型下载2.3 模型转换 3. 代码实现4. 模型量化 1. 背景 最近项目要求Android端使用adaface做人脸特征提取，最终选择ncnn作为推理框架 2. 准备工作 2.1 ncnn库下载 https://github.com/Tencent/ncnn/tree/maste…...
iOS 逆向学习 - iOS Security Features：硬件与软件多重防护体系
iOS 逆向学习 - iOS Security Features：硬件与软件多重防护体系 iOS 安全特性全面解析：构筑多层次防御体系一、iOS 的硬件安全特性1. Secure Enclave（安全隔区）2. Hardware Root of Trust（硬件信任根）3. De…...
纯前端实现将pdf转为图片（插件pdfjs）
需求来源 预览简历功能在移动端，由于用了一层iframe把这个功能嵌套在了app端，再用一个iframe来预览，只有ios能看到，安卓就不支持，查了很多资料和插件，原理基本上都是用iframe实现的。最终转换思路…...
stm32HAL库使LED闪烁
PC13引脚为开漏接法 生成代码时设置为out put open drain gpio out put level 设置为high 1表示熄灭 我们将pa9引脚连接为推挽接法 生成代码时设置为 out put push pull Gpio out put level 设置为low 0 表示熄灭 代码使其亮起再延时0.5秒再熄灭再延时0.5秒...
《数据结构》期末考试测试题【中】
《数据结构》期末考试测试题【中】 21.循环队列队空的判断条件为？22. 单链表的存储密度比1？23.单链表的那些操作的效率受链表长度的影响？24.顺序表中某元素的地址为？25.m叉树第K层的结点数为？26. 在双向循环链表某节点…...
【Vue3项目实战系列一】—— 全局样式处理，导入view-ui-plus组件库，定制个性主题
😉 你好呀，我是爱编程的Sherry，很高兴在这里遇见你！我是一名拥有十多年开发经验的前端工程师。这一路走来，面对困难时也曾感到迷茫，凭借不懈的努力和坚持，重新找到了前进的方向。我的人生格言是…...
ChatGPT 主流模型GPT-4/GPT-4o mini的参数规模是多大？
微软论文又把 OpenAI 的机密泄露了？？在论文中明晃晃写着： o1-preview 约 300B；o1-mini 约 100BGPT-4o 约 200B；GPT-4o-mini 约 8BClaude 3.5 Sonnet 2024-10-22 版本约 175B微软自己的 Phi-3-7B，这个不用约…...
初学stm32 --- RTC实时时钟
目录 RTC简介 常用的RTC方案 STM32 F1 RTC框图介绍 后备寄存器和RTC寄存器特性（F1） F1 RTC相关寄存器介绍 RCC_APB1ENR寄存器编辑 PWR_CR寄存器 RCC_BDCR寄存器 RTC_CRL寄存器 RTC_CRH寄存器 RTC_PRLH寄存器 RTC_PRLL寄存器 RTC_CNTH寄存器 …...
Qt之屏幕录制设计（十六）
Qt开发 系列文章 - screencap（十六） 目录 前言 一、实现原理 二、实现方式 1.创建录屏窗口 2.录屏窗口类定义 3.自建容器对象定义 4.用户使用 5.效果演示 总结 前言 利用Qt实现屏幕录制设计，可以通过使用Qt自带的类QScreen、QPixma…...
25年1月更新。Windows 上搭建 Python 开发环境：Python + PyCharm 安装全攻略（文中有安装包不用官网下载）
引言 随着 Python 在数据科学、Web 开发、自动化脚本等多个领域的广泛应用，越来越多的开发者选择它作为首选编程语言。而 PyCharm 作为一个功能强大的集成开发环境（IDE），为 Python 开发者提供了极大的便利。本文将详细介绍如何在 …...
CTF杂项——[LitCTF 2024]涐贪恋和伱、甾―⑺dé毎兮毎秒
得到一张图片 有两种方式可以得到flag 第一种：LSB 第二种：zsteg...
从零开始手写缓存之如何实现固定缓存大小
cache 发展之路 1、HashMap或者ConcurrentHashMap public class CustomerService {private HashMap<String,String> hashMap new HashMap<>();private CustomerMapper customerMapper;public String getCustomer(String name){String customer hashMap.get(nam…...
Kubernetes——part4-1 Kubernetes集群 服务暴露 Nginx Ingress Controller
Kubernetes集群 服务暴露 Nginx Ingress Controller 一、ingress控制器 1.1 ingress控制器作用 （类似于slb，做代理服务） ingress controller可以为kubernetes 集群外用户访问Kubernetes集群内部pod提供代理服务。 提供全局访问代理访问流程…...
前端小案例——520表白信封
前言：我们在学习完了HTML和CSS之后，就会想着使用这两个东西去做一些小案例，不过又没有什么好的案例让我们去练手，本篇文章就提供里一个案例——520表白信封 ✨✨✨这里是秋刀鱼不做梦的BLOG ✨✨✨想要了解更多内容可以访问我的主…...
《机器学习》——线性回归模型
文章目录 线性回归模型简介一元线性回归模型多元线性回归模型误差项分析一元线性模型实例完整代码 多元线性模型实例完整代码 线性回归模型简介 线性回归是利用数理统计中回归分析，来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法。 相关关系&…...
测试用例颗粒度说明
当我们在编写测试用例时，总是会遇到一个问题：如何确定测试用例的颗粒度？测试用例过于粗糙，可能无法全面覆盖系统的细节；而颗粒度过细，又会导致测试重复、冗余。掌握合适的颗粒度，不仅可以提高测…...
Kali 离线安装 ipmitool 笔记
在Kali Linux上离线安装 ipmitool 的步骤如下： 一、获取 ipmitool 的安装包和依赖 由于是离线安装，您需要先在一台可以联网的机器上下载 ipmitool 及其所有依赖包。 方法一：使用 apt 下载包 在联网的机器上，运行以下命令以准备…...
基于word2vec的文本大数据分析
基于word2vec的文本大数据分析 效果： 一、简介 Word2Vec是一种词向量表示方法，是在自然语言处理领域（NLP）的神经网络模型，是一种无监督学习，包含两种模型架构：CBOW模型与Skip-Gram模型。 常用于：相似度计算、词类聚类、文本分类、句子和文档表示、搜索引擎优化、情…...
BGP基础配置实验
一、实验拓补 二、实验要求及分析 实验要求： 1，R1为AS 100区域；R2、R3、R4为AS 200区域且属于OSPF协议；R5为AS 300区域； 2，每个设备上都有环回，且通过环回可以使设备互通； 实验分…...
Maven核心与单元测试
目录 一. Maven概述二. IDEA集成Maven2.1 创建Maven项目2.2 Maven坐标2.3 导入Maven项目 三. 依赖管理四. Maven的生命周期五. 单元测试5.1 快速入门5.2 断言5.3 常见注解5.4 依赖范围 六. Maven常见问题 \quad 一. Maven概述 \quad \quad 二. IDEA集成Maven \quad 2.1 创建Mav…...
Go语言的 的继承（Inheritance）基础知识
Go语言的继承（Inheritance）基础知识 引言 在面向对象编程（OOP）中，继承是一个重要的概念，它允许一个类（子类）继承另一个类（父类）的属性和方法。这种机制在许…...
常见的框架漏洞复现
1.Thinkphp Thinkphp5x远程命令执行及getshell 搭建靶场 cd vulhub/thinkphp/5-rce docker-compose up -d 首页 漏洞根本源于 thinkphp/library/think/Request.php 中method方法可以进行变量覆盖，通过覆盖类的核心属性filter导致rce，其攻击点较为多&…...
SLA 简介
SLA 是 Service Level Agreement（服务级别协议） 的缩写，广泛应用于企业服务管理、IT服务、云计算等领域。以下是对 SLA 的详细解释： SLA 的定义 服务级别协议（SLA）是服务提供方（Service Provid…...
基于动力学的MPC控制器设计盲点解析
文章目录 Apollo MPC控制器的设计架构误差模型和离散化预测模型推导目标函数和约束设计优化求解优化OSQP求解器参考文献 Apollo MPC控制器的设计架构 误差模型和离散化 状态变量和控制变量 1、Apollo MPC控制器中状态变量主要有如下6个 matrix_state_ Matrix::Zero(basic_stat…...
leetcode 面试经典 150 题：轮转数组
链接轮转数组题序号189题型数组解法1. 额外数组法，2. 原数组翻转法（三次翻转法）难度中等熟练度✅✅✅✅ 题目 给定一个整数数组 nums，将数组中的元素向右轮转 k 个位置，其中 k 是非负数。 示例 1: 输入: nums [1,2,…...