当前位置：首页 > news >正文

虚拟机中的时统卡功能和性能调优

news 来源：原创 2025/7/13 5:03:31

【写在前面】飞腾开发者平台是基于飞腾自身强大的技术基础和开放能力，聚合行业内优秀资源而打造的。该平台覆盖了操作系统、算法、数据库、安全、平台工具、虚拟化、存储、网络、固件等多个前沿技术领域，包含了应用使能套件、软件仓库、软件支持、软件适配认证四大板块，旨在共享尖端技术，为开发者提供一个涵盖多领域的开发平台和工具套件。点击这里开始你的技术升级之旅吧

本文分享至飞腾开发者平台《虚拟机中的时统卡功能和性能调优》

1 介绍

时统卡作为时统终端之一，可以输出准确的 UTC(Coordinated Universal Time)时间，作为授时功能模块广泛应用于航天、航海等领域中。PCI-Express（PCI-E）由于其点对点的串行设计以及双通道高带宽的传输模式，具有较高数据的传输速率，因此时统卡一般使用 PCI-E 接口接入计算机，称之为 PCI-E 时统卡。而随着虚拟化技术和云计算的飞速发展，越来越多的应用运行于云计算的虚拟机中，目前对于虚拟机中授时一般采用宿主机(host)上插入 PCI-E 时统卡进行授时，再通过网络对虚拟机进行授时的方法，不能直接在多台虚拟机中获得时统卡中断脉冲信号进行精度校准，具有较大的延迟。
本文旨在提供一种优化方案，解决时统卡在虚拟机中进行精度校准带来的延迟。

2 测试环境

2.1 宿主机环境

机器类型：FT-2000+/64 服务器

操作系统：centos7.6

内核版本：4.19.105

时统卡：pcie 时统卡

2.2 虚拟机环境

操作系统：centos7.6

内核版本：4.19.105

2.3 适配要求

时统卡为非标设备，需要特殊配置才可以支持，因此需确保三个条件：

1、首先必须确保在 BIOS 中使能 smmu。

2、内核需打上飞腾补丁，即内核中使能 smmu。

3、设备树文件（uboot）或 acpi 描述文件（UEFI）支持。

这3步做完才能在虚拟机中识别时统卡。此外，中断捕获异常是因为，arm平台对于INTx类型的中断没有做虚拟化的硬件支持，所以在arm平台的虚拟机中只能使用msi类型的中断。

3 系统参数调优

3.1 宿主机参数

1）cpu隔离，isolated_cores表示需要隔离的cpu

isolcpus=${isolated_cores}rcu_nocbs=${isolated_cores}rcu_nocb_pollnohz=onnohz_full=${isolated_cores}nmi_watchdog=0quiet

2）禁止带宽限制

echo -1 > /proc/sys/kernel/sched_rt_runtime_usecho -1 > /proc/sys/kernel/sched_rt_period_us

3）关闭隔离cpu的中断均衡，isolated_cpumask位与isolated_cores相对应

vim /etc/sysconfig/irqbalanceIRQBALANCE_BANNED_CPUS=${isolated_cpumask}

3.2 虚拟机参数

1）虚拟机核绑定并设置调度类型和优先级，配置文件如下：

  <cputune><vcpupin vcpu='0' cpuset='0'/><vcpupin vcpu='1' cpuset='1'/><vcpupin vcpu='2' cpuset='2'/><vcpupin vcpu='3' cpuset='3'/><vcpupin vcpu='4' cpuset='4'/><vcpupin vcpu='5' cpuset='5'/><vcpupin vcpu='6' cpuset='6'/><vcpupin vcpu='7' cpuset='7'/><vcpusched vcpus=’0-7’ scheduler=’fifo’ priority=’99’/></cputune>

2）添加时统卡设备到虚拟机，address中bdf对应于pcie时统卡设备的总线号、设备号、功能号

  <hostdev mode='subsystem' type='pci' managed='yes'><source><address domain='0x0000' bus='0x09' slot='0x00' function='0x0'/></source></hostdev>

3）添加虚拟机内核启动参数，可在grub配置文件中添加以下参数：

 nohltquietnosoftlockupnmi_watchdog=0

4 时统卡驱动优化

4.1 驱动架构设计和修改

1）原驱动程序中断处理程序BUG：对全局共享变量_isr未加锁保护，属内核编程错误。

原来的程序：

2）原驱动程序中断处理采用常用的上、下半部机制，且下半部使用netlink接口递送时间事件，不适合高性能、低延时的特点，属于编程架构设计不合理。

修改后的驱动中断处理程序：去掉中断下半部；重写时间事件分发处理逻辑；使用eventfd通

知机制。

3）时统卡字符设备的功能接口实现：重新实现其他必要的功能接口。

原来的驱动程序：

修改后的驱动程序：

在ioctl接口中实现evenfd的功能代码。

4）pci驱动probe里使能msi中断。

原来的pci probe驱动程序使能intx中断

修改后的驱动程序使能msi中断：

5）重写字符设备驱动代码：字符设备只需在module_init注册，无需在pci驱动的probe里注册。
原来的驱动程序：

修改后的驱动程序：字符驱动和pci驱动分开注册，代码简洁且更符合工程要求。

6）映射时统卡的bar空间到用户空间，便于用户空间线程直接轮询中断，进一步优化时间延迟。

static int dti_mmap(struct file *file, struct vm_area_struct *vma){int ret;unsigned long addr;spin_lock(&(dti_p->lock_reg));addr = dti_p->pci_addr;if (addr & (PAGE_SIZE - 1))return -ENOSYS;vma->vm_page_prot = pgprot_noncached(vma->vm_page_prot);ret = vm_iomap_memory(vma, addr, PAGE_SIZE);spin_unlock(&(dti_p->lock_reg));return ret;}

7）实现时统卡设备其他的通用接口

static unsigned int dti_poll(struct file *file, poll_table *wait){int l;poll_wait(file, &dti_wait, wait);spin_lock_irq(&dti_lock);l = dti_has_irq;spin_unlock_irq(&dti_lock);if (l != 0)return POLLIN;return 0;}static ssize_t dti_read(struct file *file, char __user *buf, size_t
count, loff_t *ppos){DECLARE_WAITQUEUE(wait, current);unsigned long data;ssize_t retval;spin_lock_irq(&dti_lock);if (dti_has_irq == 0)return -EIO;spin_unlock_irq(&dti_lock);if (count != sizeof(unsigned int) && count != sizeof(unsigned long))return -EINVAL;add_wait_queue(&dti_wait, \&wait);do {__set_current_state(TASK_INTERRUPTIBLE);spin_lock_irq(&dti_lock);data = dti_has_irq;dti_has_irq = 0;spin_unlock_irq(&dti_lock);if (data != 0)9break;if (file->f_flags & O_NONBLOCK) {retval = -EAGAIN;goto out;}if (signal_pending(current)) {retval = -ERESTARTSYS;goto out;}schedule();} while (1);if (count == sizeof(unsigned int)) {retval = put_user(data, (unsigned int __user *)buf) ?: sizeof(int);} else {retval = put_user(data, (unsigned long __user *)buf) ?: sizeof(long);}if (!retval)retval = count;out:__set_current_state(TASK_RUNNING);remove_wait_queue(&dti_wait, &wait);return retval;}

5 时统卡应用程序优化

5.1 应用程序架构设计和修改

1）主线程(master)的处理逻辑

测试程序如果在物理机上运行，主线程通过eventfd/poll接口轮询内核中断事件，可以到达测试目标。

测试程序如果在虚拟机上运行，主线程则需要直接轮询设备的中断寄存器，才可以达到测试目标。

下面以虚拟机为例：

2）从线程(slave)的处理逻辑

6 测试结果

1）下图表示未进行任何优化的结果。

2）下图表示最后的优化结果，且运行时间超过48h。

3）下图表示不同阶段的优化结果趋势图，其中横坐标表示中断频率，纵坐标表示中断丢失lost数。

推荐阅读

飞腾平台Ne10安装使用指南
飞腾平台VSIPL-FT安装使用指南

欢迎广大开发者来飞腾开发者平台获取更多前沿技术文档及资料

如开发者在使用飞腾产品有任何问题可通过在线工单联系我们

版权所有。飞腾信息技术有限公司 2023。保留所有权利。

未经本公司同意，任何单位、公司或个人不得擅自复制，翻译，摘抄本文档内容的部分或全部，不得以任何方式或途径进行传播和宣传。

商标声明

Phytium和其他飞腾商标均为飞腾信息技术有限公司的商标。

本文档提及的其他所有商标或注册商标，由各自的所有人拥有。

注意

本文档的内容视为飞腾的保密信息，您应当严格遵守保密任务；未经飞腾事先书面同意，您不得向任何第三方披露本文档内容或提供给任何第三方使用。

由于产品版本升级或其他原因，本文档内容会不定期进行更新。除非另有约定，本文档仅作为使用指导，飞腾在现有技术的基础上尽最大努力提供相应的介绍及操作指引，但飞腾在此明确声明对本文档内容的准确性、完整性、适用性、可靠性的等不作任何明示或暗示的保证。

本文档中所有内容，包括但不限于图片、架构设计、页面布局、文字描述，均由飞腾和/或其关联公司依法拥有其知识产权，包括但不限于商标权、专利权、著作权等。非经飞腾和/或其关联公司书面同意，任何人不得擅自使用、修改，复制上述内容。

虚拟机中的时统卡功能和性能调优

【写在前面】飞腾开发者平台是基于飞腾自身强大的技术基础和开放能力，聚合行业内优秀资源而打造的。该平台覆盖了操作系统、算法、数据库、安全、平台工具、虚拟化、存储、网络、固件等多个前沿技术领域，包含了应用使能套件、软件仓库、软件支持、软件适…...

编程日记 2025/7/13 5:03:31

[算法] [leetcode-20] 有效的括号

20 有效的括号给定一个只包括 ‘(’，‘)’，‘{’，‘}’，‘[’，‘]’ 的字符串 s ，判断字符串是否有效。有效字符串需满足： 左括号必须用相同类型的右括号闭合。左括号必须以正确的顺序闭合…...

编程日记 2025/7/10 16:21:26

TDengine 如何进行高效数据建模

1.背景数据建模对于数据库建立后整体高效运行非常关键，不同建模方式，可能会产生相差几倍的性能差别 2. 建库建模在建库阶段应考虑几下几点： 建多少库根据业务情况确定建库个数，TDengine 不支持跨库查询，如果业…...

编程日记 2025/7/12 10:08:42

2024.12.30（多点通信）

作业： 1、将广播发送和接收端实现一遍，完成一个发送端发送信息，对应多个接收端接收信息实验。发送端 #include <myhead.h>#define PORT 8888 #define IP "192.168.124.255"int main(int argc, const char *argv[]) {//1、…...

编程日记 2025/7/12 18:18:05

前端路由layout布局处理以及菜单交互(三)

上篇介绍了前端项目部署以及基本依赖的应用，这次主要对于路由以及布局进行模块化处理一、创建layout模块 1、新建src/layout/index.vue <template><el-container class"common-layout"><!-- <el-aside class"aside">&l…...

编程日记 2025/7/12 20:41:35

Zynq PS端外设之GPIO

1. GPIO（通用输入/输出） GPIO外设有4个Bank，Bank0/1通过MIO连接到PS的引脚上；Bank2/3通过EMIO连接到PL的引脚上。注意：Bank1的电平要改成LVCOMS 1.8 GPIO寄存器寄存器： DATA_RO： 读取GPIO的输…...

编程日记 2025/7/8 10:25:22

Java 操作 PDF：从零开始创建功能丰富的PDF文档

Java 操作 PDF：从零开始创建功能丰富的PDF文档引言环境准备依赖引入创建PDF文档一键生成空白PDF添加表单字段（选项）添加电子签名添加公章图像结论引言随着数字化办公的普及，PDF格式因其跨平台兼容性和安全性而被广泛应用于各…...

编程日记 2025/7/8 21:44:13

12.30-1-5学习周报

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录文章链接摘要Abstract一、方法介绍1.HAT-CIR2.Horde3.DWGRNet 二、实验总结文章链接 https://arxiv.org/pdf/2405.04101 摘要本博客介绍了论文《Continual lea…...

编程日记 2025/7/12 21:58:43

H3C Tftp 备份与恢复配置文件

pc 运行 tftp 软件与路由器相连。打开 tftp。在交换机用户试图下，dir /all 命令查看设备的配置文件。备份命令：将配置文件备份到地址为 10.10.10.2 的 tftp 服务器 <H3C>backup startup-configuration to 10.10.10.2 恢复命令：恢复配…...

编程日记 2025/7/7 19:30:07

【Matlab算法】基于改进人工势场法的移动机器人路径规划研究（附MATLAB完整代码）

基于改进人工势场法的移动机器人路径规划研究结果图摘要1. 引言2. 方法说明2.1 基本原理2.2 改进策略3. 核心函数解释3.1 改进的斥力计算函数3.2 路径规划主函数4. 实验设计4.1 实验环境设置4.2 关键参数选择5. 结果分析5.1 实验结果5.2 性能分析附录：完整代码参考文献结果图…...

编程日记 2025/7/13 4:53:34

基于Springboot校园失物招领系统【附源码】

基于Springboot校园失物招领系统效果如下： 系统登陆页面物品页面系统首页面失物招领管理页面失物认领页面宣传视频页面物品挂失留言管理页面宣传视频类型管理页面研究背景在校园环境中，失物招领是一个常见的问题。传统的失物招领方式主要依…...

编程日记 2025/7/12 1:54:22

Vue 自定义指令

首先，我们知道vue中有很多自带指令，v-bind、v-on、v-model等。但在业务开发中，我们常见一些自定义指令如：v-copy、v-longpress等。那么如何定义自己所需的指令呢？ 接下来我们分别从指令注册、指令的钩子函数、指令的参…...

编程日记 2025/7/10 17:16:44

JAVA-制作小游戏期末实训

源码 import game.frame.Frame;public class App {public static void main(String[] args) {System.out.println("starting......");new Frame();} } package game.controller;import game.model.Enemy;public class EnemyController implements Runnable{private…...

编程日记 2025/7/13 4:16:24

【Vue教程】使用Vite快速搭建前端工程化项目 | Vue3 | Vite | Node.js

🙋大家好！我是毛毛张! 🌈个人首页： 神马都会亿点点的毛毛张 🚩今天毛毛张分享的是关于如何快速🏃‍♂️搭建一个前端工程化的项目的环境搭建以及流程🌠 文章目录 1.前端工程化环境搭建&#…...

编程日记 2025/7/12 16:00:21

4.CSS文本属性

4.1文本颜色 div { color:red; } 属性值预定义的颜色值red、green、blue、pink十六进制#FF0000,#FF6600,#29D794RGB代码rgb(255,0,0)或rgb(100%,0%,0%) 4.2对齐文本 text-align 属性用于设置元素内文本内容的水平对齐方式。 div{ text-align:center; } 属性值解释left左对齐ri…...

编程日记 2025/7/13 4:54:24

【工具整理】WIN换MAC机器使用工具整理

最近公司电脑升级，研发同学统一更换了 Mac Book Pro 笔记版电脑，整理一下安装了那些软件以及出处，分享记录下～ 知识库工具 1、语雀网址：语雀，为每一个人提供优秀的文档和知识库工具语雀个人花园&…...

编程日记 2025/7/13 4:45:08

Elasticsearch向量检索需要的数据集以及768维向量生成

Elasticsearch8.17.0在mac上的安装 Kibana8.17.0在mac上的安装 Elasticsearch检索方案之一：使用fromsize实现分页快速掌握Elasticsearch检索之二：滚动查询(scrool)获取全量数据(golang) Elasticsearch检索之三：官方推荐方案search_after…...

编程日记 2025/7/10 15:16:47

《小型支付商城系统》项目（一）DDD架构入门

目录 1.DDD架构 1.1充血模型 1.2领域模型 1.2.1实体 1.2.2值对象 1.2.3聚合 1.2.4领域服务 1.2.5工厂 1.2.6仓储（Repository） 2.DDD建模 3.DDD工程模型项目介绍：知识星球 | 深度连接铁杆粉丝，运营高品质社群&#xff…...

编程日记 2025/7/8 5:53:48

web课程设计--酷鲨商城-springboot和vue

文章目录页面截图技术分析数据库代码地址页面截图登陆页面: 分类列表添加分类轮播图列表添加轮播图商品列表添加商品信息技术分析前端使用 html页面的 vue.js（vue2）和element-ui绘制前端界面后台使用Springbootmybatis来实现crud。还有一…...

编程日记 2025/7/13 4:38:44

解决virtualbox克隆ubuntu虚拟机之后IP重复的问题

找遍了国内论坛，没一个能解决该问题的，所以我自己写个文章吧，真讨厌那些只会搬运的，污染国内论坛环境，搜一个问题，千篇一律。问题操作系统版本为"Ubuntu 24.04 LTS" lennytest1:~$ cat /etc…...

编程日记 2025/7/9 1:25:26

活动预告 |【Part1】Microsoft Azure 在线技术公开课：使用 Azure DevOps 和 GitHub 加速开发

课程介绍通过 Microsoft Learn 免费参加 Microsoft Azure 在线技术公开课，掌握创造新机遇所需的技能，加快对 Microsoft Cloud 技术的了解。参加我们举办的“使用 Azure DevOps 和 GitHub 加速开发”活动，了解迁移到 DevOps 所需的合适工具和…...

编程日记 2025/7/13 4:42:18

SpiderFlow平台v0.5.0之数据库连接

一、寻找lib目录安装方式在 SpiderFlow 平台中，连接数据库时需要指定数据库的 DriverClassName，并确保正确配置数据库驱动。通常，驱动文件（JAR 文件）需要放置在指定的文件夹中，以便 SpiderFlow 可以找到并…...

编程日记 2025/7/13 4:07:47

springboot集成阿里云短信服务

springboot集成阿里云短信服务一.阿里云账号准备流程:注册阿里云账号>短信服务>新增资质>新建签名>新建模版>申请秘钥>用代码测试 1.注册阿里云账号 2、登录成功后， ① 在首页搜索短信服务 ② 打开第一个搜索结果 ③ 免费开通 ④ 可以根据…...

编程日记 2025/7/13 4:08:41

Redis 实战篇 ——《黑马点评》（上）

《引言》在进行了前面关于 Redis 基础篇及其客户端的学习之后，开始着手进行实战篇的学习。因内容很多，所以将会分为【上中下】三篇记录学习的内容与在学习的过程中解决问题的方法。Redis 实战篇的内容我写的很详细，为了能写的更好也付出…...

编程日记 2025/7/11 7:06:43

Redis的生态系统和社区支持

Redis的生态系统和社区支持 1. Redis 生态系统 1.1 Redis核心 Redis 是一个高性能的内存存储系统，支持丰富的数据结构（如字符串、列表、集合、哈希和有序集合）。它的核心提供了：高性能数据存储：单线程模型支持每秒数百万级别的操作。多种数据结构：适用于多样化场景，如…...

编程日记 2025/7/12 8:11:57

基于C语言从0开始手撸MQTT协议代码连接标准的MQTT服务器，完成数据上传和命令下发响应(华为云IOT服务器)

文章目录一、前言二、搭建开发环境三、网络编程基础概念科普3.1 什么是网络编程3.2 TCP 和 UDP协议介绍3.3 TCP通信的实现过程四、Windows下的网络编程相关API介绍4.1 常用的函数介绍4.2 函数参数介绍4.3 编写代码体验网络编程五、访问华为云IOT服务器创建一个产品和设备5.2…...

编程日记 2025/7/13 4:50:45

什么是 GPT？Transformer 工作原理的动画展示

大家读完觉得有意义记得关注和点赞！！！ 目录 1 图解 “Generative Pre-trained Transformer”（GPT） 1.1 Generative：生成式 1.1.1 可视化 1.1.2 生成式 vs. 判别式（译注） 1.2 Pr…...

编程日记 2025/7/13 4:52:49

IDEA 编辑器自动识别 Dockerfile 类型高亮和语法提示

在 IDEA 中，如果项目里面的只有一个 Dockerfile文件时，那么此时使用打开这个文件都是 ok 的，支持语法高亮和关键词提示。如果我们有多个 Dockerfile 时， 比如 A_Dockerfile , B_Dockerfile , C_Dockerfile, 这个时候你会发现 IDE…...

编程日记 2025/7/8 19:26:47

AI知识库与用户行为分析：优化用户体验的深度洞察

在当今数字化时代，用户体验（UX）已成为衡量产品成功与否的关键指标之一。AI知识库作为智能客服系统的重要组成部分，不仅为用户提供快速、准确的信息检索服务，还通过用户行为分析，为产品优化提供了深度洞察。…...

编程日记 2025/7/13 4:02:54

什么是Redis哨兵机制？

大家好，我是锋哥。今天分享关于【什么是Redis哨兵机制？】面试题。希望对大家有帮助； 什么是Redis哨兵机制？ 1000道互联网大厂Java工程师精选面试题-Java资源分享网 Redis 哨兵（Sentinel）机制是 Redis 提…...

编程日记 2025/7/9 20:17:57

JavaScript中如何创建对象

在JavaScript中，创建对象有多种方法。以下是几种常见的方式： 1. 对象字面量这是最直接和常用的创建对象的方法。使用花括号 {} 包围一组键值对来定义一个对象。 let person {name: "John",age: 30,greet: function() {console.log("…...

编程日记 2025/7/13 1:23:13

2025：OpenAI的“七十二变”？

朋友们，准备好迎接AI的狂欢了吗？🚀 是不是跟我一样，每天醒来的第一件事就是看看AI领域又有什么新动向？ 尤其是那个名字如雷贯耳的 OpenAI，简直就是AI界的弄潮儿，一举一动都牵动着我们这些“AI发…...

编程日记 2025/7/13 4:58:54

Mysql(MGR)和ProxySQL搭建部署-Kubernetes版本

一、Mysql(MGR) 1.1 statefulSet.yaml apiVersion: apps/v1 kind: StatefulSet metadata:labels:app: mysqlname: mysqlnamespace: yihuazt spec:replicas: 3serviceName: mysql-headlessselector:matchLabels:app: mysqltemplate:metadata:labels:app: mysqlspec:affinity:p…...

编程日记 2025/7/13 4:55:57