当前位置：首页 > news >正文

康谋方案 | BEV感知技术：多相机数据采集与高精度时间同步方案

news 来源：原创 2025/5/19 13:11:23

随着自动驾驶技术的快速发展，车辆准确感知周围环境的能力变得至关重要。BEV（Bird's-Eye-View，鸟瞰图）感知技术，以其独特的视角和强大的数据处理能力，正成为自动驾驶领域的一大研究热点。

一、BEV感知技术概述

BEV感知技术，是一种从鸟瞰图视角（俯视图）出发的环境感知方法。与传统的正视图相比，BEV视角具有尺度变化小、视角遮挡少的显著优势，有助于网络对目标特征的一致性表达。基于这样的优势，可以更有效的对车辆周围环境进行感知。

图1：BEV 感知图

因此，在自动驾驶感知任务中，BEV感知算法通常包括分类、检测、分割、跟踪、预测、计划和控制等多个子任务，共同构建起一个完整的感知框架。

BEV感知算法的数据输入主要有图像和点云两种形式。根据数据源不同，BEV算法主要分为BEV Camera（纯视觉）、BEV LiDAR（基于激光雷达）和BEV Fusion（多模态融合）三类。其中，图像数据具有纹理丰富、成本低的优势，此外，基于图像的任务、基础模型相对成熟和完善，比较容易扩展到 BEV 感知算法中。

为了更好的训练BEV Camera感知算法，往往需要先搭建一个高质量的数据集。而搭建一套BEV感知数据采集系统，通常包括以下几个关键环节：

1. 硬件选型与集成：选合适的摄像头和计算采集平台，集成稳定系统。

2. 数据采集：在实际环境中采集图像数据，覆盖不同场景、光照和天气。

3. 时间同步：确保不同传感器数据时间精确同步，是后续算法训练的必要前提。

4. 系统调试和部署：调试系统确保组件协同工作，部署到实际应用环境。

因此，在实际搭建过程中，常会遇到技术复杂性高、成本投入大、数据质量与时间同步实现难、系统稳定性与可靠性要求高等挑战。针对这些问题，康谋推出一套BEV Camera数据采集方案，能高效搭建高质量的BEV感知数据集，加速算法研发和训练。

二、BEV Camera数据采集系统方案

BEV Camera数据系统采集方案以BRICKplus为核心系统平台，通过扩展PCIe Slot ETH6000模块连接6个iDS相机，利用GPS接收模块获取卫星时钟信号，提供XTSS时间同步服务，并支持13路（g）PTP以太网接口，确保高精度时间同步。

BRICKplus搭载BRICK STORAGEplus硬盘，提供大容量高速存储，满足高带宽数据采集需求，确保数据的完整性和可靠性。

图2：系统集成

三、数据采集

在BEV Camera数据采集方案中，难点在于如何同步多相机的采集动作、确保数据的高精度时间同步以及高效传输。因此，在整个软件方面，我们采用ROS+PEAK SDK方案进行深度集成，实现了多相机的参数配置、数据采集与传输。

为了更灵活应对实际采集环境需求，对相机（如曝光时间、帧率和分辨率等）参数进行了统一管理和存储，这些参数可在节点启动时通过配置文件动态加载，为相机的初始化提供了灵活性。

图3：相机参数配置

为实现多相机的同步采集和高效传输，我们利用了ROS的多线程和节点管理功能。通过为每个相机创建独立的采集线程，并启动采集循环，确保了每个相机的采集过程独立且高效。引入全局控制信号与信号处理机制，确保了统一管理所有相机的采集和同步结束状态。

图4：相机实时可视化

四、时间同步

为了实现多相机的时间同步，一般有两种方式：软时间同步和硬件时间同步。软时间同步主要依赖于软件层面的算法和协议来实现时间同步。其精度通常在微秒级别，适用于对时间同步精度要求不是较高的场景。

图5：多相机软件时间同步

为了应对时间同步精度要求较高的采集场景，如自动驾驶和高精度测量等。在BEV Camera数据采集方案中，进一步支持相机进行硬件时间同步。通过XTSS软件可以有效管理数采平台的时间同步功能，能够快速轻便配备各个传感器的时间同步配置。

图6：XTSS 时间同步管理

通过GPS模块提供高精度的时间基准，并利用支持硬件时间戳的以太网接口直接捕获数据包的时间戳。其时间同步精度可以达到纳秒级别，具备高稳定性，不受软件和网络延迟影响。

图7：多相机硬件时间同步

五、总结

在自动驾驶技术的快速发展中，BEV Camera数据采集系统的构建至关重要。通过采用BRICKplus平台，结合PCIe Slot ETH6000模块和iDS相机，我们实现了多相机的高效数据采集和存储。通过ROS+PEAK SDK的深度集成，实现了多相机的参数配置、数据采集与传输。利用GPS接收模块和XTSS时间同步服务，确保了多相机的高精度时间同步。

康谋的BEV Camera数据采集方案有效解决了多相机同步采集和高精度时间同步的难题，还提供了灵活的相机参数配置和高效的数据传输，能够满足自动驾驶和高精度测量等场景的需求。

我是分析自动驾驶技术的康谋

期待与您的进一步交流。

时间同步方案 - 高精度时间同步方案 | (g)PTP以太网时间同步方案 | 高精度硬件晶振时间同步 | 康谋科技https://keymotek.com/solution_time-synchronization/

康谋方案 | BEV感知技术：多相机数据采集与高精度时间同步方案

随着自动驾驶技术的快速发展，车辆准确感知周围环境的能力变得至关重要。BEV（Birds-Eye-View，鸟瞰图）感知技术，以其独特的视角和强大的数据处理能力，正成为自动驾驶领域的一大研究热点。一、BEV感知技术概…...

编程日记 2025/5/19 13:11:23

堆详解及C语言实现

堆结构与最大堆详解：从原理到C语言实现 1. 堆结构概述 1.1 定义与性质堆（Heap）是一种特殊的完全二叉树数据结构，满足以下性质： 结构性：完全二叉树结构有序性：每个结点的值都≥（…...

编程日记 2025/5/18 0:15:12

基于STM32的智能鱼缸水质净化系统设计

🤞🤞大家好，这里是5132单片机毕设设计项目分享，今天给大家分享的是智能鱼缸水质净化系统。目录 1、设计要求 2、系统功能 3、演示视频和实物 4、系统设计框图 5、软件设计流程图 6、原理图 7、主程序 8、总结 1、设计要求…...

编程日记 2025/5/19 14:55:44

python：csv文件批量导入mysql

1.导入sql文件到数据库中 mysql -u username -p要先创建一个空的数据库 CREATE DATABASE your_database_name;USE your_database_name;导入sql文件 source /path/to/your/file.sql;查看某个表格的结构，为后续数据插入做准备 DESCRIBE table_name;2.插入假数据到对应…...

编程日记 2025/5/18 6:55:48

第三十二周：Informer学习笔记

目录摘要Abstract1 Informer1.1 预备知识1.2 模型框架1.3 实验分析总结摘要本周学习的主要内容是Informer模型，Informer是一种专为长序列时间序列预测（LSTF） 设计的Transformer模型。相较于传统的Transformer，Informer采用Pr…...

编程日记 2025/5/19 10:49:59

计算机视觉核心任务

1. 计算机视频重要分类计算机视觉的重要任务可以大致分为以下几类： 1. 图像分类（Image Classification） 识别图像属于哪个类别，例如猫、狗、汽车等。应用场景：物品识别、人脸识别、医疗影像分类。代表模型&#…...

编程日记 2025/5/15 11:29:34

文章目录 1、matplotlib.animation1.1、FuncAnimation1.2、修改 matplotlib 背景 2、matplotlib imageio2.1、折线图2.2、条形图2.3、散点图 3、参考 1、matplotlib.animation 1.1、FuncAnimation matplotlib.animation.FuncAnimation 是 Matplotlib 库中用于创建动画的一个…...

编程日记 2025/5/16 20:01:42

【Linux网络编程】之守护进程

【Linux网络编程】之守护进程进程组进程组的概念组长进程会话会话的概念会话ID 控制终端控制终端的概念控制终端的作用会话、终端、bash三者的关系前台进程与后台进程概念特点查看当前终端的后台进程前台进程与后台进程的切换作业控制相关概念作业状态（一般指后…...

编程日记 2025/5/17 8:44:49

Vue.js如何根据访问路径切换页面

Vue Router 在前端工程中，路由指的是，根据不同的访问路径，展示不同组件的内容。 Vue Router是Vue.js的官方路由。 Vue Router介绍。要使用vue Router，得先安装 npm install vue-router4这里的4，指的是第4个版本在s…...

编程日记 2025/5/16 7:16:36

Vue与Konva：解锁Canvas绘图的无限可能

前言在现代Web开发中，动态、交互式的图形界面已成为提升用户体验的关键要素。Vue.js，作为一款轻量级且高效的前端框架，凭借其响应式数据绑定和组件化开发模式，赢得了众多开发者的青睐。而当Vue.js邂逅Konva.js，两者结…...

编程日记 2025/5/12 10:24:45

collabora online+nextcloud+mariadb在线文档协助

1、环境龙蜥os 8.9 docker 2、安装docker dnf -y install dnf-plugins-core dnf config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo sed -i shttps://download.docker.comhttps://mirrors.tuna.tsinghua.edu.cn/docker-ce /etc/yum.repos.…...

编程日记 2025/5/18 11:09:45

linux基础命令1

1、linux目录结构——树型结构根目录：/ 用户主目录(家目录)：~或者 /home/edu 根目录下常见的文件夹: 2、常见的命令 1、pwd 查看当前目录 cd 切换目录 cd ~ 切换到家目录 2、ls 查看当前目录的文件信息语法:ls [选项] [参…...

编程日记 2025/5/18 7:36:49

[LVGL] 在VC_MFC中移植LVGL

前言： 0. 在MFC中开发LVGL的优点是可以用多个Window界面做辅助扩展【类似GUIguider】 1.本文基于VC2022-MFC单文档框架移植lvgl8 2. gitee上下载lvgl8.3 源码，并将其文件夹改名为lvgl lvgl: LVGL 是一个开源图形库，提供您创建具有易于使用…...

编程日记 2025/5/20 3:45:12

Spring Boot整合MQTT

MQTT是基于代理的轻量级的消息发布订阅传输协议。 1、下载安装代理进入mosquitto下载地址：Download | Eclipse Mosquitto，进行下载，以win版本为例下载完成后，在本地文件夹找到下载的代理安装文件使用管理员身份打开安装安装…...

编程日记 2025/5/18 1:13:14

elasticsearch实战三 elasticsearch与mysql数据实时同步

一介绍 elasticsearch数据不是一直不变的，需要与mysql、oracle等数据库的数据做同步。本博客里涉及到的项目地址：https://www.aliyundrive.com/s/7bRWpTYsxWV 方案一： 同步调用，即操作mysql数据后，接着操作elastic…...

编程日记 2025/5/18 9:38:36

netcore openTelemetry+prometheus+grafana

一、netcore项目二、openTelemetry 三、prometheus 四、grafana添加Dashborad aspire/src/Grafana/dashboards at main dotnet/aspire GitHub 导入：aspnetcore.json和aspnetcore-endpoint.json 效果：...

编程日记 2025/5/14 18:40:52

StochSync：可在任意空间中生成360°全景图和3D网格纹理

StochSync方法可以用于在任意空间中生成图像，尤其是360全景图和3D网格纹理。该方法利用了预训练的图像扩散模型，以实现零-shot生成，消除了对新数据收集和单独训练生成模型的需求。StochSync 结合了 Diffusion Synchronization（DS&…...

编程日记 2025/5/5 17:43:03

MybatisPlus较全常用复杂查询引例（limit、orderby、groupby、having、like...）

MyBatis-Plus 是一个 MyBatis 的增强工具，在 MyBatis 的基础上只做增强不做改变，为简化开发、提高效率而生。以下是 MyBatis-Plus 中常用复杂查询（如 LIMIT、ORDER BY、GROUP BY、HAVING、LIKE 等）的引例： 1. 环境准备…...

编程日记 2025/5/19 13:12:02

大数据项目2：基于hadoop的电影推荐和分析系统设计和实现

前言大数据项目源码资料说明： 大数据项目资料来自我多年工作中的开发积累与沉淀。我分享的每个项目都有完整代码、数据、文档、效果图、部署文档及讲解视频。可用于毕设、课设、学习、工作或者二次开发等，极大提升效率！ 1、项目目标本…...

编程日记 2025/5/19 20:10:33

win10的Unet项目导入阿里云训练

win10配置文件 annotated-types0.7.0 certifi2024.12.14 charset-normalizer3.4.1 click8.1.8 colorama0.4.6 contourpy1.1.1 cycler0.12.1 docker-pycreds0.4.0 eval_type_backport0.2.2 filelock3.16.1 fonttools4.55.3 fsspec2024.12.0 gitdb4.0.12 GitPython3.1.44 idna3.…...

编程日记 2025/5/19 2:55:42

Linux（20）——调度作业

目录一、调度延迟的用户作业： 1、延迟的用户作业： 2、查看延迟的用户作业： 3、从计划中删除作业： 二、调度周期性用户作业： 1、周期性用户作业： 2、调度周期性用户作业： 3、用户作业格…...

编程日记 2025/5/18 9:37:19

DeepSeek赋能Vue：打造超丝滑进度条开发指南

前言：哈喽，大家好，今天给大家分享一篇文章！并提供具体代码帮助大家深入理解，彻底掌握！创作不易，如果能帮助到大家或者给大家一些灵感和启发，欢迎收藏关注哦 💕 目录 Deep…...

编程日记 2025/5/18 10:20:19

在CT107D单片机综合训练平台上，8个数码管分别单独依次显示0~9的值，然后所有数码管一起同时显示0~F的值，如此往复。

题目：在CT107D单片机综合训练平台上，8个数码管分别单独依次显示0~9的值，然后所有数码管一起同时显示0~F的值，如此往复。延时函数分析LED首先实现8个数码管单独依次显示0~9的数字所有数码管一起同时显示0~F的值，如此往…...

编程日记 2025/5/19 6:39:07

清除el-table选中状态 clearSelection

如何在Vue应用中使用Element UI的el-table组件，通过this.$refs.multipleTable.clearSelection()方法来清除所有选中行的状态。适合前端开发者了解表格组件的交互操作。 // el-table绑定ref<el-table selection-change"selsChange" ref"multipl…...

编程日记 2025/5/15 8:20:57

【算法】动态规划专题⑥ —— 完全背包问题 python

目录前置知识进入正题模板前置知识【算法】动态规划专题⑤ —— 0-1背包问题滚动数组优化完全背包问题是动态规划中的一种经典问题，它与0-1背包问题相似，但有一个关键的区别：在完全背包问题中，每种物品都有无限的数量可用。…...

编程日记 2025/5/19 15:29:16

论文笔记-COLING2025-LLMTreeRec

论文笔记-COLING2025-LLMTreeRec: Unleashing the Power of Large Language Models for Cold-Start Recommendations LLMTreeRec: 释放大语言模型在冷启动推荐中的力量摘要1.引言2.框架2.1项目树构建2.2以LLM为中心的基于树的推荐2.2.1推荐链策略2.2.2检索策略 3.实验3.1实验设…...

编程日记 2025/5/10 21:27:26

c++ haru生成pdf输出饼图

#define PI 3.14159265358979323846 // 绘制饼图的函数 void draw_pie_chart(HPDF_Doc pdf, HPDF_Page page, float *data, int data_count, float x, float y, float radius) { float total 0; int i; // 计算数据总和 for (i 0; i < data_count; i) { tot…...

编程日记 2025/5/17 8:02:42

【‌Unity】Unity中物体的static属性作用

‌Unity中物体的static属性主要用于优化游戏性能和简化渲染过程。‌ Unity中物体的static属性的作用优化渲染性能‌：当物体被标记为static时，Unity会在游戏运行时将其视为静止的物体，这意味着这些物体的渲染信息不会随着每一帧的更新而变化…...

编程日记 2025/5/13 20:42:52

Rust 测试指南：从入门到进阶

1. 测试基础：#[test] 属性 Rust 测试的基本单位是函数。只要在一个函数前面标注 #[test] 属性，那么在运行 cargo test 时，Rust 会自动识别并执行它。例如，新建一个库工程 adder，cargo new adder --lib，在 …...

编程日记 2025/5/16 17:29:10

Elasticsearch 生产集群部署终极方案

Elasticsearch 集群部署 1.集群部署1.1 新增用户1.2 优化操作系统1.3 JDK1.4 elasticsearch1.5 开机自启动 2.安全认证功能2.1 生成CA证书2.2 生成密钥2.3 上传至其他节点2.4 修改属主、属组2.5 配置文件添加参数2.6 各节点添加密钥库密码2.7 设置用户密码 1.集群部署 1.1 新增…...

编程日记 2025/5/10 7:42:57

电路笔记(元器件)：AD 5263数字电位计(暂记)

AD5263 是四通道、15 V、256位数字电位计，可通过SPI/I2C配置具体电平值。配置模式： W引脚作为电位器的抽头，可在A-B之间调整任意位置的电阻值。也可将W与A(或B)引脚短接，A-W间的电阻总是0欧姆，通过数字接口调整电位器…...

编程日记 2025/5/11 20:56:19

如何在电脑后台定时进行自动截图？自动截图后如何快捷保存？如何远程查看？

7-2 有时候需要对电脑的屏幕进行在后台连续性的截图保存，并且要可以远程查看，无界面，以达到对电脑的使用过程进行完全了解的目的，一般用于对小孩使用电脑的掌握，如果父母在外地，不方便就近管理&#xff0c…...

编程日记 2025/5/19 1:19:32

解决react中函数式组件usestate异步更新

问题：在点击modal组件确认后调用后端接口，使用setstateone（false）使modal组件关闭，但是设置后关闭不了，在设置setstateone（false）前后打印出了对应的stateone都为true，但…...

编程日记 2025/5/20 3:43:00

skia-macos源码编译

1、下载git-hub 源码 2、下载依赖库 3、编译，注意选项 bin/gn gen out/release --args"is_official_buildfalse skia_use_system_expatfalse skia_use_system_icufalse skia_use_libjpeg_turbofalse skia_use_system_libpngfalse skia_use_system_libwebpfal…...

编程日记 2025/5/15 9:54:59

本地部署DeepSeek（Mac版本，带图形化操作界面）

一、下载安装：Ollama 官网下载：Download Ollama on macOS 二、安装Ollama 1、直接解压zip压缩包，解压出来就是应用程序 2、直接将Ollama拖到应用程序中即可 3、启动终端命令验证 # 输入 ollama 代表已经安装成功。 4、下载模型点击模型…...

编程日记 2025/5/15 9:38:25

离线统信系统的python第三方库批量安装流程

一、关于UOS本机操作系统：UOS（基于Debian的Linux发行版） CPU：海光x86 二、具体步骤 1、在联网的电脑上用控制台的pip命令批量下载指定版本的第三方库方法A cd <目标位置的绝对路径> pip download -d . --platform many…...

编程日记 2025/5/19 9:14:57

群晖安装Gitea

安装Docker Docker运行Gitea 上传gitea包，下载地址：https://download.csdn.net/download/hmxm6/90360455 打开docker 点击印象，点击新增，从文件添加点击启动可根据情况，进行高级设置，没有就下一步点击应…...

编程日记 2025/5/17 2:15:23

jmeter逻辑控制器9

1，简单控制器2，录制控制器3，循环控制器4，随机控制器5，随机顺序控制器6，if控制器7，模块控制器8，Include控制器9，事物控制器本文永久更新地址: 1，简单控制器不…...

编程日记 2025/5/19 18:16:07

Spring统一修改RequestBody

我们编写RestController时，有可能多个接口使用了相同的RequestBody，在一些场景下需求修改传入的RequestBody的值，如果是每个controller中都去修改，代码会比较繁琐，最好的方式是在一个地方统一修改，比如将he…...

编程日记 2025/5/14 10:31:04

自动化xpath定位元素（附几款浏览器xpath插件）

在 Web 自动化测试、数据采集、前端调试中，XPath 仍然是不可或缺的技能。虽然 CSS 选择器越来越强大，但面对复杂 DOM 结构时，XPath 仍然更具灵活性。因此，掌握 XPath，不仅能提高自动化测试的稳定性，还能在爬…...

编程日记 2025/5/19 4:35:12

go-elasticsearch创建ik索引并进行查询操作

es-go client引入gomod go get github.com/elastic/go-elasticsearch/v8latest连接es服务器（不经过安全校验) cfg : elasticsearch.Config{Addresses: []string{"http://localhost:9200",}, } es, err : elasticsearch.NewClient(cfg) if err ! nil {pa…...

编程日记 2025/5/15 17:20:25

【东莞常平】戴尔R710服务器不开机维修分享

1：2025-02-06一位老客户的朋友刚开工公司ERP服务器一台戴尔老服务器故障无法开机，于是经老客户介绍找到我们。 2：服务器型号是DELL PowerEdge R710 这个服务器至少也有15年以上的使用年限了。 3：客户反馈的故障问题为：…...

编程日记 2025/5/19 13:10:34

rebase和merge

rebase 和merge区别： rebase变基，改变基底：rebase会抹去提交记录。 git pull 默认merge，git pull --rebase 变基 rebase C、D提交属于feature分支，是基于master分支，在B提交额外拉出来的，当…...

编程日记 2025/5/17 17:37:49

SSA-TCN麻雀算法优化时间卷积神经网络时间序列预测未来Matlab实现

SSA-TCN麻雀算法优化时间卷积神经网络时间序列预测未来Matlab实现目录 SSA-TCN麻雀算法优化时间卷积神经网络时间序列预测未来Matlab实现预测效果基本介绍程序设计参考资料预测效果基本介绍 1.Matlab实现SSA-TCN麻雀算法优化时间卷积神经网络时间序列预测未来（优…...

编程日记 2025/5/18 15:02:54

2025牛客寒假算法基础集训营5（补题）

C 小L的位运算显然，如果两次反置的价格小于等于交换的价格，那么直接全部反置就好了。反之，由于交换一定低于两次反置，我们尽可能用交换来消去不正确的位置。不正确的位置类型只有00，01，10，11&…...

编程日记 2025/5/20 2:00:21

Kotlin Android 环境搭建

Kotlin Android 环境搭建引言随着移动应用的日益普及，Android 开发成为了一个热门的技术领域。Kotlin 作为一种现代的编程语言，因其简洁、安全、互操作性强等特点，被越来越多的开发者所喜爱。本文将详细介绍 Kotlin Android 环境搭建的步骤，帮助您快速上手 Kotlin Andr…...

编程日记 2025/5/12 0:43:49

DeepSeek图解10页PDF

以前一直在关注国内外的一些AI工具，包括文本型、图像类的一些AI实践，最近DeepSeek突然爆火，从互联网收集一些资料与大家一起分享学习。本章节分享的文件为网上流传的DeepSeek图解10页PDF，免费附件链接给出。 1 本地 1 本地部…...

编程日记 2025/5/12 1:41:52

Kafka中的KRaft算法

我们之前的Kafka值依赖于Zookeeper注册中心来启动的，往里面注册我们节点信息 Kafka是什么时候不依赖Zookeeper节点了在Kafka2.8.0开始就可以不依赖Zookeeper了可以用KRaft模式代替Zookeeper管理Kafka集群 KRaft Controller和KRaft Leader的关系两者关系 Lea…...

编程日记 2025/5/17 21:27:18

C++20新特性

编程日记 2025/5/18 9:17:27

[LUA ERROR] bad light userdata pointer

Cocos2d项目，targetSdkVersion30，在 android 13 设备运行报错: [LUA ERROR] bad light userdata pointer ，导致黑屏。参考 cocos2dx 适配64位 arm64-v8a 30 lua 提示 bad light userdata pointer 黑屏-CSDN博客的方法下载最新的Cocos2dx …...

编程日记 2025/5/13 14:06:11

一、BEV感知技术概述

二、BEV Camera数据采集系统方案

三、数据采集

四、时间同步

五、总结

相关文章：