基于数字证书的车载传感器融合感知同步测量系统技术方案

本发明专利技术公开的基于数字证书的车载传感器融合感知同步测量系统，属于计量测试技术领域。本发明专利技术包括传感器模组、高精度时钟源、时间戳处理模块、基于数字证书的数据生成模块、数据解析模块、时间同步测量模块。车载多模态传感器测量数据结合高精度时间信息生成机器可读的数字证书格式，通过对数据的解析将传感器信息传至智能移动机器人、无人车等智能系统确保信息的运行，通过时间同步测量模块实现不同传感器时间延迟的测量。通过引入高精度时钟源并为传感器数据增加时间戳的方式，实现多模态感知数据的时基统一。基于测量得到的多模态传感器数据的同步信息，通过补偿算法实现各模态数据的时域对齐，进而确保多模态数据融合的有效性。效性。效性。

【技术实现步骤摘要】
基于数字证书的车载传感器融合感知同步测量系统


[0001]本专利技术涉及一种基于数字证书的车载传感器融合感知同步测量系统，属于计量测试


技术介绍

[0002]多传感器融合能够有效提升自动驾驶、智能机器人、多旋翼无人机等智能系统的环境感知能力，为高效、可信的决策提供信息支撑。传感器数据的时间同步是实现多模态数据的可靠融合的必备条件。
[0003]在设备运行过程中，由于各个传感器独立封装并按照自己的时钟基准运行，往往采样频率也不尽不同，这些将导致种采样数据时间上不同步。加之各传感器的时钟源都有钟漂，即使把各传感器时间戳在初始时刻对齐，运行一段时间之后，之前对齐的结果仍会偏离。对各传感器的时间进行同步处理虽然能够一定程度上降低这一影响，但是仍不能完全消除。目前常见的同步方法有软同步和硬同步。软同步提供一个相同的时间源(一般都是主控电脑UTC时间)给相机和LIDAR等传感器，在各传感器记录的数据中打上时间戳，但是因为周期不同，不同传感器之间的数据帧不是完全对应的。硬同步就是用一个硬件触发器，直接通过物理信号，触发相机、LIDAR等传感器，常用的是采用GNSS信号进行触发，但是在隧道、山林等GNSS信号不好的场景，时间有反复跳变，半个小时可能有上百毫秒之巨。
[0004]实现用于多传感器融合的智能系统时间同步信息的高精度测量，明确各传感器获取数据的时间偏差，提升深度学习算法和数据融合算法的性能，对于实现环境的智能感知具有重要的意义。为此，从数据的机器可读角度出发，提出以基于XML的数字证书的形式实现时间同步的测量。

技术实现思路

[0005]本专利技术的主要目的是提供一种基于数字证书的车载传感器融合感知同步测量系统，通过引入高精度时钟源，并通过对智能系统车载传感器数据增加参考时间戳的方法，实现多传感器时间同步性的高精度测量，解决多模态数据时间同步性差导致的环境感知性能下降的问题。
[0006]本专利技术的目的是通过下述技术方案实现的。
[0007]本专利技术公开的基于数字证书的车载传感器融合感知时间同步测量系统，包括高精度时钟源、时间戳处理模块、基于数字证书的数据生成模块、数据解析模块、时间同步分析模块。
[0008]所述的传感器模组为智能系统所搭载的传感器模块，且至少包含两种不同类型的传感器，所述的传感器模组与时间戳模块上对应的传感器接口相连接。所述传感器类型包括LIDAR、相机、IMU。
[0009]所述的高精度时钟源主要用于为感知流提供标准的、参考的时间信息，其精度需优于1μs，通过具有高稳定性的时间设备充当时间源。作为优选，高稳定性的时间设备选用
原子钟。
[0010]所述的时间戳模块主要用于接收外部时钟源的精确时间信息，并将相关的时间信息转化为时间戳，为多模态传感器的时间同步性测量提供统一的时基信息，时间戳的格式包括日期和时间，格式采用“年
‑
月
‑
日T时
‑
分
‑
秒”的格式，如“2023
‑
09
‑
05T09:15:03.000001”。其中对于时间戳中数据测得时刻的精度能够根据高精度时钟源的精度进行设定。
[0011]所述的基于数字证书的数据生成模块采用异步多线程模式，不同模态的传感器通过相应的接口连接至基于数字证书的数据生成模块，不同传感器模组分别设有专用的线程，所有线程在各自线程运行，互不干扰。
[0012]所述的基于数字证书的数据生成模块为不同的传感器模块命名，并生成相应的标签，考虑到智能系统存在同时部署多个同类型的传感器的情况，对所搭载的传感器进行统一的命名，如Lidar 1、Lidar2、
…
、Lidar n，Camera 1、Camera 2、
…
、Camera n。
[0013]所述的基于数字证书的数据生成模块将不同时刻的传感器测量数据与时间戳关联，并与传感器标签、单位进行封装，生成相应的数据包。对于特定的激光雷达j而言，其数据类型为{(Lidar j,L1,m,t1),(Lidar j,L2,m,t2),
…
(Lidar j,L
n
,m,t
n
)}。其中，L
i
特定时刻激光雷达的数据，m为激光雷达测量值的单位，t2为激光雷达数据所对应的时刻。
[0014]所述的基于数字证书的数据生成模块基于XML语句生成机器可读的传感器数据格式，且保留不同传感器的测量精度。
[0015]所述的数据解析模块对基于数字证书的传感器信息进行解析，将解析得到的各传感器的信息通过串口形式传输至智能系统相应的接口，确保其可靠运行；将解析得到的不同模态传感器的时间信息进行提取并进行分析，得到不同模态传感器的时间偏差，进而明确智能系统多模态数据的同步信息，并以可视化的形式将同步信息显示出来。
[0016]本专利技术公开的基于数字证书的车载传感器融合感知同步测量系统的工作方法为：
[0017]步骤一：确定需要测量的智能系统车载传感器的种类、数量和接口类型，同时确保车载传感器融合感知同步测量系统的供电电压满足不同类型传感器的供电需求。
[0018]步骤二：将不同类型的传感器连接至车载传感器融合感知同步测量系统相应的传感器接口，同时将车载传感器融合感知同步测量系统连接至电源，通过相应的电压转换模块实现不同传感器的供电需求。
[0019]步骤三：基于数字证书的数据生成模块通过机器可读的XML语言，按照预设的数据格式将传感器的测量数据封装入专用的数据包，并保持传感器原有的测量精度。
[0020]步骤四：数据解析模块将数据生成模块产生的数据包进行解析，提取不同模态传感器数据所对应的准确时间戳。同时，产生与不经数据生成模块一致的数据格式，确保智能系统的有效运行。
[0021]步骤五：选取用以参考的基准传感器的时间戳作为基准，进而分析不同传感器之间的时间同步性。
[0022]步骤六：基于所计算的时间同步偏差从算法的角度，对不同传感器的时间偏差进行修正，进而提升智能系统的环境感知能力。
[0023]有益效果：
[0024]1、本专利技术公开的一种基于高精度时钟源的时间同步测量方法，采用高精度的时钟
源作为时间基准，解决智能系统、不同传感器晶振提供的时间精度不一致、时间不同步的问题，为不同模态传感器、同类型不同传感器之间的时间同步性的计算提供基础。
[0025]2、本专利技术公开的一种基于机器可读的传感器数据包封装方法，采用机器可读的XML格式实现传感器测量数据的封装，包含传感器对应的标签、测量数据、数据单位和数据时间等信息，为不同类型传感器时间戳信息的集成和解析提供了基础。
[0026]3、本专利技术公开了一种面向多模态、多数量传感器数据解析方法，通过采用多线程的方式对多维时空数据包进行解析，确保不同传感器数据包的解析不串扰，从原理上保证时间同步的高精度测量。
[00本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.基于数字证书的车载传感器融合感知时间同步测量系统，其特征在于：包括高精度时钟源、时间戳处理模块、基于数字证书的数据生成模块、数据解析模块、时间同步分析模块；所述的传感器模组为智能系统所搭载的传感器模块，且至少包含两种不同类型的传感器，所述的传感器模组与时间戳模块上对应的传感器接口相连接；所述的高精度时钟源主要用于为感知流提供标准的、参考的时间信息，其精度需优于1μs，通过具有高稳定性的时间设备充当时间源；所述的时间戳模块主要用于接收外部时钟源的精确时间信息，并将相关的时间信息转化为时间戳，为多模态传感器的时间同步性测量提供统一的时基信息，时间戳的格式包括日期和时间，格式采用“年
‑
月
‑
日T时
‑
分
‑
秒”的格式；其中对于时间戳中数据测得时刻的精度能够根据高精度时钟源的精度进行设定；所述的基于数字证书的数据生成模块采用异步多线程模式，不同模态的传感器通过相应的接口连接至基于数字证书的数据生成模块，不同传感器模组分别设有专用的线程，所有线程在各自线程运行，互不干扰；所述的基于数字证书的数据生成模块为不同的传感器模块命名，并生成相应的标签，考虑到智能系统存在同时部署多个同类型的传感器的情况，对所搭载的传感器进行统一的命名；所述的基于数字证书的数据生成模块将不同时刻的传感器测量数据与时间戳关联，并与传感器标签、单位进行封装，生成相应的数据包；对于激光雷达j而言，其数据类型为{(Lidar j,L1,m,t1),(Lidar j,L2,m,t2),
…
(Lidar j,L
n
,m,t
n
)}；其中，L
i
特定时刻激光雷达的数据，m为激光雷达测量值的单位，t2为激光雷达数据所对应的时刻；所述的基于数字证书的数据生成模块基于XML语句生成机器可读的传感器数据格式；所述的数据解析模块对基于数字证书的传感器信息进行解析，将解析得到的各传感器的信息通过串...

【专利技术属性】
技术研发人员：姜延欢，徐永，孙景亭，崔佳慧，张昱，
申请(专利权)人：中国航空工业集团公司北京长城计量测试技术研究所，
类型：发明
国别省市：