一种对行车指挥进行记录分析与直播的方法与装置制造方法及图纸

本发明专利技术涉及一种对行车指挥进行记录分析与直播的方法与装置，包括：1)对铁路信号设备和行车计划图的各种状态意义进行动态图像建模，同时对行车作业操作及指挥用语的标准化流程进行定义；2)接收操作终端输出的HDMI/VDI数字视频信号并转换为RGB图像；采集指挥人员的语音指令；3)对图像、语音、文字进行非正常操作和关键流程操作的检索和分析；4)把相关的图像、语音进行编码压缩和封装，同时加入对应的语音字幕，形成一组视频文件集合；5)对所形成的视频文件集合进行多路同步回放；6)对步骤2)形成的图像和语音进行视频编码封装，推流到视频直播系统。与现有技术相比，本发明专利技术具有提高操作行为的综合分析能力和调度指挥的应急处理能力等优点。

【技术实现步骤摘要】
一种对行车指挥进行记录分析与直播的方法与装置
本专利技术涉及铁路运输过程中操作行为的监控和检索分析技术，尤其是涉及一种对行车指挥进行记录分析与直播的方法与装置。
技术介绍
安全和高效是行车指挥的两个永恒的主题。这两个主题的达成主要依赖于行车指挥设备的功能完备性和调度指挥人员的操作水平，特别是在应急情况下的操作水平。TDCS3.0及CTC3.0的应用，在系统层面上实现了接发车等行车作业的错办报警和安全卡控，在安全指挥方面上了一个新的台阶。在调度指挥人员操作水平方面，调度和车务培训仿真系统正在开发和应用,其主要目的提高操作人员对行车规范的理解和非正常情况下的操作水平。但在实际的运输指挥过程中，行车调度指挥的真实水平如何？在各种应急情况和非正常情况下，指挥人员是如何操作设备，下达命令指挥行车的？在这方面，铁路运输部门急需一定的方法和设备对实际过程中的违规、不正当或不合理操作及时发现，进而通知操作人员及时更正，防止安全隐患。中国专利公开号CN110110983A公开了一种铁路运输调度过程中作业行为自动分析系统及方法。其方法包括：采集CT本文档来自技高网...

【技术保护点】
1.一种对行车指挥进行记录分析与直播的方法，其特征在于，包括以下步骤：/n步骤1)对铁路信号设备和行车计划图的各种状态意义进行动态图像建模，同时对行车作业操作及指挥用语的标准化流程进行定义；/n步骤2)接收操作终端输出的HDMI/VDI数字视频信号并转换为RGB图像；采集指挥人员的语音指令，并把语音指令转化为文字信息；/n步骤3)依据步骤1)定义的模型和流程对步骤2)得到的图像、语音、文字进行非正常操作和关键流程操作的检索和分析，对分析结果进行记录；/n步骤4)依据步骤3)的分析结果，把相关的图像、语音进行编码压缩和封装，同时加入对应的语音字幕，形成一组视频文件集合，用于事后分析查看；/n步骤...

【技术特征摘要】
1.一种对行车指挥进行记录分析与直播的方法，其特征在于，包括以下步骤：
步骤1)对铁路信号设备和行车计划图的各种状态意义进行动态图像建模，同时对行车作业操作及指挥用语的标准化流程进行定义；
步骤2)接收操作终端输出的HDMI/VDI数字视频信号并转换为RGB图像；采集指挥人员的语音指令，并把语音指令转化为文字信息；
步骤3)依据步骤1)定义的模型和流程对步骤2)得到的图像、语音、文字进行非正常操作和关键流程操作的检索和分析，对分析结果进行记录；
步骤4)依据步骤3)的分析结果，把相关的图像、语音进行编码压缩和封装，同时加入对应的语音字幕，形成一组视频文件集合，用于事后分析查看；
步骤5)对步骤4)所形成的视频文件集合进行多路同步回放，同时依据分析结果，在播放时找出不合理操作对应的设备元素、菜单操作、文件内容在视频回放画面上进行标注；
步骤6)对步骤2)形成的图像和语音进行视频编码封装，然后推流到视频直播系统，对其现场指挥操作场景进行视频直播。


2.根据权利要求1所述的一种对行车指挥进行记录分析与直播的方法，其特征在于，所述的动态图像建模包括：对信号机、道岔、股道、进路、列车、供电臂、封锁区域的各种状态以及列车运行线的含义均用图形的方式进行表达；对进路建立和进路解锁时，道岔和信号机的前后序列变化，列车移动时轨道区段的变化、车次号的变化均用时间序列图像间的关系来表达，用于视频甄别；
所述的标准化流程定义是把各种接发车、设备故障、调度命令相关的作业流程、作业术语进行说明，用于和实际操作情况进行核对。


3.根据权利要求1所述的一种对行车指挥进行记录分析与直播的方法，其特征在于，所述的步骤2)中进行视频信号转换为RGB图像时，要从TDCS/CTC卫星授时系统获取系统时钟，并从HDMI/VDI信号中获取图像大小，帧速率信息，形成连续图像集，并对每帧图像进行时间标注；
所述的步骤2)采集指挥人员的语音时，要从TDCS/CTC卫星授时系统获取系统时钟，记录语音开始时间和结束时间；当把语音转为文字信息时，记录文字的开始时间和结束时间。


4.根据权利要求1所述的一种对行车指挥进行记录分析与直播的方法，其特征在于，所述的步骤3)对图像、语音、文字进行非正常操作和关键流程操作的检索和分析，对分析结果进行记录具体为：
31)、对站场图显示终端输出的图像按照时间先后排序形成图像序列，对计划终端输出的图像按照时间先后排序形成图像序列；
32)、对图像序列进行扫描，识别报警信息框中的报警信息，提取设备状态信息、操作信息及时间；
依据信号设备动态故障模型，识别信号设备故障类型及编号，并记录开始故障时的时间；
识别调度命令拟写、下发、签收操作及调度命令类型，并记录相应时间；
33)、对于设备故障的非正常操作，以设备故障时间为起点，识别经过该故障设备接发车进路及进路办理的时间，识别菜单操作命令、按钮操作命令及时间，依据这些时间在语音文字记录里面提取语音指令，并把这些事件按照时间先后进行排序，形成设备故障情况下的非正常操作动作集合；
34)、对于调度命令的操作，识别调度命令的内容，并与调度命令标准术语核对；提取调度命令的发令人和受令人，并依据时间找到相关人员操作终端的图像，对操作人员对调度命令菜单操作，按钮操作进行识别，并记录时间，依据这些时间在语音文字记录里面提取语音指令，并把这些事件按照时间先后进行排序，形成调度命令相关操作的动作集合；
35)、把步骤33)和步骤34)中的动作集合与正常的操作流程进行比对，形成分析结果，其中分析结果信息包括操作发生的时间、操作人和结论，其中结论为一致或者不一致，对于不一致的结论，要对判断不一致的依据如设备元素、菜单、文字等内容进行记录。


5.根据权利要求1所述的一种对行车指挥进行记录分析与直播的方法，其特征在于，所述的步骤4)形成的一组视频文件集合，是当相关的图像来源于不同的终端的HDMI/VGI信号输出时，这些图像单独编码形成视频文件；当语音和字幕有多个时，这些语音和字幕加入不同的通道；所有的视频以发生时的TDCS/CTC卫星授时系统的时钟信息作为基础，用于回放时多路视频的同步；
所述的步骤6)的视频编码参数，可进行配置，包括对视频的码率、帧速率、编码器、视频格式进行配置，用于保证播放的流畅性和清晰度。


6.一种对行车指挥进行记录分析与直播的装置，其特征在于，包括：TDCS/CTC卫星授时系统、TDCS/CTC操作终端、语音采集模块、图像识别及规则模块、音视频录制推流模块、操作行为分析模块、音视频直播系统、文件存储管理模块以及多路视频播放分析模块；
所述的语音采集模块与TDCS/CTC卫星授时系统连接，用于接收TDCS/CTC系统时钟；
所述的音视频录制推流模块与TDCS/CTC操作终端连接，用于接收HDMI/VDI数字视频信号；
所述的音视频录制推流模块与语音采集模块连接，用于接收实时语音数据；
所述的音视频录制推流模块与TDCS/CTC卫星授时系统连接，用于接收TDCS/CTC系统时钟；
所述的音视频录制推流模块与文件存贮管理模块连接，用于发送音视频文件；
所述的音视频录制推流模块与音视频直播系统连接，用于推送操作终端视频流；
所述的操作行为分析模块与图像识别及规则模块连接，用于获取铁路信号设备信息，进路建立与解锁、列车移动信息和标准作业流程信息；
所述的操作行为分析模块与音视频录制推流模块连接，用于接收操作终端图形集、音频及文字，发送文件存储信息；
所述的操作行为分析模块与文件存贮管理模块连接，用于发送分析结果信息；
所述的多路视频播放分析模块与音视频直播系统连接，用于接收各个操作终端直播视频流；
所述的多路视频播放分析模块与音视频录制推流模块连接，用于发送直播选择命令；
所述的多路视频播放分析模块与文件存贮管理模块连接，用于发送播放选择命令；接收回放视频文件；
所述的多路视频播放分析模块与图像识别及规则模块连接，用于获取铁路信号设备、进路、图表识别模型。


7.根据权利要求6所述的装置，其特征在于，所述的语音采集模块包括第一信息通信模块和录音设置模块；
所述的第一信息通信模块与TDCS/CTC卫星授时系统接口，获取系统时间信息，并把音频数据、录音开始时的系统时间和录音设备ID发送给音视频录制推流模块；
所述的语音设置模块...

【专利技术属性】
技术研发人员：汤宝伟，王刚，费振豪，翟月华，陈梵，朱永华，吴翔，王兴利，
申请(专利权)人：卡斯柯信号有限公司，
类型：发明
国别省市：上海;31