一种心肺复苏AI自动分段系统技术方案

本发明专利技术提供了一种心肺复苏AI自动分段系统，包括：动作识别模块，用于确定心肺复苏中每个操作的结束姿势，基于结束姿势确定每个操作的结束帧，得到第一分割节点；语义检测模块，用于提取原视频的视频语义，获得音频特征，基于音频特征对第一分割节点进行检验，获得检验结果；视频分段模块，用于根据检验结果，对原视频进行分段并自动存档视频分段信息。本发明专利技术自动将心肺复苏教学视频或者练习视频进行分段，对心肺复苏教学视频进行分段方便学生根据自身学习需求对心肺复苏某个操作进行反复观看的针对性学习，对学生练习视频的分段方便教学老师的观看以及评分，有助于老师及时发现学生心肺复苏操作的动作问题提出改进建议。肺复苏操作的动作问题提出改进建议。肺复苏操作的动作问题提出改进建议。

【技术实现步骤摘要】
一种心肺复苏AI自动分段系统


[0001]本专利技术涉及信息
，特别涉及一种心肺复苏AI自动分段系统。

技术介绍

[0002]在临床上，心跳呼吸骤停是很严重的一种状况，救治不当病人就撒手人寰。临床研究上能够证实，如果在4分钟以内积极的实行了比较正确的心肺复苏，有50％以上的人能够抢救成功。如果超过10分钟，仍然没有采取有效的心肺复苏，那这种情况能够活过来的概率非常的渺茫，几乎不能够到5％，可见有效的心肺复苏时是可以为患者赢得宝贵的抢救时间的。因此心肺复苏作为一种重要的及时急救手段，在教学过程必须精准保证心肺复苏操作姿势的准确性，但是由于教学课时限制以及人数限制，让老师对每个学生进行一对一指导是不现实的，因此本专利技术提出一种心肺复苏AI自动分段系统解决上述问题。

技术实现思路

[0003]本专利技术提供一种心肺复苏AI自动分段系统，本专利技术自动将心肺复苏教学视频或者练习视频进行分段，对心肺复苏教学视频进行分段方便学生根据自身学习需求对心肺复苏某个操作进行反复观看的针对性学习，对学生练习视频的分段方便教学老师的观看以及评分，有助于老师及时发现学生心肺复苏操作的动作问题提出改进建议，确保学生心肺复苏操作动作的准确定性，有利于提高心肺复苏成功率。对学生练习视频的分段还有利于学生在练习完成后进行针对性回放，提高学习效率。
[0004]本专利技术提供一种心肺复苏AI自动分段系统，包括：
[0005]动作识别模块，用于确定心肺复苏原视频中每个操作的结束姿势，基于结束姿势确定每个操作的结束帧，得到第一分割节点；
[0006]语义检测模块，用于提取原视频的视频语义，获得音频特征，基于音频特征对第一分割节点进行检验，获得检验结果；
[0007]视频分段模块，用于根据检验结果，对原视频进行分段并自动存档视频分段信息。
[0008]优选的，动作识别模块，包括：
[0009]视频处理单元，用于将原视频进行分帧处理，获得多个视频帧，多每个视频帧进行重点突出处理，获得待处理视频帧；
[0010]动作标记单元，用于在待处理视频帧上标记每个姿势的关键点，获得标记视频帧，并基于预设心肺复苏操作名称，对标记视频帧进行操作名称添加；
[0011]动作分段单元，用于基于操作名称建立动作分解集合，根据动作分解集合划分结果，确定原视频图像对应的第一分割节点。
[0012]优选的，视频处理单元，包括：
[0013]特征获取子单元，用于获得多个视频帧，并分别对多个视频帧上演示人员的第一姿势特征进行提取，同时基于标准动作视图库，获取心肺复苏操作对应的全部姿势的第二姿势特征；
[0014]筛选子单元，用于基于第一姿势特征第二姿势特征对多个视频帧进行筛选，获得有效视频帧和无效视频帧，并在确定无效视频帧对应的第一时间节点后，对无效视频帧对应图像进行隐藏；
[0015]预处理子单元，用于对有效视频帧进行重点突出处理，获得待处理视频帧。
[0016]优选的，动作标记单元，包括：
[0017]动作认证子单元，用于基于预设骨骼定位在待处理视频帧上标记演示人员当前姿势的关键点，并将关键点进行连接，获得第一动作视图；
[0018]将第一动作视图与标准动作视图库中的标准视图进行对比，获得相似姿势，当相似姿势唯一时，判定当前姿势即为相似姿势；
[0019]否则，获取待处理视频帧的相邻待处理视频帧对应第二动作视图，将第一动作视图与第二动作视图进行对比，确定当前姿势的位置变化特征，基于位置变化特征对相似姿势进行筛选获得目标姿势，并判定当前姿势即为目标姿势。
[0020]优选的，动作标记单元，还包括：
[0021]结束帧选取子单元，用于基于标准动作视图库，获取心肺复苏中每个完整动作的结束姿势以及结束姿势对应的第三动作视图，根据所述第三动作视图确定心肺复苏各个分段动作的结束帧；
[0022]结果验证子单元，用于获取各个结束帧对应的下一标记视频帧，将各个结束帧与下一标记视频帧进行动作连续演示，根据演示结果，确定当前结束帧对应的第一操作与下一标记视频帧对应的第二操作动作之间的相关性。
[0023]优选的，结果验证子单元，还包括：
[0024]验证判断子单元，用于当演示动作不连续时，判定第一操作和第二操作无关；
[0025]否则，获取下一标记视频帧对应的目标结束帧，当目标结束帧与当前结束帧的动作视图一样时，判断第一操作与第二操作为相同动作连续操作，并对第一操作与第二操作对应的操作名称添加顺序标签；
[0026]当目标结束帧与当前结束帧对应的动作视图不一样时，判定第一操作和第二操作无关。
[0027]优选的，语义检测模块，包括：
[0028]语义识别单元，用于基于视频语义理解模型对原视频的音频进行语义识别，并根据预设心肺复苏动作名称识别语义关键字；
[0029]语义分割单元，用于基于语义关键字，确实原视频音频的第二分割节点；
[0030]检验单元，将第二分割节点与第一分割节点进行对比，当第二分割节点与第一分割节点一致时，判定所述第一分割节点为正确分割节点；
[0031]否则，所述第一分割节点为待处理分割节点。
[0032]优选的，检验单元，包括：
[0033]第一处理子单元，用于获取待处理分割节点对应视频语义，基于视频语义判断待处理分割节点对应操作是否为多次重复操作，若是，判断所述待处理分割节点为正确分割节点；
[0034]否则，获取待处理分割节点对应的第一视频分段以及所述待处理分割节点对应的第二分割节点对应的第二视频分段；
[0035]当第一视频分段时间在第二视频分段对应的时间分为内时，将第二分割节点作为正确分割点。
[0036]优选的，检验单元，还包括：
[0037]第二处理子单元，用于当第一视频分段时间不在第二视频分段对应的时间分为内时，获取缺失视频分段，当将缺失视频分段对应视频帧均为无效视频时，获取第二视频分段对应的起始时间与第一视频分段对应的起始时间计算时间误差值，基于所述时间误差值对第一分割节点对应时间进行修正，确定正确分割节点对应时间；
[0038]当将缺失视频分段对应视频帧存在有效视频时，判定所述第一分割节点为正确分割节点且原视频存在讲解滞后，在添加滞后标识后，获取第二分割节点对应视频段的讲解内容进行语速调整后与第一视频分段进行匹配。
[0039]优选的，视频分段模块，包括：
[0040]分段单元，用于根据检测结果确定的正确分割节点对应时间节点，基于时间节点对原视频进行分段处理，获取最终视频分段；
[0041]标签添加单元，基于心肺复苏操作流程，对最终视频分段进行操作名称添加，根据视频时间轴，生成分段目录，获得分段结果；
[0042]存档单元，用于原视频以及分段结果进行压缩保存。
[0043]本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种心肺复苏AI自动分段系统，其特征在于，包括：动作识别模块，用于确定心肺复苏原视频中每个操作的结束姿势，基于结束姿势确定每个操作的结束帧，得到第一分割节点；语义检测模块，用于提取原视频的视频语义，获得音频特征，基于音频特征对第一分割节点进行检验，获得检验结果；视频分段模块，用于根据检验结果，对原视频进行分段并自动存档视频分段信息。2.根据权利要求1所述的一种心肺复苏AI自动分段系统，其特征在于，动作识别模块，包括：视频处理单元，用于将原视频进行分帧处理，获得多个视频帧，多每个视频帧进行重点突出处理，获得待处理视频帧；动作标记单元，用于在待处理视频帧上标记每个姿势的关键点，获得标记视频帧，并基于预设心肺复苏操作名称，对标记视频帧进行操作名称添加；动作分段单元，用于基于操作名称建立动作分解集合，根据动作分解集合划分结果，确定原视频图像对应的第一分割节点。3.根据权利要求2所述的一种心肺复苏AI自动分段系统，其特征在于，视频处理单元，包括：特征获取子单元，用于获得多个视频帧，并分别对多个视频帧上演示人员的第一姿势特征进行提取，同时基于标准动作视图库，获取心肺复苏操作对应的全部姿势的第二姿势特征；筛选子单元，用于基于第一姿势特征第二姿势特征对多个视频帧进行筛选，获得有效视频帧和无效视频帧，并在确定无效视频帧对应的第一时间节点后，对无效视频帧对应图像进行隐藏；预处理子单元，用于对有效视频帧进行重点突出处理，获得待处理视频帧。4.根据权利要求2所述的一种心肺复苏AI自动分段系统，其特征在于，动作标记单元，包括：动作认证子单元，用于基于预设骨骼定位在待处理视频帧上标记演示人员当前姿势的关键点，并将关键点进行连接，获得第一动作视图；将第一动作视图与标准动作视图库中的标准视图进行对比，获得相似姿势，当相似姿势唯一时，判定当前姿势即为相似姿势；否则，获取待处理视频帧的相邻待处理视频帧对应第二动作视图，将第一动作视图与第二动作视图进行对比，确定当前姿势的位置变化特征，基于位置变化特征对相似姿势进行筛选获得目标姿势，并判定当前姿势即为目标姿势。5.根据权利要求4所述的一种心肺复苏AI自动分段系统，其特征在于，动作标记单元，还包括：结束帧选取子单元，用于基于标准动作视图库，获取心肺复苏中每个完整动作的结束姿势以及结束姿势对应的第三动作视图，根据所述第三动作视图确定心肺复苏各个分段动作的结束帧；结果验证子单元，用于获取各个结束帧对应的下一标记视频帧，将各个结束帧与下一标记视频帧进行动作连续演示，根据演示结果，确定当前结束帧对应的第一操作与下一标
记视频帧对应的第二操作动作之...

【专利技术属性】
技术研发人员：舒华俊，
申请(专利权)人：广州市锐星信息科技有限公司，
类型：发明
国别省市：