【技术实现步骤摘要】
一种图像处理的方法及装置
[0001]本申请涉及机器学习领域，尤其涉及一种图像处理的方法及装置。
技术介绍
[0002]目前，人工智能技术已经开始被广泛研究以及应用于各类车载视觉分析系统。现有车载红外视觉系统可通过识别驾驶者的手部关键点特征，从而对车载设备中的功能进行交互。
[0003]然而，由于车载设备中的红外视觉系统内部图像通道数较少，加之座舱场景光照变化较大，因此已有的方法应用可行性较差，无法支持日益丰富的车载设备的需求，尤其车载设备中各功能之间的交互需求。
技术实现思路
[0004]本申请提供了一种图像处理的方法及装置，用于实时检测驾驶者(或用户)的手势状态，从而优化车载设备中的功能交互。
[0005]第一方面，本申请提供了一种图像处理的方法，该方法适用于车载设备，该设备包括多个预设功能，每个预设功能中包括多个预设执行动作，该方法包括：
[0006]提取单帧第一图像中的静态手势特征，根据单帧第一图像中的静态手势特征，从多个预设功能中选择与用户交互的目标功能，之后，提取多帧第二图像中的动态手势特征，根据多帧第二图像中的动态手势特征，从目标功能包括的多个预设执行动作中选择目标执行动作，最后，控制目标功能执行目标执行动作。
[0007]上述技术方案中，通过提取单帧第一图像中静态手势特征，选择所要交互的目标功能，之后提取多帧第二图像的动态手势特征，执行目标执行动作。将静态手势与动态手势相结合，有助于提高车载设备识别用户手势的准确率，且有助于丰富车载设备交互方式。>[0008]一种可能的设计中，在提取单帧第一图像中的静态手势特征之前，提取单帧第三图像中的静态手势特征，根据单帧第三图像中的静态手势特征，唤醒车载设备。在控制目标功能执行目标执行动作之后，提取单帧第四图像中的静态手势特征，根据单帧第四图像中的静态手势特征，退出车载设备。
[0009]上述技术方案中，车载设备可通过采集到的第三图像中的静态手势特征，唤醒车载设备，以及通过采集到的第四图像中的静态手势特征，退出车载设备，如此，用户对车载设备中的功能没有使用需求时，车载设备无需较为频繁的采集手势图像，有助于降低车载设备的功耗。
[0010]一种可能的设计中，提取单帧第一图像中的静态手势特征，具体是根据手部区域检测模型，从单帧第一图像中识别手部区域，再根据手部关键点检测模型，从手部区域中识别手部关键点，最后根据手部关键点，确定静态手势特征。
[0011]上述技术方案中，先识别手部区域，再从手部区域中识别手部关键点，最后确定静态手势特征，有助于提高车载设备确定静态手势特征的准确率。
[0012]一种可能的设计中，提取多帧第二图像中的动态手势特征，具体是针对每帧第二图像，根据手部区域检测模型，从第二图像中提取手部区域，再根据手部关键点检测模型，从手部区域中识别手部关键点，最后根据多帧第二图像分别对应的手部关键点，确定动态手势特征。
[0013]上述技术方案中，先识别手部区域，再从手部区域中识别手部关键点，最后确定静态手势特征，有助于提高车载设备确定动态手势特征的准确率。
[0014]一种可能的设计中，根据单帧第一图像中的静态手势特征，从多个预设功能中选择与用户交互的目标功能，包括：获取多个第一对应关系，其中，多个第一对应关系包括多个预设功能和多个预设功能分别对应的静态手势特征。根据单帧第一图像中的静态手势特征，从多个第一对应关系中确定单帧第一图像中的静态手势特征对应的预设功能，以作为目标功能，其中，多个预设功能至少包括如下中一项或多项：空调温度调节功能、空调模式调节功能、音量调节功能、电台切换功能、自定义功能。
[0015]上述技术方案中，预设第一对应关系，在车载设备识别出静态手势特征之后，可以准确确定目标功能，提高响应速度。
[0016]一种可能的设计中，根据多帧第二图像中的动态手势特征，从目标功能包括的多个预设执行动作中选择目标执行动作，首先获取多个第二对应关系，其中，多个第二对应关系包括目标功能包括的多个预设执行动作分别对应的动态手势特征。再根据多帧第二图像中的动态手势特征，从多个第二对应关系中确定多帧第二图像中的动态手势特征对应的预设执行动作，以作为目标执行动作，其中，目标功能包括的多个预设执行动作中，至少包括如下中一项或多个：上滑、下滑、放大、缩小。
[0017]上述技术方案中，预设第二对应关系，在车载设备识别出动态手势特征之后，可以准确确定出目标功能中的目标执行动作，提高响应速度。
[0018]一种可能的设计中，通过红外图像采集设备，获取单帧第一图像，和/或，通过红外图像采集设备，获取多帧第二图像。
[0019]在上述设计中，提供一种车载设备获取图像的方式，使得在不同光照情况下，车载设备从图像中识别到的手势特征的效果更好。
[0020]第二方面，本申请提供了一种图像处理的装置，该装置包括：
[0021]处理单元，用于提取单帧第一图像中的静态手势特征，根据单帧第一图像中的静态手势特征，从多个预设功能中选择与用户交互的目标功能；处理单元，还用于提取多帧第二图像中的动态手势特征，根据多帧第二图像中的动态手势特征，从目标功能包括的多个预设执行动作中选择目标执行动作；
[0022]控制单元，用于控制目标功能执行目标执行动作。
[0023]一种可能的设计中，处理单元在提取单帧第一图像中的静态手势特征之前，还用于：提取单帧第三图像中的静态手势特征，根据单帧第三图像中的静态手势特征，唤醒车载设备。处理单元在控制单元控制目标功能执行目标执行动作之后，还用于：提取单帧第四图像中的静态手势特征，根据单帧第四图像中的静态手势特征，退出车载设备。
[0024]一种可能的设计中，处理单元在提取单帧第一图像中的静态手势特征时，具体用于：根据手部区域检测模型，从单帧第一图像中识别手部区域，再根据手部关键点检测模型，从手部区域中识别手部关键点，最后根据手部关键点，确定静态手势特征。
[0025]一种可能的设计中，处理单元在提取多帧第二图像中的动态手势特征时，具体用于：针对每帧第二图像，根据手部区域检测模型，从第二图像中提取手部区域，再根据手部关键点检测模型，从手部区域中识别手部关键点，最后根据多帧第二图像分别对应的手部关键点，确定动态手势特征。
[0026]一种可能的设计中，处理单元在根据单帧第一图像中的静态手势特征，从多个预设功能中选择与用户交互的目标功能时，具体用于：获取多个第一对应关系，其中，多个第一对应关系包括多个预设功能和多个预设功能分别对应的静态手势特征。再根据单帧第一图像中的静态手势特征，从多个第一对应关系中确定单帧第一图像中的静态手势特征对应的预设功能，以作为目标功能，其中，多个预设功能至少包括如下中一项或多项：空调温度调节功能、空调模式调节功能、音量调节功能、电台切换功能、自定义功能。
[0027]一种可能的设计中，处理单元在根据多帧第二图像中的动态手势特征，从目标功能包括的多个预设执行动作中选择目标执本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种图像处理的方法，其特征在于，适用于车载设备，所述车载设备中包括多个预设功能，每个预设功能中包括多个预设执行动作；所述方法包括：提取单帧第一图像中的静态手势特征，根据所述单帧第一图像中的静态手势特征，从所述多个预设功能中选择与用户交互的目标功能；提取多帧第二图像中的动态手势特征，根据所述多帧第二图像中的动态手势特征，从所述目标功能包括的多个预设执行动作中选择目标执行动作；控制所述目标功能执行所述目标执行动作。2.如权利要求1所述的方法，其特征在于，所述提取单帧第一图像中的静态手势特征之前，还包括：提取单帧第三图像中的静态手势特征，根据所述单帧第三图像中的静态手势特征，唤醒所述车载设备；所述控制所述目标功能执行所述目标执行动作之后，还包括：提取单帧第四图像中的静态手势特征，根据所述单帧第四图像中的静态手势特征，退出所述车载设备。3.如权利要求1所述的方法，其特征在于，所述提取单帧第一图像中的静态手势特征，包括：根据手部区域检测模型，从所述单帧第一图像中识别手部区域；根据手部关键点检测模型，从所述手部区域中识别手部关键点；根据所述手部关键点，确定所述静态手势特征。4.如权利要求1所述的方法，其特征在于，所述提取多帧第二图像中的动态手势特征，包括：针对每帧第二图像：根据手部区域检测模型，从所述第二图像中提取手部区域，根据所述手部关键点检测模型，从所述手部区域中识别手部关键点；根据所述多帧第二图像分别对应的手部关键点，确定所述动态手势特征。5.如权利要求1所述的方法，其特征在于，所述根据所述单帧第一图像中的静态手势特征，从所述多个预设功能中选择与用户交互的目标功能，包括：获取多个第一对应关系，所述多个第一对应关系包括所述多个预设功能和所述多个预设功能分别对应的静态手势特征；根据所述单帧第一图像中的静态手势特征，从所述多个第一对应关系中确定所述单帧第一图像中的静态手势特征对应的预设功能，以作为所述目标功能；所述多个预设功能至少包括如下中一项或多项：空调温度调节功能、空调模式调节功能、音量调节功能、电台切换功能、自定义功能。6.如权利要求1所述的方法，其特征在于，所述根据所述多帧第二图像中的动态手势特征，从所述目标功能包括的多个预设执行动作中选择目标执行动作，包括：获取多个第二对应关系，所述多个第二对应关系包括所述目标功能包括的多个预设执行动作分别对应的动态手势特征；根据所述多帧第二图像中的动态手势特征，从所述多个第二对应关系中确定所述多帧第二图像中的动态手势特征对应的预设执行动作，以作为所述目标执行动作；
所述目标功能包括的多个预设执行动作至少包括如下中一项或多个：上滑、下滑、放大、缩小。7.如权利要求1至6中任一项所述的方法，其特征在于，还包括：通过红外图像采集设备，获取所述单帧第一图像，和/或，通过红外图像采集设备，获取所述多帧第二图像。8.一种图像处理的装置，其特征在于，所述的装置包括：处理单元，用于提取单帧第一图像中的静态手势特征，根据所述单帧第一图像中的静态手势特征，从所述多个预设功能中选择与用户...
【专利技术属性】
技术研发人员：缪其恒，许炜，苏志杰，卢星星，
申请(专利权)人：浙江华锐捷技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。