触觉反馈内容的生成方法、装置、电子设备及存储介质制造方法及图纸

本公开涉及计算机处理技术领域，具体涉及触觉反馈内容的生成方法、装置、电子设备及存储介质，该方法包括获取待处理音频以及与所述待处理音频相关的参考数据；基于所述待处理音频以及所述参考数据的特征，对所述待处理音频进行目标音频事件检测，确定所述待处理音频中所述目标音频事件的目标音频；利用所述目标音频生成对应的目标触觉反馈内容。在对待处理音频进行目标音频事件检测时，在待处理音频的基础上还结合有参考数据，由于参考数据是与待处理音频对应的，参考数据的特征能够丰富待处理音频的特征信息，从而提高了所识别出的目标音频的准确性，进而能够提高所生成的目标触觉反馈内容的准确性。馈内容的准确性。馈内容的准确性。

【技术实现步骤摘要】
触觉反馈内容的生成方法、装置、电子设备及存储介质


[0001]本公开涉及计算机处理
，具体涉及触觉反馈内容的生成方法、装置、电子设备及存储介质。

技术介绍

[0002]随着线性马达在手机、平板、手柄等设备端的应用，触觉反馈技术变得日益重要。从简单的手机触屏反馈，到游戏手柄的振动反馈，都可以看到触觉反馈技术应用的场景。在虚拟现实/增强现实领域，触觉反馈技术又可以很好地增强用户的沉浸感，达到除视觉、听觉外，包含触觉的更多维度的沉浸式体验。因此，在这一过程中触觉反馈的准确性就显得尤为重要。

技术实现思路

[0003]有鉴于此，本公开实施例提供了一种触觉反馈内容的生成方法、装置、电子设备及存储介质，以解决触觉反馈的准确性问题。
[0004]根据第一方面，本公开实施例提供了一种触觉反馈内容的生成方法，包括：
[0005]获取待处理音频以及与所述待处理音频相关的参考数据；
[0006]基于所述待处理音频以及所述参考数据的特征，对所述待处理音频进行目标音频事件检测，确定所述待处理音频中所述目标音频事件的目标音频；本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种触觉反馈内容的生成方法，其特征在于，包括：获取待处理音频以及与所述待处理音频相关的参考数据；基于所述待处理音频以及所述参考数据的特征，对所述待处理音频进行目标音频事件检测，确定所述待处理音频中所述目标音频事件的目标音频；利用所述目标音频生成对应的目标触觉反馈内容。2.根据权利要求1所述的方法，其特征在于，所述目标音频事件为预设音频事件，所述参考数据包括视频数据以及文本数据中的至少之一，所述基于所述待处理音频以及所述参考数据的特征，对所述待处理音频进行目标音频事件检测，确定所述待处理音频中所述目标音频事件的目标音频，包括：提取所述待处理音频以及所述参考数据的特征，得到第一音频特征以及第一参考特征；将所述第一音频特征与所述第一参考特征进行融合，得到目标特征；基于所述目标特征进行所述预设音频事件的检测，确定所述预设音频事件的目标音频。3.根据权利要求2所述的方法，其特征在于，所述预设音频事件的检测是通过第一音频理解模型实现的，所述第一音频理解模型用于检测所述预设音频事件对应的事件时间或用于检测所述预设音频事件对应的音频。4.根据权利要求1所述的方法，其特征在于，所述目标音频事件是基于所述参考数据的音频事件确定的，所述基于所述待处理音频以及所述参考数据的特征，对所述待处理音频进行目标音频事件检测，确定所述待处理音频中所述目标音频事件的目标音频，包括：提取所述参考数据的特征，得到第二参考特征；基于所述第二参考特征检测所述待处理音频中与所述参考数据的音频事件相同类别的音频，确定所述目标音频。5.根据权利要求4所述的方法，其特征在于，所述参考数据包括参考音频以及其他数据，所述其他数据包括参考视频以及参考文本中的至少之一，所述提取所述参考数据的特征，得到第二参考特征，包括：提取所述参考音频以及所述其他数据的特征，得到参考音频特征以及其他特征；将所述参考音频特征与所述其他特征进行融合，得到所述第二参考特征。6.根据权利要求4所述的方法，其特征在于，所述目标音频事件的检测是通过第二音频理解模型实现的，所述基于所述第二参考特征检测所述待处理音频中与所述参考数据的音频事件相同类别的音频，确定所述目标...

【专利技术属性】
技术研发人员：贡昱洲，徐杨飞，马泽君，
申请(专利权)人：北京有竹居网络技术有限公司，
类型：发明
国别省市：