声音可视化方法及装置、存储介质、MR混合现实设备制造方法及图纸

本发明专利技术公开了一种声音可视化方法及装置、存储介质、MR混合现实设备，所述方法包括：实时监测目标环境中的声音信号，其中，所述目标环境为MR混合现实设备所在环境；将监测到的声音信号与预存的多种参考声音进行对比，根据对比结果确定监测到的声音信号所属的类型；从监测到的声音信号中筛选出待转换的声音信号；根据监测到的声音信号的类型，将待转换的声音信号转换成与其内容对应的可视化信息，并将该可视化信息与现实场景融合显示，将声音可视化与MR混合现实技术结合起来，能够在现实场景中呈现可视化信息，在不影响听障人士的现实生活的前提下，还能够帮助听障人士感受周围环境的声音。

【技术实现步骤摘要】
声音可视化方法及装置、存储介质、MR混合现实设备
本专利技术属于声音识别与转换应用
，具体涉及一种声音可视化方法及装置、存储介质、MR混合现实设备。
技术介绍
MR混合现实技术是一种将物理现实与数字世界相互混合的技术，此技术实现了对人所处真实世界中的位置数据的捕获，并包括对其边界和表面通过空间映射和理解实现的位置、照明、声音、定位以及对象识别等。之后，通过将计算机处理、人类输入和环境输入这三方面结合起来，就能创建出混合的世界，并让外人在其中感受到沉浸式的混合现实体验了。经检索，公开号为CN109308282A的专利属于该领域的专利技术。该专利技术阐述了一种运用在MR混合现实设备上的并行架构方法及装置，采用中央处理器、图形图像处理器、可重构处理器组合的异构并行形式，利用可重构处理器的高并发、低功耗、可重构的特点实现对数据流的高速处理，使得MR混合现实设备显示的画面能够更实时，提升用户体验。目前，市面上已有MR混合现实设备，例如MR穿戴设备，穿戴者可以感受到虚拟的影像在现实生活中的投射。目前，听障人士无法听到声音，无法本文档来自技高网...

【技术保护点】
1.一种声音可视化方法，应用于MR混合现实设备，其特征在于，包括以下步骤：/n实时监测目标环境中的声音信号，其中，所述目标环境为MR混合现实设备所在环境；/n将监测到的声音信号与预存的多种参考声音进行对比，根据对比结果确定监测到的声音信号所属的类型；/n从监测到的声音信号中筛选出待转换的声音信号；/n根据监测到的声音信号的类型，将待转换的声音信号转换成与其内容对应的可视化信息，并将该可视化信息与现实场景融合显示。/n

【技术特征摘要】
1.一种声音可视化方法，应用于MR混合现实设备，其特征在于，包括以下步骤：
实时监测目标环境中的声音信号，其中，所述目标环境为MR混合现实设备所在环境；
将监测到的声音信号与预存的多种参考声音进行对比，根据对比结果确定监测到的声音信号所属的类型；
从监测到的声音信号中筛选出待转换的声音信号；
根据监测到的声音信号的类型，将待转换的声音信号转换成与其内容对应的可视化信息，并将该可视化信息与现实场景融合显示。


2.根据权利要求1所述的方法，其特征在于，从监测到的声音信号中筛选出待转换的声音信号，包括以下步骤：
从监测到的声音信号中筛选出音量超过预设阈值的声音信号，作为待转换的声音信号。


3.根据权利要求1所述的方法，其特征在于，从监测到的声音信号中筛选出待转换的声音信号，包括以下步骤：
根据监测到的声音信号的类型，判断监测到的声音信号中是否存在用于提示危险情况的声音；
当监测到的声音信号中存在用于提示危险情况的声音时，将用于提示危险情况的声音作为待转换的声音信号；
当监测到的声音信号中不存在用于提示危险情况的声音时，从监测到的声音信号中筛选出音量超过预设阈值的声音信号，作为待转换的声音信号。


4.根据权利要求1所述的方法，其特征在于，当监测到的声音信号的类型为音乐时，可视化信息为带有歌词和/或带有音乐波形节奏跳动的视频。


5.根据权利要求1...

【专利技术属性】
技术研发人员：谢迪，
申请(专利权)人：珠海格力电器股份有限公司，
类型：发明
国别省市：广东;44