一种基于锁屏状态的音频获取方法、装置和系统制造方法及图纸

本发明专利技术实施例公开了一种基于锁屏状态的音频获取方法、装置和系统方法包括：判定智能设备正在播放音频并处于锁屏状态，则检测所述智能设备的触敏显示器的输入信息；根据所述输入信息生成标识符，将所述标识符与所述智能设备中预存的音频标识信息进行匹配，并播放与所述标识符匹配的预设音频标识信息所对应的音频；判定智能设备未播放音频并处于锁屏状态，则实时录入当前所接收到所有外部音频的旋律信息；获取产生各外部音频的扬声器的基于HOA的第一增益和基于VBAP的第二增益；将多个外部音频的旋律信息进行混音处理，以得到目标外部音频；解决了现有技术中存在的智能设备处于锁屏状态时无法快速、准确获取设备内外音频的问题。

An audio acquisition method, device and system based on screen lock state

【技术实现步骤摘要】
一种基于锁屏状态的音频获取方法、装置和系统
本专利技术实施例涉及音频处理
，具体涉及一种基于锁屏状态的音频获取方法、装置和系统。
技术介绍
随着网络技术的快速发展，现有智能设备的功能越来越强大，用户可以通过智能设备实现视频、音频等播放功能。但是，当智能设备中的应用程序播放音频过程中处于锁屏状态时，用户想要切换音频通常只能完成相邻音频的切换和暂停功能，无法在锁屏界面完成对特定音频的进行搜索和选取，而手动查找音频需要解锁界面并进入播放音频的程序，实现过程较为繁琐。同时，用户在地铁或其他公共场合可能会偶尔听到周围播放一些比较好听的歌曲，现有技术中虽然可以通过录音的方式获取歌曲旋律，从而根据旋律搜索歌曲名称，但是由于公共场合声音较为嘈杂，干扰因素较多，使得声源定位效果不佳。
技术实现思路
为此，本专利技术实施例提供一种基于锁屏状态的音频获取方法、装置和系统，以解决现有技术中存在的智能设备处于锁屏状态时无法快速、准确获取设备内外音频的问题。为了实现上述目的，本专利技术实施例提供如下技术方案：一种基于锁屏状态的音频获取方法，所述方法包括：判定智能设备正在播放音频并处于锁屏状态，则检测所述智能设备的触敏显示器的输入信息；根据所述输入信息生成标识符，将所述标识符与所述智能设备中预存的音频标识信息进行匹配，并播放与所述标识符匹配的预设音频标识信息所对应的音频；判定智能设备未播放音频并处于锁屏状态，则实时录入当前所接收到所有外部音频的旋律信息；获取产生各外部音频的扬声器的基于HOA的第一增益和基于VBAP的第二增益；为各个所述扬声器配置混合权重，并根据所述混合权重确定所述第一增益和所述第二增益的权重系数；根据所述第一增益、所述第二增益以及各自的权重系数，确定各个所述扬声器的混合增益，将多个外部音频的旋律信息进行混音处理，以得到目标外部音频；根据所述目标外部音频生成相应的音频标识信息，基于该音频标识信息从后台服务器系统的数据库获取所述目标外部音频所在的歌曲，并播放所述歌曲。进一步地，还包括：所述标识符与所述智能设备中预存的音频标识信息若匹配成功，则将与所述标识符匹配的预设音频标识信息所对应的音频发送至目标列表；其中，所述目标列表包括音频播放列表或界面显示列表中的至少一种。进一步地，还包括：各个所述扬声器的混合增益按照以下公式确定：gmn(t)＝wn(t)gHOAn(t)+(1-wn(t))gVBAPn(t)其中，gmn(t)表示第n个扬声器的混合增益，wn(t)表示所述混合权重，gHOAn(t)表示第n个扬声器的第一增益，gVBAPn(t)表示第n个扬声器的第二增益，t表示时间。进一步地，为各个所述扬声器配置混合权重包括：获取音频训练样本，并基于多层卷积神经网络和全连接层网络模型对所述音频训练样本进行训练；获取当前扬声器的输入音频，并提取所述输入音频的多声道语谱图；将所述多声道语谱图输入训练后的模型，并将所述训练后的模型输出的结果作为所述当前扬声器的混合权重。进一步地，所述多层卷积神经网络用于从所述多声道语谱图中提取特征信息，并且所述卷积神经网络中的卷积层和池化层用于响应所述特征信息的平移不变性。进一步地，还包括：构建包括所述预设音频标识信息和音频信息索引组合，并存储至服务器系统的数据库或所述设备内的存储系统中；其中，所述音频信息包括音频标题信息、音频内容信息以及音频曲调信息中的至少一种；利用所述索引组合中所述预设音频标识信息和所述根据输入信息生成的音频标识信息之间的对应关系，查找与所述预设音频标识信息对应的音频信息。进一步地，所述标识符包括音频首字母信息、音频关键字信息以及音频曲调信息中的至少一种。本专利技术还提供一种基于锁屏状态的音频获取装置，所述装置包括：第一检测单元，用于判定智能设备正在播放音频并处于锁屏状态，则检测所述智能设备的触敏显示器的输入信息；第一控制单元，用于根据所述输入信息生成标识符，将所述标识符与所述智能设备中预存的音频标识信息进行匹配，并播放与所述标识符匹配的预设音频标识信息所对应的音频；第二检测单元，用于判定智能设备未播放音频并处于锁屏状态，则实时录入当前所接收到所有外部音频的旋律信息；增益单元，用于获取产生各外部音频的扬声器的基于HOA的第一增益和基于VBAP的第二增益；为各个所述扬声器配置混合权重，并根据所述混合权重确定所述第一增益和所述第二增益的权重系数；根据所述第一增益、所述第二增益以及各自的权重系数，确定各个所述扬声器的混合增益，将多个外部音频的旋律信息进行混音处理，以得到目标外部音频；第二控制单元，用于根据所述目标外部音频生成相应的音频标识信息，基于该音频标识信息从后台服务器系统的数据库获取所述目标外部音频所在的歌曲，并播放所述歌曲。本专利技术还提供一种基于锁屏状态的音频获取系统，所述系统包括：处理器和存储器；所述存储器用于存储一个或多个程序指令；所述处理器，用于运行一个或多个程序指令，用以执行如上所述的方法。本专利技术还提供一种计算机存储介质，所述计算机存储介质中包含一个或多个程序指令，所述一个或多个程序指令用于被一种基于锁屏状态的音频获取系统执行如上所述的方法。采用本专利技术所提供的基于锁屏状态的音频获取方法、装置和系统，能够在设备锁频状态下通过预先建立的音频标识信息快速、准确切换至满足用户要求音频信息，避免了锁频状态下切换音频时繁琐的操作步骤，从而提高了用户的使用体验；同时，基于HOA和对象音频技术，根据外部音频内容自适应选择最优的处理方式，对外部多个音频进行处理，在多种音频混杂的情况下更精准定位声源位置。这样，既能够在锁屏状态获取内部音频，又能够精准获取外部音频，从而解决了现有技术中存在的智能设备处于锁屏状态时无法快速、准确获取设备内外音频的问题。附图说明为了更清楚地说明本专利技术的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引伸获得其它的实施附图。本说明书所绘示的结构、比例、大小等，均仅用以配合说明书所揭示的内容，以供熟悉此技术的人士了解与阅读，并非用以限定本专利技术可实施的限定条件，故不具技术上的实质意义，任何结构的修饰、比例关系的改变或大小的调整，在不影响本专利技术所能产生的功效及所能达成的目的下，均应仍落在本专利技术所揭示的
技术实现思路
得能涵盖的范围内。图1为本专利技术实施例提供的一种基于锁屏状态的音频获取方法的流程图；图2为本专利技术实施例提供的一种基于锁屏状态的音频获取装置的示意图图；图3为本专利技术实施例提供的一种包含基于锁屏状态的音频获取方法的应用程序的应用示意图。附图标记说明：100-第一检测单元200-第一控制单元300-第二检测单元本文档来自技高网...

【技术保护点】
1.一种基于锁屏状态的音频获取方法，其特征在于，所述方法包括：/n判定智能设备正在播放音频并处于锁屏状态，则检测所述智能设备的触敏显示器的输入信息；/n根据所述输入信息生成标识符，将所述标识符与所述智能设备中预存的音频标识信息进行匹配，并播放与所述标识符匹配的预设音频标识信息所对应的音频；/n判定智能设备未播放音频并处于锁屏状态，则实时录入当前所接收到所有外部音频的旋律信息；/n获取产生各外部音频的扬声器的基于HOA的第一增益和基于VBAP的第二增益；为各个所述扬声器配置混合权重，并根据所述混合权重确定所述第一增益和所述第二增益的权重系数；根据所述第一增益、所述第二增益以及各自的权重系数，确定各个所述扬声器的混合增益，将多个外部音频的旋律信息进行混音处理，以得到目标外部音频；/n根据所述目标外部音频生成相应的音频标识信息，基于该音频标识信息从后台服务器系统的数据库获取所述目标外部音频所在的歌曲，并播放所述歌曲。/n

【技术特征摘要】
1.一种基于锁屏状态的音频获取方法，其特征在于，所述方法包括：
判定智能设备正在播放音频并处于锁屏状态，则检测所述智能设备的触敏显示器的输入信息；
根据所述输入信息生成标识符，将所述标识符与所述智能设备中预存的音频标识信息进行匹配，并播放与所述标识符匹配的预设音频标识信息所对应的音频；
判定智能设备未播放音频并处于锁屏状态，则实时录入当前所接收到所有外部音频的旋律信息；
获取产生各外部音频的扬声器的基于HOA的第一增益和基于VBAP的第二增益；为各个所述扬声器配置混合权重，并根据所述混合权重确定所述第一增益和所述第二增益的权重系数；根据所述第一增益、所述第二增益以及各自的权重系数，确定各个所述扬声器的混合增益，将多个外部音频的旋律信息进行混音处理，以得到目标外部音频；
根据所述目标外部音频生成相应的音频标识信息，基于该音频标识信息从后台服务器系统的数据库获取所述目标外部音频所在的歌曲，并播放所述歌曲。


2.根据权利要求1所述的基于锁屏状态的音频获取方法，其特征在于，还包括：
所述标识符与所述智能设备中预存的音频标识信息若匹配成功，则将与所述标识符匹配的预设音频标识信息所对应的音频发送至目标列表；其中，所述目标列表包括音频播放列表或界面显示列表中的至少一种。


3.根据权利要求1所述的基于锁屏状态的音频获取方法，其特征在于，还包括：
各个所述扬声器的混合增益按照以下公式确定：
gmn(t)＝wn(t)gHOAn(t)+(1-wn(t))gVBAPn(t)
其中，gmn(t)表示第n个扬声器的混合增益，wn(t)表示所述混合权重，gHOAn(t)表示第n个扬声器的第一增益，gVBAPn(t)表示第n个扬声器的第二增益，t表示时间。


4.根据权利要求3所述的基于锁屏状态的音频获取方法，其特征在于，为各个所述扬声器配置混合权重包括：
获取音频训练样本，并基于多层卷积神经网络和全连接层网络模型对所述音频训练样本进行训练；
获取当前扬声器的输入音频，并提取所述输入音频的多声道语谱图；
将所述多声道语谱图输入训练后的模型，并将所述训练后的模型输出的结果作为所述当前扬声器的混合权重。


5.根据权利要求4所述的基于锁屏状态的音频获取方法，其特征在于，所述多层卷积神经网络用于从所述多声道语谱图...

【专利技术属性】
技术研发人员：乔会君，钱萌，
申请(专利权)人：洪泰智造青岛信息技术有限公司，
类型：发明
国别省市：山东;37