System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及物联网领域,尤其涉及基于通讯标识信息的物联网通信平台和物联网通信方法。
技术介绍
1、物联网(internet ofthings,iot)是指通过互联网将各种智能设备和服务连接起来,实现信息的交换和共享的一种技术。物联网通信是指物联网中设备和服务之间的数据传输和交互的过程,它是物联网的核心和基础。物联网通信平台是指提供物联网通信服务的平台,它可以实现物联网设备和服务的发现、连接、认证、授权、管理、优化等功能,保障物联网通信的安全性、可靠性、效率和灵活性。
2、通讯标识信息是一种用于标识物联网设备和服务的信息,它包括设备标识、服务标识、位置标识等。通讯标识信息可以用于实现物联网设备和服务的定位和识别,提高物联网通信的精确性和个性化。
3、中国专利cn103685467b公开了一种物联网互联互通平台及其通信方法,其将位于全球各区域的智能设备通过门户服务器接入平台,与平台上的代理设备或接入平台的其他智能设备通信,通过该平台可以将无穷多个智能设备统一接入互联网。但是上述平台还存在以下不足:物联网设备和服务的数量和类型日益增多,导致物联网通信的复杂度和难度增加,需要更高效和智能的通信管理和优化方法,对于物联网设备的通信数据缺乏文本及语音内容的智能识别,无法准确且自动地识别用户需求,无法实现对用户的个性化和智能化的服务,降低用户体验和满意度。
4、针对相关技术中的问题,目前尚未提出有效的解决方案。
技术实现思路
1、有鉴于此,本申请实施例的目的
2、为此,本专利技术采用的具体技术方案如下:
3、根据本专利技术的一个方面,提供了基于通讯标识信息的物联网通信平台,该基于通讯标识信息的物联网通信平台包括物联网设备、云端服务器、设备智能管理模块、应用服务器、网络服务器及档案信息管理器。
4、其中,物联网设备,用于收集各种类型的数据,并将数据转换为数字信号。
5、云端服务器,用于对转化为数字信号的数据进行存储、分析、处理及展示,并提供服务及应用。
6、设备智能管理模块,用于对物联网设备进行智能化的管理。
7、应用服务器,用于通过若干方式与物联网设备交换通信数据。
8、网络服务器,用于接收、处理和转发应用服务器发送的通信数据。
9、档案信息管理器,用于存储和管理预设通讯标识信息的数据库,根据不同的通讯标识信息将通信数据分配给相应的网络服务器。
10、可选地,设备智能管理模块包括指令获取模块、词义提取模块、语音特征提取模块、分类模块及情感识别模块;
11、其中,指令获取模块,用于获取用户与物联网设备的若干轮对话信息,并提取若干轮对话信息对应的n条对话指令,其中,对话指令是指用户通过语音和文本输入的表达需求的语句或命令;
12、词义提取模块,用于从对话指令中提取文本内容,并利用词嵌入技术将文本内容转换为词向量;
13、语音特征提取模块,用于利用压缩时延网络从对话指令中提取出语音特征,并与相应的词向量组合为混合特征;
14、分类模块,用于通过卷积神经网络根据预先设定的关键词库进行语音关键点定位并给出需求分类结果;
15、情感识别模块,用于对混合特征的情感进行识别。
16、可选地,词义提取模块包括文本提取模块、词嵌入模块及语义拼接模块;
17、其中,文本提取模块,用于使用分词技术,将文本内容切分为若干单个词语;
18、词嵌入模块,用于使用词嵌入技术,将每个词语映射为一个高维稠密向量,并表示语义信息;
19、语义拼接模块,用于将所有表示语义信息的词向量拼接为固定长度的向量,作为文本内容的向量表示。
20、可选地,语音特征提取模块包括语音特征提取模块、能量谱获取模块、滤波模块、语音拼接模块及混合模块;
21、其中,语音特征提取模块,用于从对话指令中提取出语音特征,并将语音特征分割为固定长度的帧,且每帧包含若干数量的采样点;
22、能量谱获取模块,用于对每帧语音特征进行快速傅里叶变换,得到频域上的能量谱;
23、滤波模块,用于对能量谱进行滤波器组处理,得到梅尔频率倒谱系数作为语音信号的特征向量;
24、语音拼接模块,用于将相邻的若干梅尔频率倒谱系数特征向量拼接为一个高维向量,并输入到压缩时延网络中;
25、混合模块,用于将压缩时延网络的输出作为语音特征,并与文本内容的向量表示进行拼接,得到混合特征。
26、可选地,分类模块中,卷积神经网络用于处理混合特征,且通过卷积层学习混合特征,通过全连接层将混合特征映射为需求分类结果。
27、可选地,情感识别模块包括图构造模块、优化模块及情感预测模块;
28、其中,图构造模块,用于利用语音特征及文本内容构造两个图结构,并分别表示声学模态及文本模态;
29、优化模块,用于利用gcn深度学习模型对文本内容和声学特征进行优化、重构和融合,得到最终的融合图;
30、情感预测模块,用于利用图增强和图卷积网络对融合后的图进行节点标签预测,实现语音情感识别。
31、可选地,图构造模块包括语音特征图构建模块及文本内容图构建模块;
32、其中,语音特征图构建模块,用于通过语音特征构建语音特征图结构,其中,语音特征图结构g=(v,a),v表示语音特征的节点集合,a表示语音特征的邻接矩阵,其元素为两个节点之间的相似度;
33、相似度计算公式为:
34、
35、式中,ai及aj分别表示第i个及第j个语音特征向量;
36、||ai-aj||μ表示欧几里德距离,μ是所有语音特征的欧几里德距离均值,d表示一个尺度参数,exp表示指数函数。
37、文本内容图构建模块,用于通过文本内容构建文本内容图结构,且定义文本内容的节点集合及文本内容的邻接矩阵。
38、可选地,优化模块包括预处理模块、重构模块及多模态特征融合模块;
39、其中,预处理模块,用于利用gcn深度学习模型对文本内容构建的图进行节点特征优化,并对文本内容的邻接矩阵进行归一化处理,且得到优化后的文本内容表示;
40、重构模块,用于利用gcn深度学习模型的第二个隐藏层的节点特征对基于文本内容和基于声学特征的邻接矩阵进行重构,得到重构后的文本内容邻接矩阵及声学特征邻接矩阵,同时将文本内容邻接矩阵及声学特征邻接矩阵进行融合,得到融合后邻接矩阵;
41、多模态特征融合模块,用于利用重构优化后的文本内容与未优化的声学特征进行融合,得到最终的融合特征,且通过融合后邻接矩阵及最终的融合特征构造最终的融合图。
42、可选地,情感预测模块包括图增强模块及标签预测模块;
43本文档来自技高网...
【技术保护点】
1.基于通讯标识信息的物联网通信平台,其特征在于,该基于通讯标识信息的物联网通信平台包括物联网设备、云端服务器、设备智能管理模块、应用服务器、网络服务器及档案信息管理器;
2.根据权利要求1所述的基于通讯标识信息的物联网通信平台,其特征在于,所述设备智能管理模块包括指令获取模块、词义提取模块、语音特征提取模块、分类模块及情感识别模块;
3.根据权利要求2所述的基于通讯标识信息的物联网通信平台,其特征在于,所述词义提取模块包括文本提取模块、词嵌入模块及语义拼接模块;
4.根据权利要求3所述的基于通讯标识信息的物联网通信平台,其特征在于,所述语音特征提取模块包括语音特征提取模块、能量谱获取模块、滤波模块、语音拼接模块及混合模块;
5.根据权利要求4所述的基于通讯标识信息的物联网通信平台,其特征在于,所述分类模块中,卷积神经网络用于处理混合特征,且通过卷积层学习混合特征,通过全连接层将混合特征映射为需求分类结果。
6.根据权利要求5所述的基于通讯标识信息的物联网通信平台,其特征在于,所述情感识别模块包括图构造模块、优化模块及情
7.根据权利要求6所述的基于通讯标识信息的物联网通信平台,其特征在于,所述图构造模块包括语音特征图构建模块及文本内容图构建模块;
8.根据权利要求7所述的基于通讯标识信息的物联网通信平台,其特征在于,所述优化模块包括预处理模块、重构模块及多模态特征融合模块;
9.根据权利要求8所述的基于通讯标识信息的物联网通信平台,其特征在于,所述情感预测模块包括图增强模块及标签预测模块;
10.基于通讯标识信息的物联网通信方法,应用于权利要求1-9任一项所述的基于通讯标识信息的物联网通信平台,其特征在于,该基于通讯标识信息的物联网通信方法包括以下步骤:
...【技术特征摘要】
1.基于通讯标识信息的物联网通信平台,其特征在于,该基于通讯标识信息的物联网通信平台包括物联网设备、云端服务器、设备智能管理模块、应用服务器、网络服务器及档案信息管理器;
2.根据权利要求1所述的基于通讯标识信息的物联网通信平台,其特征在于,所述设备智能管理模块包括指令获取模块、词义提取模块、语音特征提取模块、分类模块及情感识别模块;
3.根据权利要求2所述的基于通讯标识信息的物联网通信平台,其特征在于,所述词义提取模块包括文本提取模块、词嵌入模块及语义拼接模块;
4.根据权利要求3所述的基于通讯标识信息的物联网通信平台,其特征在于,所述语音特征提取模块包括语音特征提取模块、能量谱获取模块、滤波模块、语音拼接模块及混合模块;
5.根据权利要求4所述的基于通讯标识信息的物联网通信平台,其特征在于,所述分类模块中,卷积神经网络用于处理混合特征,且...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。