【技术实现步骤摘要】
本专利技术涉及建筑施工指挥沟通领域，具体而言，涉及一种基于智能语音交互的建筑施工指挥沟通系统。
技术介绍
1、在传统的建筑施工指挥过程中，主要依赖于人工沟通和现场监控，然而这种方式存在诸多问题，如沟通效率低下、信息传递不准确，甚至存在安全隐患；随着科技的飞速发展，尤其是语音识别、自然语言处理、增强现实等技术的日新月异，建筑施工指挥领域也开始寻求技术的融合与创新，以提升施工指挥的效率和安全性；然而，目前市场上的技术方案大多只集中在单一或少数几个技术的集成上，缺乏一个全面、智能、个性化且安全的建筑施工指挥系统；这种局限性使得现有的技术方案无法满足现代建筑施工指挥的复杂需求，特别是在处理多语言沟通、理解复杂语义、提供直观视觉指引以及确保用户反馈机制方面存在明显短板。
2、例如：中国专利技术专利（申请号：cn110288993a）所公开的“一种基于容器技术的个性化智能语音交互方法及装置”，其说明书公开：智能语音交互系统，是通过asr语音识别将用户的声音转化成文字的形式，然后使用nlp自然语言处理技术理解语义，得出最合适的回答，以此达到与用户的交互。现有的技术有些使用同一个语言模型处理不同用户的对话，有些使用不同的语言模型，但是使用同一个分词器对对话文本进行分词。现有的技术存在以下缺点：1、首先，使用同一个语言模型无法针对不同的用户做个性化的处理，无法优化语言交互的效果。2、其次，如果使用不同的语言模型，但是因为分词器相同，则无法对一些特殊场景的词语进行正确分词。比如：“我们是建筑行业的，不需要你们提供的数据”这句话里面“建筑
3、因此我们对此做出改进，提出一种基于智能语音交互的建筑施工指挥沟通系统。
技术实现思路
1、本专利技术的目的在于：针对目前市场上的技术方案大多只集中在单一或少数几个技术的集成上，缺乏一个全面、智能、个性化且安全的建筑施工指挥系统；这种局限性使得现有的技术方案无法满足现代建筑施工指挥的复杂需求，特别是在处理多语言沟通、理解复杂语义、提供直观视觉指引以及确保用户反馈机制方面存在明显短板。
2、为了实现上述专利技术目的，本专利技术提供了基于智能语音交互的建筑施工指挥沟通系统，以改善上述问题。
3、本申请具体是这样的：包括：
4、语音识别单元：用于将语音信号转换为文本，实现语音到文本的转换；
5、语言处理单元：用于对转换后的文本进行理解和处理，包括分词、词性标注、句法分析与语义理解，以提取关键信息和意图；
6、情感分析单元：用于分析语音中的情感信息，包括积极、消极与紧急，以辅助判断沟通内容的紧迫性和重要性；
7、语言翻译单元：用于将一种语言的语音信号转换为另一种语言的文本或语音，实现多语言环境下的有效沟通；
8、现实显示单元：用于将沟通信息以增强现实的形式显示在施工现场，提供直观的视觉辅助和指引；
9、所述现实显示单元具体包括：
10、无人机控制模块：利用无人机，采集建筑施工现场的图片以及视频，通过特征提取技术对所采集的图像以及视频进行处理，并通过数传电台通信技术，对处理后的图像以及视频进行传输；
11、ar显示模块：接收来自无人机控制模块处理后的图像以及视频信息，并对其进行二次处理，并对处理后的数据进行再次传输，同时对语音识别单元、语言处理单元、情感分析单元与语言翻译单元输出的信息进行展示；
12、危险预测模块：利用危险识别与机器深度学习技术，对ar显示模块传输的数据进行处理，从而进行风险评估，并配合ar显示模块对评估的结果进行展示与播报。
13、作为本申请优选的技术方案，所述无人机控制模块具体采用pid控制算法控制无人机飞行，且所述pid控制算法的算法公式为：
14、位置式pid：u(t)=kp×e(t)+ki×∫0te(τ)dτ+kd×de(t)/dt；
15、其中u(t)是时间t处的控制器输出；kp、ki和kd分别是比例、积分和微分增益；e(t)是时间t处的偏差，定义为设定点与过程变量之差：e(t)=sp−pv；∫0te(τ)dτ是偏差随时间的积分，从0到当前时间t；de(t)/dt是偏差随时间的变化率，即当前偏差与上次偏差之差除以时间间隔；
16、增量式pid：pid输出(n)=kp×当前偏差(n)+ki×∑i=0n偏差(i)+kd×[当前偏差(n)−上次偏差(n−1)]；
17、其中，kd×[当前偏差(n)−上次偏差(n−1)]是比例项的变化量；ki×∑i=0n偏差(i)是积分项的变化量，kp×当前偏差(n)是微分项的变化量。
18、作为本申请优选的技术方案，所述ar显示模块具体采用sift算法以及surf算法配合边缘检测技术，对图像进行二次处理，所述边缘检测技术的具体算法公式为：
19、gx=∑u=−11∑v=−11i(x+u、y+v)×sobelx(u+1、v+1)；
20、gy=∑u=−11∑v=−11i(x+u、y+v)×sobely(u+1、v+1)；
21、其中sobelx和sobely是固定的3x3矩阵，gx和gy分别是图像在x方向和y方向上的梯度；i(x+u、y+v)表示图像在点（x+u、y+v）处的强度，sobelx(u+1、v+1)和sobely（u+1、v+1）分别是sobel算子在x方向和y方向上的分量。
22、作为本申请优选的技术方案，所述危险预测模块中的危险识别与机器深度学习具体通过卷积神经网络与循环神经网络及其变体技术优化目标函数实现危险的识别，所述卷积神经网络的具体算法公式为：
23、s(i、j)=(i∗k)(i、j)=∑m∑ni(i−m、j−n)k(m、n)；
24、其中s（i、j）是输出信号或图像在位置（i、j）的值，i是输入信号或图像，k是卷积核；符号∗表示卷积操作；i(i−m、j−n)表示输入信号或图像在位置（i−m、j−n）的值；k(m、n)表示卷积核在位置（m、n）的值；∑m∑n是双重求和符号，意味着对卷积核的所有位置（m、n）进行遍历，并将乘积i(i−m、j−n)k(m、n)累加起来；
25、所述循环神经网络及其变体的具体算法公式为：
26、隐藏层状态计算：st=f(uxt+wst−1+b)；
27、其中st是当前时间步的隐藏状态，xt是当前时间步的输入，u是输入层到隐藏层的权重矩阵，w是上一时间步隐藏层到当前时间步隐藏层的权重矩阵，b是偏置向量，f是激活函数，st−1是前一个时间步的隐藏状态；
28、所述风险评估具体采用概率本文档来自技高网...
【技术保护点】
1.一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，包括：
2.根据权利要求1所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述无人机控制模块具体采用PID控制算法控制无人机飞行，且所述PID控制算法的算法公式为：
3.根据权利要求2所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述AR显示模块具体采用SIFT算法以及SURF算法配合边缘检测技术，对图像进行二次处理，所述边缘检测技术的具体算法公式为：
4.根据权利要求3所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述危险预测模块中的危险识别与机器深度学习具体通过卷积神经网络与循环神经网络及其变体技术优化目标函数实现危险的识别，所述卷积神经网络的具体算法公式为：
5.根据权利要求4所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述情感分析单元具体包括如下步骤：
6.根据权利要求5所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述步骤一中的预处理包括去噪以及归一化，且其算法公式分别为：
7.根据权利要求6所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述步骤三中的支持向量机其具体的决策函数表示为：
8.根据权利要求7所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述语音识别单元具体采用隐马尔可夫模型配合深度神经网络技术，建立语言模型，从而对捕捉的声音进行合成以及生成，所述隐马尔可夫模型的具体算法公式为：
9.根据权利要求8所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述语言处理单元具体采用TF-IDF方式：用于评估一个词语对于一个文件集与一个语料库中的其中一份文件的重要程度；TF和IDF的计算公式如下：
10.根据权利要求9所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述语言翻译单元具体采用统计机器翻译与神经机器翻译，
...【技术特征摘要】
1.一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，包括：
2.根据权利要求1所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述无人机控制模块具体采用pid控制算法控制无人机飞行，且所述pid控制算法的算法公式为：
3.根据权利要求2所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述ar显示模块具体采用sift算法以及surf算法配合边缘检测技术，对图像进行二次处理，所述边缘检测技术的具体算法公式为：
4.根据权利要求3所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述危险预测模块中的危险识别与机器深度学习具体通过卷积神经网络与循环神经网络及其变体技术优化目标函数实现危险的识别，所述卷积神经网络的具体算法公式为：
5.根据权利要求4所述的一种基于智能语音交互的建筑施工指挥沟通系统，其特征在于，所述情感分析单元具体包括如下步骤：
6.根据权利要求5所述的...
【专利技术属性】
技术研发人员：罗健，冉强，吴涛，朱向荣，张强，苟春波，杜俊，孙敏，黄志强，杨坤浩，
申请(专利权)人：成都太阳高科技有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。