基于强化学习的隧道地质探测方法、系统、设备及介质技术方案

技术编号:44553430 阅读:12 留言:0更新日期:2025-03-11 14:16
本发明专利技术公开了一种基于强化学习的隧道地质探测方法、系统、设备及介质,包括:获取岩溶隧道的多源探测数据;根据所述多源探测数据、危险源信息、危险源探测准确率设计部分可观察马尔科夫决策过程模型,所述部分可观察马尔科夫决策过程模型中的元素包括状态空间S、动作空间A以及奖励函数R;采用深度确定性策略梯度方法训练所述部分可观察马尔科夫决策过程模型直到所述部分可观察马尔科夫决策过程模型收敛从而得到探测模型;将岩溶隧道当前的状态空间对应的数据输入至所述探测模型中,从而得到岩溶隧道的最佳探测动作。本发明专利技术通过强化学习的方式,完成危险源位置的选择以及下一个探测点位置的选择。

【技术实现步骤摘要】

本专利技术涉及岩溶隧道工程,具体涉及一种基于强化学习的隧道地质探测方法、系统、设备及介质


技术介绍

1、岩溶隧道的施工过程中,隧道结构复杂且环境多变,对溶洞、渗漏水等危险源进行超前地质预报存在巨大挑战。现有方法针对性差,容易受到人员经验和主观性的影响,迫切需要一种能够实时、精确探测危险源的技术手段。


技术实现思路

1、本专利技术提供一种基于强化学习的隧道地质探测方法、系统、设备及介质,以解决上述问题。

2、本专利技术通过下述技术方案实现:

3、一种基于强化学习的隧道地质探测方法,包括:

4、获取岩溶隧道的多源探测数据;

5、根据所述多源探测数据、危险源信息、危险源探测准确率设计部分可观察马尔科夫决策过程模型,所述部分可观察马尔科夫决策过程模型中的元素包括状态空间s、动作空间a以及奖励函数r,通过所述动作空间a对探测动作进行实时智能决策,设置所述奖励函数r为危险源探测准确率以及探测点与危险源之间的距离准确率,所述状态空间s为所述多源探测数据;

6、采本文档来自技高网...

【技术保护点】

1.一种基于强化学习的隧道地质探测方法,其特征在于,包括:

2.根据权利要求1所述的一种基于强化学习的隧道地质探测方法,其特征在于,所述多源探测数据包括隧道底板和掌子面前方的岩溶地质的电磁场、弹性波速场、电流场。

3.根据权利要求2所述的一种基于强化学习的隧道地质探测方法,其特征在于,所述状态空间为,其中,、分别表示隧道底板和掌子面前方的岩溶地质的电磁场,、分别表示隧道底板和掌子面前方的岩溶地质的弹性波速场,、分别表示隧道底板和掌子面前方的岩溶地质的电流场。

4.根据权利要求1所述的一种基于强化学习的隧道地质探测方法,其特征在于,所述动作空间为,其中,...

【技术特征摘要】

1.一种基于强化学习的隧道地质探测方法,其特征在于,包括:

2.根据权利要求1所述的一种基于强化学习的隧道地质探测方法,其特征在于,所述多源探测数据包括隧道底板和掌子面前方的岩溶地质的电磁场、弹性波速场、电流场。

3.根据权利要求2所述的一种基于强化学习的隧道地质探测方法,其特征在于,所述状态空间为,其中,、分别表示隧道底板和掌子面前方的岩溶地质的电磁场,、分别表示隧道底板和掌子面前方的岩溶地质的弹性波速场,、分别表示隧道底板和掌子面前方的岩溶地质的电流场。

4.根据权利要求1所述的一种基于强化学习的隧道地质探测方法,其特征在于,所述动作空间为,其中,表示下一个探测点的位置,表示当前探测点的重点探测区域,其中,,、、分别表示下一个探测点相对于当前探测点在xyz轴上的坐标,即、、为在以当前探测点为原点的坐标系上的xyz坐标,其中,以垂直于所述岩溶隧道的隧道口所在平面的方向为z轴方向,竖向方向为y轴,同时垂直于z轴和y轴的水平方向为x轴,,、、分别表示当前探测点对应的危险源相对于当前探测点在xyz轴上的坐标,即、、为在以当前探测点为原点的坐标系上的xyz坐标,为以危险源为中心的重点探测区域的半径。

5.根据权利要求1所述的一种基...

【专利技术属性】
技术研发人员:袁松王峥峥王希宝闫肃张生邹华周科强尕文赵大权
申请(专利权)人:四川省交通勘察设计研究院有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1