一种基于在线强化学习的血糖调控方法技术

本发明专利技术提供了一种基于在线强化学习的血糖调控方法，将血糖调控问题形式化为多臂老虎机框架，并利用核心控制算法CNUCB算法，即一种带有保守探索机制的神经老虎机算法构建个性化血糖调控模型，患者的生理状态即为状态信息，血糖调控药物及用量即为动作，而用药后患者的血糖均值即为评估指标转化为奖励反馈给算法。本发明专利技术所述的基于在线强化学习的血糖调控方法为糖尿病患者推荐个性化血糖调控方案，最大程度帮助患者血糖维持在目标范围内；扩展一般人工胰岛框架提高模型精确性；引入保守探索机制，实现对模型安全性的保障；引入深度神经上下文学习，增强对数据的拟合能力。

【技术实现步骤摘要】

本专利技术涉及血糖调控，特别涉及一种基于在线强化学习的血糖调控方法。

技术介绍

1、糖尿病（diabetes mellitus， dm）是一种由多因素引起且无法根治的慢性病，其主要特点是高血糖、糖尿。近年来，人们生活质量逐渐提高、生活节奏不断加快，导致生活方式不健康化程度加剧，全球糖尿病的发病率随之迅速增长。糖尿波已经成为了慢性病中严重威胁人类生活及健康的一大疾病。

2、糖尿病的治疗目标是控制血糖水平以保证患者良好的生活质量，目前主要有四种调控方法：

3、1、传统治疗方法。目前中国糖尿病主要治疗模式是通过医生根据随机临床试验结果、治疗指南和医生自身的经验定期定量为患者注射胰岛素来实现，当患者的血糖值可控后，患者可以自行注射胰岛素进行自我管理。患者需学会定期自行监测血糖，根据情况及时调整治疗方案，促使血糖达标。

4、2、基于生理模型的方法。生理模型利用了有关于血糖-胰岛素系统生理原理的先验知识，bergman 最小模型 (bergman minimal model，bmm) 是迄今为止应用最广泛的模型。该模型运用了常微分方本文档来自技高网...

【技术保护点】

1.一种基于在线强化学习的血糖调控方法，其特征在于：将血糖调控问题形式化为多臂老虎机框架，并利用核心控制算法CNUCB算法，即一种带有保守探索机制的神经老虎机算法构建个性化血糖调控模型，患者的生理状态即为状态信息，血糖调控药物及用量即为动作，而用药后患者的血糖均值即为评估指标转化为奖励反馈给算法；

2.所述CNUCB算法包括：保守探索机制和神经上下文学习；

3.根据权利要求1所述的基于在线强化学习的血糖调控方法，其特征在于：

4.其中，保守系数，越小表示算法的保守程度越高，更偏向选择 基线政策；

5.其中，是上下文信息中的当前血糖值，是胰岛...

【技术特征摘要】

1.一种基于在线强化学习的血糖调控方法，其特征在于：将血糖调控问题形式化为多臂老虎机框架，并利用核心控制算法cnucb算法，即一种带有保守探索机制的神经老虎机算法构建个性化血糖调控模型，患者的生理状态即为状态信息，血糖调控药物及用量即为动作，而用药后患者的血糖均值即为评估指标转化为奖励反馈给算法；

2.所述cnucb算法包括：保守探索机制和神经上下文学习；

3.根据权利要求1所述的基于在线强化学习的血糖调控方法，其特征在于：

4.其中，保守系数，越小表示算法的保守程度越高，更偏向选择 基线政策；

5.其中，是上下...

【专利技术属性】
技术研发人员：江琳艺，何丽莉，白洪涛，张乐佳，韩欣悦，贾宁霞，
申请(专利权)人：吉林大学，
类型：发明
国别省市：