基于强化学习的移动设备异构网络接入方法、装置及设备制造方法及图纸

本申请提供一种基于强化学习的移动设备异构网络接入方法、装置及设备，该方法包括：获取多个候选参数集合，所述候选参数集合包括一个候选网络、一个候选带宽和一个候选功率；针对每个候选参数集合：基于所述候选参数集合确定移动设备对应的用户奖励值和候选网络对应的网络奖励值；基于所述用户奖励值和所述网络奖励值确定所述候选参数集合对应的目标奖励值；基于每个候选参数集合对应的目标奖励值，从多个候选参数集合中选取一个候选参数集合，基于该候选参数集合确定移动设备接入的目标网络、移动设备采用的目标功率、目标网络为移动设备分配的目标带宽。通过本申请的技术方案，通过异构网络支持物联网设备的连接，满足物联网设备的需求。

【技术实现步骤摘要】

本申请涉及网络资源分配，尤其是涉及一种基于强化学习的移动设备异构网络接入方法、装置及设备。

技术介绍

1、物联网（internet of things，简称iot）是指通过各种信息传感器、射频识别技术、全球定位系统、红外感应器、激光扫描器等各种装置与技术，实时采集任何需要连接、互动的物体或过程，采集声、光、热、电、力学、化学、生物、位置等信息，通过各类可能的网络接入，实现物与物、物与人的泛在连接，实现对物品和过程的智能化感知、识别和管理。物联网是基于互联网、电信网等的信息承载体，让所有能够被独立寻址的普通物理对象形成互联互通的网络。

2、物联网中的所有设备均可以为物联网设备，物联网设备可以包括智能家居设备（如智能音箱、智能扫地机器人、智能家居网关等）、工业智能网关、生命安全设备、车联网设备等。随着物联网的快速发展，物联网设备的数量越来越多，大量物联网设备需要接入网络，大规模的物联网设备给网络架构带来巨大负担，无法支持大规模物联网设备的连接，无法满足物联网设备的各种需求。

技术实现思路>

1、有鉴于此本文档来自技高网...

【技术保护点】

1.一种基于强化学习的移动设备异构网络接入方法，其特征在于，应用于服务器，所述服务器用于为移动设备分配接入网络，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，

3.根据权利要求2所述的方法，其特征在于，所述基于移动设备与所述第二中间网络列表中每个网络的网络属性偏好，从所述第二中间网络列表中去除第三类网络得到候选网络列表之前，所述方法还包括：

4.根据权利要求1所述的方法，其特征在于，

5.根据权利要求4所述的方法，其特征在于，

6.根据权利要求4所述的方法，其特征在于，所述基于所述估计能耗参数、所述预期时延参数和所述...

【技术特征摘要】

1.一种基于强化学习的移动设备异构网络接入方法，其特征在于，应用于服务器，所述服务器用于为移动设备分配接入网络，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，

3.根据权利要求2所述的方法，其特征在于，所述基于移动设备与所述第二中间网络列表中每个网络的网络属性偏好，从所述第二中间网络列表中去除第三类网络得到候选网络列表之前，所述方法还包括：

4.根据权利要求1所述的方法，其特征在于，

5.根据权利要求4所述的方法，其特征在于，

6.根据权利要求4所述的方法，其特征在于，所述基于所述估计能耗参数、所述预期时延参数和所述成本参数确定所述移动设备的网络评估参数，包括：

7.根据权利要求4所述的方法，其特征在于，

8.根据权利要求7所...

【专利技术属性】
技术研发人员：王滨，赵海涛，王星，王琴，刘颖，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：