基于Q学习的CDMA/WLAN异构网络接入控制算法*

2016-11-30 07:44:10刘惠茹徐玉滨
通信技术 2016年8期
关键词:动作用户系统

刘惠茹,马 琳,徐玉滨

(1.北京机电工程研究所,北京 100074;2.哈尔滨工业大学 通信技术研究所,黑龙江 哈尔滨 150080)

基于Q学习的CDMA/WLAN异构网络接入控制算法*

刘惠茹1,马 琳2,徐玉滨2

(1.北京机电工程研究所,北京 100074;2.哈尔滨工业大学 通信技术研究所,黑龙江 哈尔滨 150080)

针对CDMA和WLAN异构网络环境下用户呼叫阻塞率高和系统资源利用率低的问题,提出一种结合Q学习的CDMA/WLAN网络智能接入控制方法。该方法通过将Q学习引入接入控制算法,对网络的进行网络状态离散化处理,并根据各网络所处的状态,驱使网络选择适合自己的用户,进而提高系统资源利用率。仿真结果表明,该方法通过Q学习的在线试错学习,降低了系统阻塞率,从整体上实现两个网络中用户累计回报值的最大化,并获得智能接入的系统状态——动作Q值表。

异构网络;Q学习;接入控制;CDMA;WLAN

现有的CDMA和WLAN网络接入选择策略中,常用的接入算法主要分为三类:①基于终端位置算法[2]是在重叠覆盖区尽可能使用WLAN网络,当用户处于高速移动状态或处于WLAN系统边缘时,会导致切换频率加快;②基于信号强度的方法[3]是通过周期性地测量WCDMA和WLAN网络信号,从而保证服务的持续连接;③基于系统收益的方法[4]引入效用参数,计算目标网络的代价函数,代价最小说明该网络具有最多的资源,从而接入到该网络。

强化学习中的Q学习理论是一种试错的在线学习技术,智能体通过与环境的交互获得经验,并逐步改进其行为策略。随着Q学习算法研究以及应用的越来越广泛,近年来已有学者将Q学习算法应用到网络的接入控制领域,并且取得了一定的成果。……

登录APP查看全文

猜你喜欢
动作用户系统
Smartflower POP 一体式光伏系统
工业设计(2022年8期)2022-09-09 07:43:20
WJ-700无人机系统
ZC系列无人机遥感系统
北京测绘(2020年12期)2020-12-29 01:33:58
动作描写要具体
连通与提升系统的最后一块拼图 Audiolab 傲立 M-DAC mini
动作描写不可少
关注用户
商用汽车(2016年11期)2016-12-19 01:20:16
关注用户
商用汽车(2016年6期)2016-06-29 09:18:54
关注用户
商用汽车(2016年4期)2016-05-09 01:23:12
非同一般的吃饭动作