基于Q学习的CDMA/WLAN异构网络接入控制算法*
2016-11-30刘惠茹徐玉滨
通信技术 2016年8期
刘惠茹,马 琳,徐玉滨
(1.北京机电工程研究所,北京 100074;2.哈尔滨工业大学 通信技术研究所,黑龙江 哈尔滨 150080)
基于Q学习的CDMA/WLAN异构网络接入控制算法*
刘惠茹1,马 琳2,徐玉滨2
(1.北京机电工程研究所,北京 100074;2.哈尔滨工业大学 通信技术研究所,黑龙江 哈尔滨 150080)
针对CDMA和WLAN异构网络环境下用户呼叫阻塞率高和系统资源利用率低的问题,提出一种结合Q学习的CDMA/WLAN网络智能接入控制方法。该方法通过将Q学习引入接入控制算法,对网络的进行网络状态离散化处理,并根据各网络所处的状态,驱使网络选择适合自己的用户,进而提高系统资源利用率。仿真结果表明,该方法通过Q学习的在线试错学习,降低了系统阻塞率,从整体上实现两个网络中用户累计回报值的最大化,并获得智能接入的系统状态——动作Q值表。
异构网络;Q学习;接入控制;CDMA;WLAN
现有的CDMA和WLAN网络接入选择策略中,常用的接入算法主要分为三类:①基于终端位置算法[2]是在重叠覆盖区尽可能使用WLAN网络,当用户处于高速移动状态或处于WLAN系统边缘时,会导致切换频率加快;②基于信号强度的方法[3]是通过周期性地测量WCDMA和WLAN网络信号,从而保证服务的持续连接;③基于系统收益的方法[4]引入效用参数,计算目标网络的代价函数,代价最小说明该网络具有最多的资源,从而接入到该网络。
强化学习中的Q学习理论是一种试错的在线学习技术,智能体通过与环境的交互获得经验,并逐步改进其行为策略。随着Q学习算法研究以及应用的越来越广泛,近年来已有学者将Q学习算法应用到网络的接入控制领域,并且取得了一定的成果。……
登录APP查看全文
