Search4月24日，浙江大学基础交叉研究院“数学+”交叉研究领域、信息与电子工程学院张朝阳教授团队在IEEE TRANSACTIONS ON WIRELESS COMMUNICATIONS 期刊发表论文“Efficient Initial Access Based on DRL-Empowered Beam Sweeping”。该研究提出了一种基于DRL赋能的波束扫描的新型高效初始接入框架，该框架基于DRL算法，通过训练捕获无线环境特征和用户分布信息，以实现高效的波束扫描。为了解决搜索空间巨大的挑战，进一步设计了两种方法，包括基于码本的DRL搜索和多次采样DRL搜索方法。基于码本的DRL搜索方法考虑到动作空间的可压缩性，根据一定的规则（避免重复扫描和波束间干扰）选取波束扫描模式，构成预定义的波束码本以降低动作空间的维度。该方案具有训练开销低，收敛速度快的优势。而多次采样DRL搜索方法的思路为多次使用同一个动作网络，每次根据策略分布采样得到一个波束后，根据已选的波束更新该分布，以避免重复扫描和波束间干扰，最终经多次采样后得到当前时隙的波束扫描模式。研究团队将基于DRL算法的波束扫描方案在开源的DeepMIMO数据集和QuaDriGa信道生成器上进行了仿真评估。仿真结果表明，在不同的数据集和设定条件下，与现有方法相比，所提出的方案可以节约大量时间开销，大幅提升波束扫描效率。
基于DRL算法的初始接入框架
原文链接：https://ieeexplore.ieee.org/document/10834506
