面向TCP协议的基于Q-learning的卫星网络拥塞控制方法及控制系统

面向TCP协议的基于Q‑learning的卫星网络拥塞控制方法及控制系统，涉及网络传输拥塞控制领域，解决目前已有强化学习的拥塞控制方法不适用于卫星网络场景应用的问题，本发明方法通过控制系统实现，所述控制系统包括执行器、转发器和功能模块；该方法实现了适用于强化学习算法的用户态接口与对应的openAI Gym的标准强化学习环境，并提供卫星网络仿真训练环境和基于动态可视化组件。同时考虑到卫星端上算力有限，卫星网络高延迟的特点，进一步设计并实现了基于Q‑learning与瓦片编码的轻量化数据驱动TCP拥塞控制方法。该方法设计了全新的离散动作空间，在保障算法收敛性的同时实现了模型轻量化。