摘要
本发明涉基于深度强化学习的SDN/NFV卫星网络动态SFC部署方法,所述方法包括如下步骤:S1、构建三层SDN/NFV卫星网络架构:搭建具有应用管理层‑控制层‑数据转发层的卫星网络架构,使用虚拟拓扑模式实现动态网络映射;S2、定义SFC部署问题建模:将SFC部署问题以MDP建模,同时在定义中加入对SFC约束的限制,部署面向SFC的QoS约束及QoE进行综合优化;S3、通过动态部署决策算法求解最优部署方法:针对SFC动态部署问题提出基于深度强化学习的编排方法,其具有捕捉网络环境状态变化序列能力,在满足SFC的QoS约束下最大化QoE,实现最优动态VNF部署。本发明将多种网络指标进行计算,同时在MDP建模中考虑到SFC链部署的资源约束性质,在传统的奖励机制中为不同的约束条件分配了惩罚项,实现了面向SFC的QoS约束以及QoE体验的综合优化。
技术关键词
深度强化学习
VNF实例
卫星网络架构
动态
编排方法
链路状态信息
网络状态信息
定义
决策算法
资源管理策略
费希纳定律
QoS指标
代表
网络拓扑结构
深度Q网络
贪心策略
贪心算法
系统为您推荐了相关专利信息
强化学习环境
三维内窥镜
多智能体强化学习
深度强化学习
强化学习模型
蝙蝠算法
拓扑优化方法
启发式算法
拓扑优化结构
密度
雷电预测方法
大气电场仪
实时数据
雷达
图像金字塔
飞轮储能阵列
状态反馈控制方法
飞轮储能单元
动态反馈控制
马尔可夫链模型
嵌入式软件
国密算法
代码依赖关系
谱聚类算法
高风险