一种基于PPO的数字孪生边缘赋能智慧工厂任务卸载方法
申请号:CN202510838845
申请日期:2025-06-23
公开号:CN120821510A
公开日期:2025-10-21
类型:发明专利
摘要
本发明公开了一种基于近端策略优化算法(Proximal Policy Optimization,PPO)的数字孪生边缘赋能智慧工厂任务卸载方法,涉及计算机技术领域,包括:将当前智慧工厂场景抽象为数字孪生边缘赋能的智慧工厂网络模型,同时对智慧工厂内的任务进行建模获得多约束任务模型;根据本地设备的功率、信道传输带宽和服务器的计算能力、故障情况建立包括时延、能耗和任务完成率的多约束任务卸载问题模型;基于多约束任务模型和多约束任务卸载问题模型设计PPO网络,将智慧工厂任务卸载问题处理成马尔可夫决策过程,包括状态State、动作Action和奖励Reward;在PPO网络中加入均匀噪声,根据模型建立噪声增强的PPO算法(Noise‑Enhanced Proximal Policy Optimization,Noise‑Enhanced PPO),求解得到最优的任务卸载决策。
技术关键词
卸载方法
备用服务器
均匀噪声
服务器集群
卸载策略
数字孪生体
深度强化学习
时延
服务器运行状态
决策
能耗
逻辑回归模型
神经网络参数
内存
定义
误差函数