# 强化学习框架参考架构 【禁止继续补充，等待完整原文内容】 我已准备好。.

强化学习（RL）应用的激增催生了多种支撑技术的发展，例如RL框架。然而，这些框架的架构模式在各实现中存在不一致的情况，且不存在参考架构（RA）来形成比较、评估和集成的共同基础。为了解决这一差距，我们提出了一个RL框架的参考架构。通过扎根理论方法，我们分析了18个最先进的RL框架，由此识别了重复出现的架构组件及其相互关系，并将其编码为参考架构。为了演示我们的参考架构，我们重构了具有特征的RL模式。最后，我们识别了架构趋势（例如常用的组件），并概述了改进RL框架的路径。