欢迎光临
我们一直在努力

2025_NIPS_Parameterizing Non-Parametric Meta-Reinforcement Learning Tasks via Subtask Decomposition

文章核心总结与翻译

一、主要内容

文章聚焦元强化学习(meta-RL)在非参数化任务变异场景下的泛化难题,提出了“子任务分解与虚拟训练(SDVT)”方法。该方法通过高斯混合变分自编码器(GMVAE)将非参数化任务分解为共享的基础子任务,基于子任务构成实现任务参数化;同时设计虚拟训练流程,生成假想子任务组合以提升对未见过子任务构成的泛化能力。在Meta-World ML-10和ML-45基准测试中,SDVT及其轻量化版本SDVT-LW显著超越现有最优方法,测试成功率分别提升约1.7倍和1.3倍。

二、创新点

  • 非参数化任务参数化方案:通过子任务分解实现非参数化任务的有效表征,即使任务间无简单参数关联,也能利用共享子任务复用已有策略。
  • GMVAE驱动的子任务分解:元学习子任务集合及任务分解过程,通过类别型和高斯型 latent 上下文捕获子任务构成及参数信息。
  • 面向非参数变异的虚拟训练:基于学到的动力学解码器生成假想子任务组合,针对性提升对未见过子任务构成的泛化能力。
  • 占用正则化机制:自动适配最优子任务数量,无需先验知识,通过惩罚高维子任务占用实现高效分解。

  • 三、核心部分翻译(Markdown格式)

    Abstract(摘要)

    元强

    赞(0)
    未经允许不得转载:171主机测评 » 2025_NIPS_Parameterizing Non-Parametric Meta-Reinforcement Learning Tasks via Subtask Decomposition
    分享到: 更多 (0)

    评论 抢沙发

    • 昵称 (必填)
    • 邮箱 (必填)
    • 网址