• 中国计算机学会会刊
  • 中国科技核心期刊
  • 中文核心期刊

J4 ›› 2011, Vol. 33 ›› Issue (6): 118-124.

• 论文 • 上一篇    下一篇

强化学习中基于定性模型的知识传递方法

黄晗文1,2,郑宇3   

  1. (1.湖南大学计算机与通信学院,湖南 长沙 410086;2.湖南工业职业技术学院信息工程系,湖南 长沙 410208;
    3.北京交通大学计算机与信息技术学院,北京 100044)
  • 收稿日期:2010-03-16 修回日期:2010-08-02 出版日期:2011-06-25 发布日期:2011-06-25
  • 作者简介:黄晗文(1976),男,湖南长沙人,硕士,讲师,研究方向为人工智能、网络应用与信息安全。
  • 基金资助:

    省教育厅科学研究项目(09C1134)

HUANG Hanwen1,2,ZHENG Yu3   

  1. (1.School of Computer and Communications,Hunan University,Changsha 410086;
    2.Department of Information Engineering,Hunan Industry Polytechnic,Changsha 410208;
    3.School of Computer and Information Technology,Beijing Jiaotong University,Beijing 100044,China)
  • Received:2010-03-16 Revised:2010-08-02 Online:2011-06-25 Published:2011-06-25

摘要:

本文提出一种基于定性模糊网络的强化学习知识传递方法。该方法通过建立系统的定性模型,并用定性模糊网络抽取基于定性动作的次优策略的共同特征获得与系统参数无关知识。这些知识能有效描述参数值不同的系统所具有的共同控制规律,加快在新参数值的系统中强化学习的收敛速度。

关键词: 强化学习, 定性模型, 知识传递

Abstract:

This paper proposes a new reinforcement learning knowledge transfer method based on a qualitative model. The method defines the qualitative model and extracts the common features of the suboptimal policy to obtain knowledge by qualitative fuzzy networks. The knowledge can represent the common features of the tasks with different parameters. The convergence can be accelerated by the knowledge unrelated to the parameters.

Key words: reinforcement learning;qualitative model;knowledge transfer