跳到正文
arXiv · AI· Mohamed Elsayed, Minh Pham, A. Rupam Mahmood·· 24 天前AI 评分29

SRM:基于单步 BPTT 的流式循环记忆架构

Streaming Recurrent Memory

AI 导读

SRM 提出了一种专为流式学习设计的循环记忆架构,在不存储原始经验的前提下,通过单步 BPTT 即可有效训练。 该架构支持按内容或时间召回过去信息,并能追踪经过的步数。在关联回忆、在线语言建模及延迟奖励 T-Maze 任务中,SRM 性能优于循环基线,且接近完美成功率。

来源:arXiv · AI · arxiv.org