arXiv · AI· Rodrigo Reveron-Fonseca·· 1 天前AI 评分20
部分可观测任务中LSTM与MLP性能差距审计:区分记忆优势与时钟信息
Memory or a Clock? Auditing a Memory Advantage in XLand-MiniGrid with Seeds, Maps and Evaluation Noise Apart
AI 导读
在部分可观测XLand-MiniGrid任务中,LSTM智能体比无记忆MLP高出25个百分点,但审计发现主要优势源于时间步信息而非记忆。60次运行显示10对种子可检测10分差距,而二元判决含76%评估噪声。 给无记忆MLP时间步后,其与LSTM差距缩至3.3分,且线性探针能从LSTM状态中读取时间步。 研究建议为无记忆基线提供时间步,并开源了协议、工具及所有检查点。
来源:arXiv · AI · arxiv.org