Amazon Science 官方研究博客·2026-07-09 15:00· 2026-07-09精选AI 评分62

Amazon Science 开源 Turnstile：在代理层捕获 token ID 以改进强化学习

Capturing token IDs during agentic interactions for better reinforcement learning

AI 导读

Amazon Science 发布 Turnstile，一个用 Rust 编写的代理，位于智能体 harness 与推理后端之间，在生成时刻记录模型采样的精确 token ID、逐 token 对数概率、损失掩码和权重版本边界，并导出与框架无关的训练轨迹。

推荐理由

Turnstile 把 token 级轨迹采集从 harness 挪到代理层，读者可据此理解智能体 RL 训练数据为何容易失真。