Amazon Science 开源 Turnstile:在代理层捕获 token ID 以改进强化学习
Amazon Science 发布 Turnstile,一个用 Rust 编写的代理,位于智能体 harness 与推理后端之间,在生成时刻记录模型采样的精确 token ID、逐 token 对数概率、损失掩码和权重版本边界,并导出与框架无关的训练轨迹。
推荐理由:Turnstile 把 token 级轨迹采集从 harness 挪到代理层,读者可据此理解智能体 RL 训练数据为何容易失真。