跳到正文
热点事件观察中

Sys1Cal-v1概率校准数据集发布

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

2026年9月30日,Hugging Face 发布 Sys1Cal-v1 基准数据集,用于直接评估结构化概率输出,而非仅检查预测类别的置信度。据该报道,在 Jev 上测试发现,Noul 和 Score 的概率接近真实值,而二元 Choice 输出存在系统性非线性失真,可通过引入潜在第三分量 Uncertain 建模。数据集与评估代码已公开,支持在其他结构化决策模型上复现。

AI 根据报道生成 · 4 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

9月30日
  1. HF blog
    Hugging Face 发布 Sys1Cal-v1 数据集:评估 Jev 等结构化概率输出的校准问题

    Hugging Face 发布 Sys1Cal-v1 基准数据集,用于直接评估结构化概率输出而非仅检查预测类别的置信度。在 Jev 上测试发现,Noul 和 Score 的概率接近真实值,而二元 Choice 输出存在系统性非线性失真,可通过引入潜在第三分量 Uncertain 建模。数据集与评估代码已公开,支持在其他结构化决策模型上复现。

本事件热度走势

当前热度 4·可比范围峰值 4(10月1日 15:00)·近 24 小时可比范围变化 –

0123410月1日15:0010月1日16:0010月1日17:0010月1日18:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。