首页 /基准、评测与校准 /jev-orderby-bench
jev-orderby-bench
衡量按 Jev 概率做 ORDER BY 是否站得住脚：成对逆序、Score 与人工评级的序数一致性、校准，以及预注册门禁下的措辞不变性；在 20 Newsgroups 主题上通过，在 Amazon ESCI 商品相关性上六项条件中有四项不通过，并表明通过 DuckDB 扩展做 40 行批量状态会不通过排序门禁，而每请求一行则通过。
本页由英文清单自动生成。
来自 readme
jev-orderby-bench Does ORDER BY over a Jev probability put rows in a defensible order? An independent measurement of TypeSafe AI's Jev (jev-1.13.0) on the properties a semantic sort actually depends on: pairwise inversion rate, Score ordinality against a graded target, and whether the probabilities move with evidence or with wording. Calibration (ECE, …
详情
- 分区
- 基准、评测与校准
- owner
- yodablocks
- 星标
- 0
- 复刻
- 0
- 最近提交
- 2026-09-20
- 语言
- Python
- 许可证
- MIT
- claim
- pre-registered
这是什么
- 形态
- 数据集或基准
- 宿主智能体
- 独立运行
- 面向人群
- 研究人员
成熟度
文档
报告了实测数据