ホーム /ベンチマーク・評価・較正 /JevBench

JevBench

Jev クラスの決定モデル向けのベンチマークです。範囲の定まったルーブリックを入力し、選択肢ごとの確率つきの型付き回答を得ます。カスケードと委員会の実験は別に報告されています。

このページは英語版リストから生成しています。

readme より

JevBench — Benchmark for AI Decision Models Jev is TypeSafe AI's decision model; JevBench also evaluates Jev-compatible systems. The canonical JevBench board is https://benchmarkheaven.com/jev-models. Current results and scoring JevBench by Benchmark Heaven is a benchmark for AI decision models, including Jev-compatible systems. It measures typed decision …

詳細

セクション
ベンチマーク・評価・較正
owner
fstandhartinger
スター
330
フォーク
30
最終更新
2026-10-15
言語
Python
ライセンス
MIT

これは何か

形態
データセットやベンチマーク
ホストエージェント
単体で動作
対象
研究者
成熟度
ドキュメント
実測値を報告していますJev の呼び出しが不明確です

こんなときに役立ちます

近い用途