首页 / 模型 / JADE

JADE

Name: JADE
Author: theunnecessarythings

theunnecessarythings ChoiceNoulScore 27B（活跃 26B） Decision IndexS1MB

Hugging Face 权重 Decision Index 排行榜 S1MB 排行榜

S1MB Task Avg

61.2

第 27 名 · 覆盖 137/137（100%）

Decision Index Full

55.6

第 75 名 · public 53.4

校准 ECE

0.238

越低越好 · Brier 0.510

模型信息

厂商: theunnecessarythings
类别: 开源权重
参数规模: 27B（活跃 26B）
基座模型: Qwen/Qwen3.8-27B
权重: 闭源 / 未公开
许可证: 未标注许可不明
输入模态: 文本
决策原语: ChoiceNoulScore
可微调: 未确认
训练方式: LoRA

数据来源与链接

Hugging Face 权重 Decision Index 排行榜 S1MB 排行榜

本站聚合自： Decision Index、S1MB。分数与链接均指向原始出处。

Decision Index 领域得分

知识与推理

66.2

语言理解

81.5

检索与分类

64.6

工具与自动化

93.6

艺术与人类品味

56.4

S1MB · 137 个基准

基准	类型	该模型	全场最佳	全场均值	来源
open jev / browser control v1	Choice	100.0	100.0	76.5	来源 ↗
open jev / citation control v1	Choice	100.0	100.0	55.9	来源 ↗
open jev / customer control v1	Noul	100.0	100.0	68.3	来源 ↗
open jev / drone control v1	Noul	100.0	100.0	63.8	来源 ↗
open jev / email selection control v1	Choice	100.0	100.0	38.4	来源 ↗
open jev / email selection control v1	Noul	100.0	100.0	56.9	来源 ↗
open jev / entity alignment control v1	Noul	100.0	100.0	50.6	来源 ↗
open jev / mailroom control v1	Choice	100.0	100.0	89.6	来源 ↗
open jev / painting geometry v1	Choice	100.0	100.0	60.5	来源 ↗
open jev / painting geometry v1	Score	100.0	100.0	29.7	来源 ↗
open jev / phone extraction control v1	Noul	100.0	100.0	63.9	来源 ↗
open jev / silent failure control v1	Noul	100.0	100.0	49.8	来源 ↗
open jev / vizdoom basic v1	Noul	100.0	100.0	53.2	来源 ↗
s1mb generalization contextual choice	Choice	100.0	100.0	88.7	来源 ↗
open jev / sponsor segment control v1	Choice	98.7	100.0	66.4	来源 ↗
s1mb generalization diverse choice	Choice	98.7	100.0	78.1	来源 ↗
arc	Choice	98.5	98.5	73.8	来源 ↗
dbpedia	Choice	97.8	98.9	88.9	来源 ↗
open jev / vizdoom basic v1	Score	97.7	100.0	42.3	来源 ↗
s1mb generalization contextual score	Score	96.1	99.3	52.6	来源 ↗
s1mb generalization diverse noul	Noul	96.0	100.0	70.7	来源 ↗
s1mb generalization diverse score	Score	95.6	97.6	52.7	来源 ↗
bbq	Choice	95.0	98.3	64.5	来源 ↗
openbookqa	Choice	94.4	98.6	64.4	来源 ↗
open jev / context retention control v1	Noul	94.0	100.0	35.2	来源 ↗
open jev / ir control v1	Noul	92.9	100.0	60.3	来源 ↗
s1mb generalization contextual noul	Noul	92.0	100.0	72.1	来源 ↗
argument quality	Choice	91.8	95.9	53.3	来源 ↗
open jev / amount extraction control v1	Noul	90.6	100.0	44.2	来源 ↗
open jev / reasoning control v1	Choice	90.0	100.0	41.7	来源 ↗
miqa	Choice	88.6	97.7	71.1	来源 ↗
open jev / mailroom control v1	Noul	88.3	100.0	73.2	来源 ↗
quartz	Choice	88.1	90.5	59.4	来源 ↗
open jev / ir control v1	Choice	88.0	88.0	55.5	来源 ↗
massive	Choice	87.9	97.8	73.4	来源 ↗
hwu64	Choice	87.2	95.7	67.3	来源 ↗
laya / enron spam	Noul	86.0	100.0	64.9	来源 ↗
sdoh nli	Noul	86.0	100.0	70.0	来源 ↗
clinc	Choice	85.5	99.3	70.5	来源 ↗
open jev / reasoning control v1	Score	85.0	96.3	38.3	来源 ↗
open jev / phone extraction control v1	Choice	84.8	100.0	44.4	来源 ↗
open jev / workflow controls v1 / security incidents	Noul	84.5	100.0	50.0	来源 ↗
open jev / amount extraction control v1	Choice	84.3	100.0	63.2	来源 ↗
hatecheck	Noul	84.0	100.0	57.5	来源 ↗
mtop	Choice	83.4	93.2	67.4	来源 ↗
open jev / customer control v1	Choice	82.6	82.6	71.5	来源 ↗
laya / ag news	Choice	82.1	94.0	77.7	来源 ↗
open jev / workflow controls v1 / agent trace observability	Noul	82.0	100.0	39.4	来源 ↗
babi nli	Noul	82.0	96.0	48.5	来源 ↗
hans	Noul	82.0	100.0	53.1	来源 ↗
open jev / workflow controls v1 / invoice processing	Noul	80.4	100.0	47.0	来源 ↗
lonli	Choice	80.3	98.4	52.8	来源 ↗
creak	Noul	80.0	90.0	48.2	来源 ↗
qasper	Noul	80.0	88.0	51.4	来源 ↗
arct	Choice	76.6	89.4	49.3	来源 ↗
gsm8k	Choice	75.7	95.7	38.0	来源 ↗
few nerd	Choice	75.3	87.8	52.9	来源 ↗
scitail	Noul	74.0	98.0	63.4	来源 ↗
winobias	Choice	73.9	95.7	42.7	来源 ↗
banking77	Choice	72.6	93.7	64.2	来源 ↗
paws	Noul	70.0	92.0	52.5	来源 ↗
open jev / customer control v1	Score	69.2	99.3	44.4	来源 ↗
open jev / painting geometry v1	Noul	68.6	100.0	42.0	来源 ↗
contract nli	Choice	68.5	81.6	43.0	来源 ↗
canttalk	Noul	68.0	92.0	50.5	来源 ↗
scone	Choice	68.0	98.0	48.5	来源 ↗
defeasible nli	Choice	67.4	89.1	43.1	来源 ↗
ethics	Choice	66.7	100.0	28.5	来源 ↗
gretel pii	Choice	65.9	94.8	51.1	来源 ↗
synthetic relevance / nanocoir	Noul	65.3	73.6	42.2	来源 ↗
synthetic relevance / nanobeir / nanonq	Noul	64.2	72.7	48.0	来源 ↗
open jev / entity alignment control v1	Score	63.8	100.0	18.4	来源 ↗
open jev / workflow controls v1 / customer service	Noul	63.3	100.0	53.7	来源 ↗
ethics	Noul	63.2	80.6	33.4	来源 ↗
scicite	Choice	62.9	74.2	49.4	来源 ↗
crows pairs	Choice	62.5	77.1	37.9	来源 ↗
synthetic relevance / nanobeir / nanomsmarco	Noul	60.8	64.1	45.3	来源 ↗
impli	Noul	60.0	96.0	57.1	来源 ↗
open jev / reasoning control v1	Noul	58.1	100.0	34.3	来源 ↗
ruletaker	Noul	58.0	100.0	39.3	来源 ↗
aqua rat	Choice	57.8	83.1	19.7	来源 ↗
synthetic relevance / nanobeir / nanomsmarco	Score	57.3	57.3	25.0	来源 ↗
snli	Choice	54.8	98.4	59.9	来源 ↗
synthetic relevance / nanobeir / nanohotpotqa	Score	54.5	71.8	20.9	来源 ↗
synthetic relevance / nanobeir / nanohotpotqa	Noul	53.2	78.9	36.1	来源 ↗
synthetic relevance / nanobeir / nanofiqa2018	Noul	52.2	58.0	35.3	来源 ↗
synthetic relevance / nanobeir / nanodbpedia	Score	50.3	50.3	23.4	来源 ↗
ethos	Noul	50.0	76.0	49.5	来源 ↗
robust lr	Choice	50.0	98.3	29.3	来源 ↗
followir robust04	Noul	49.9	90.9	53.7	来源 ↗
synthetic relevance / nanobeir / nanotouche2020	Score	49.4	49.4	25.5	来源 ↗
synthetic relevance / nanobeir / nanonq	Score	48.3	54.3	13.3	来源 ↗
synthetic relevance / nanobeir / nanotouche2020	Noul	48.2	48.2	32.3	来源 ↗
boardgameqa	Choice	46.9	90.6	24.4	来源 ↗
synthetic relevance / nanobeir / nanofiqa2018	Score	46.2	49.0	21.0	来源 ↗
ud ewt	Choice	44.3	96.0	19.6	来源 ↗
aegis2	Noul	44.2	68.3	39.6	来源 ↗
winowhy	Noul	44.0	66.0	25.9	来源 ↗
go emotions	Noul	43.0	63.4	42.1	来源 ↗
synthetic relevance / nanobeir / nanodbpedia	Noul	42.3	53.2	33.8	来源 ↗
stepgame	Choice	41.7	82.1	24.8	来源 ↗
wiqa	Choice	41.3	68.3	24.0	来源 ↗
synthetic relevance / nanobeir / nanonfcorpus	Score	40.9	40.9	15.8	来源 ↗
synthetic relevance / nanocoir	Score	40.9	43.8	6.8	来源 ↗
open jev / snake v1	Choice	40.2	83.5	18.3	来源 ↗
laya / typed decisions	Noul	39.5	49.2	29.9	来源 ↗
synthetic relevance / nanobeir / nanoarguana	Noul	39.4	53.5	22.0	来源 ↗
temporal nli	Choice	38.7	100.0	28.0	来源 ↗
lexcomp	Noul	38.0	60.0	27.7	来源 ↗
laya / typed decisions	Score	36.8	76.0	35.4	来源 ↗
synthetic relevance / nanobeir / nanoscidocs	Noul	36.0	48.5	21.5	来源 ↗
patent similarity	Score	35.5	53.0	24.0	来源 ↗
synthetic relevance / nanobeir / nanonfcorpus	Noul	34.6	49.7	29.6	来源 ↗
open jev / ir control v1	Score	33.5	100.0	23.0	来源 ↗
synthetic relevance / nanobeir / nanoarguana	Score	33.5	43.2	10.3	来源 ↗
civil comments	Noul	33.0	52.8	25.2	来源 ↗
sgd	Choice	32.2	96.6	28.6	来源 ↗
cladder	Noul	32.0	94.0	28.5	来源 ↗
synthetic relevance / nanobeir / nanoscidocs	Score	29.7	36.7	10.7	来源 ↗
laya / typed decisions	Choice	29.2	35.7	23.3	来源 ↗
esci	Choice	28.8	49.3	17.5	来源 ↗
followir core17	Noul	28.0	46.6	25.2	来源 ↗
followir news21	Noul	22.0	58.0	18.4	来源 ↗
argument quality	Noul	18.4	30.2	7.8	来源 ↗
hh rlhf	Choice	17.9	33.3	4.5	来源 ↗
spartqa	Choice	17.7	93.5	14.0	来源 ↗
fol nli	Choice	16.4	75.4	17.3	来源 ↗
open jev / snake v1	Noul	16.2	100.0	19.1	来源 ↗
open jev / tic tac toe v1	Choice	12.9	54.5	5.1	来源 ↗
logical entailment	Noul	12.0	84.0	18.7	来源 ↗
tracie	Noul	8.0	68.0	14.4	来源 ↗
nlsat	Noul	2.0	22.0	3.2	来源 ↗
corr2cause	Choice	0.0	91.7	9.3	来源 ↗
open jev / drone control v1	Choice	0.0	100.0	13.4	来源 ↗
open jev / drone control v1	Score	0.0	100.0	7.2	来源 ↗
plane	Noul	0.0	100.0	12.6	来源 ↗
poem sentiment	Choice	0.0	68.6	9.3	来源 ↗

Decision Index · 42 个基准

基准	类型	该模型	全场最佳	全场均值	来源
ARC-Easy	混合（Choice	99.0	99.5	89.5	来源 ↗
BFCL	混合（Choice	97.0	98.8	86.6	来源 ↗
ARC-Challenge	混合（Choice	96.6	98.2	82.4	来源 ↗
HellaSwag	混合（Choice	94.5	98.5	79.5	来源 ↗
BPoMP	混合（Choice	91.7	99.5	80.0	来源 ↗
FinEntity	混合（Choice	87.9	97.1	81.3	来源 ↗
CLINC150	混合（Choice	87.6	97.6	79.6	来源 ↗
NLI4CT	混合（Choice	83.9	88.3	72.9	来源 ↗
MMLU	混合（Choice	83.5	91.9	68.0	来源 ↗
API-Bank	混合（Choice	83.4	93.1	67.4	来源 ↗
WinoGrande	混合（Choice	83.3	97.5	75.9	来源 ↗
RouterBench	混合（Choice	79.8	80.1	74.4	来源 ↗
BBH	混合（Choice	79.0	96.2	64.7	来源 ↗
BANKING77	混合（Choice	78.5	94.2	78.1	来源 ↗
HoVer	混合（Choice	76.8	90.8	73.2	来源 ↗
When2Call	混合（Choice	75.4	93.8	70.1	来源 ↗
ContractNLI	混合（Choice	74.6	86.7	69.6	来源 ↗
CLadder	混合（Choice	72.3	97.7	70.3	来源 ↗
New Yorker	混合（Choice	70.3	88.3	60.8	来源 ↗
CRUXEval	混合（Choice	69.3	100.0	57.7	来源 ↗
RAGTruth	混合（Choice	67.0	86.2	64.5	来源 ↗
GSM8K	混合（Choice	65.1	92.6	47.4	来源 ↗
ToolRet	混合（Choice	64.6	75.7	59.9	来源 ↗
ANLI	混合（Choice	64.2	98.6	59.8	来源 ↗
MMLU-Pro	混合（Choice	64.2	82.1	47.7	来源 ↗
cfcolor	混合（Choice	62.9	72.9	60.1	来源 ↗
MuSR	混合（Choice	62.9	92.0	59.8	来源 ↗
VAST	混合（Choice	62.6	84.2	61.5	来源 ↗
Humicroedit	混合（Choice	62.0	75.1	59.7	来源 ↗
iSarcasmEval	混合（Choice	60.9	78.5	45.3	来源 ↗
PhishNChips	混合（Choice	56.5	99.9	69.4	来源 ↗
Amazon ESCI	混合（Choice	55.8	65.0	47.4	来源 ↗
Home appliances	混合（Choice	54.5	100.0	43.9	来源 ↗
BRIGHT	混合（Choice	47.8	51.5	38.8	来源 ↗
GPQA Diamond	混合（Choice	45.9	75.5	40.1	来源 ↗
Habermas	混合（Choice	44.9	71.8	46.7	来源 ↗
SGD	混合（Choice	34.9	85.8	45.5	来源 ↗
ACOS	混合（Choice	26.8	68.0	24.9	来源 ↗
SATA-Bench	混合（Choice	23.1	62.2	24.8	来源 ↗
POP909	混合（Choice	19.8	86.1	29.7	来源 ↗
ChessBench	混合（Choice	16.5	40.2	16.4	来源 ↗
HLE	混合（Choice	9.6	20.0	12.8	来源 ↗