Visual Jev 4B
S1MB Task Avg
41.0
覆盖 0/137（0%） · 覆盖不足，不参与排名
模型信息
- 厂商
- guanxuyu
- 类别
- 开源权重
- 参数规模
- 4.5B（活跃 4.1B）
- 权重
- 闭源 / 未公开
- 许可证
- 未标注 许可不明
- 输入模态
- 文本
- 决策原语
- ChoiceNoulScore
- 可微调
- 未确认
S1MB · 47 个基准
| 基准 | 类型 | 该模型 | 全场最佳 | 全场均值 | 对比 | 来源 |
|---|---|---|---|---|---|---|
| generalization japanese diverse | Choice | 96.5 | 100.0 | 94.2 | 来源 ↗ | |
| jmteb retrieval | Choice | 90.3 | 98.7 | 90.0 | 来源 ↗ | |
| generalization japanese diverse | Noul | 90.0 | 100.0 | 91.4 | 来源 ↗ | |
| jcommonsenseqa | Choice | 89.2 | 97.9 | 87.6 | 来源 ↗ | |
| generalization vision easy | Choice | 88.6 | 98.6 | 90.7 | 来源 ↗ | |
| generalization japanese knowledge hard | Choice | 87.6 | 99.6 | 88.0 | 来源 ↗ | |
| scienceqa | Choice | 87.5 | 99.5 | 86.7 | 来源 ↗ | |
| cvbench relation | Choice | 84.5 | 96.5 | 79.7 | 来源 ↗ | |
| cvbench depth | Choice | 83.3 | 93.3 | 77.6 | 来源 ↗ | |
| sugarcrepe | Choice | 83.3 | 95.2 | 80.9 | 来源 ↗ | |
| nights | Choice | 82.5 | 92.0 | 75.3 | 来源 ↗ | |
| pope | Noul | 77.3 | 80.0 | 73.0 | 来源 ↗ | |
| generalization vision easy | Noul | 76.8 | 100.0 | 87.4 | 来源 ↗ | |
| commonsensemoralja | Noul | 74.7 | 89.3 | 67.8 | 来源 ↗ | |
| nlvr2 | Noul | 73.9 | 88.9 | 59.2 | 来源 ↗ | |
| cvbench distance | Choice | 70.1 | 79.9 | 59.3 | 来源 ↗ | |
| jmmlu japan | Choice | 64.4 | 94.2 | 68.4 | 来源 ↗ | |
| kuci | Choice | 61.8 | 85.8 | 64.3 | 来源 ↗ | |
| rvlcdip | Choice | 61.6 | 77.6 | 61.4 | 来源 ↗ | |
| tallyqa | Score | 60.0 | 72.0 | 48.0 | 来源 ↗ | |
| jnli | Choice | 56.5 | 87.5 | 68.4 | 来源 ↗ | |
| mvtec ad | Noul | 48.9 | 76.9 | 51.0 | 来源 ↗ | |
| mmmlu | Choice | 44.4 | 78.2 | 52.8 | 来源 ↗ | |
| jsts | Score | 43.4 | 69.9 | 55.3 | 来源 ↗ | |
| jsem | Choice | 40.4 | 69.2 | 45.9 | 来源 ↗ | |
| generalization vision easy | Score | 39.2 | 79.7 | 50.0 | 来源 ↗ | |
| jamp | Choice | 38.0 | 81.5 | 50.0 | 来源 ↗ | |
| vsr | Noul | 37.6 | 77.6 | 48.0 | 来源 ↗ | |
| mmlu prox ja | Choice | 29.1 | 69.5 | 39.5 | 来源 ↗ | |
| generalization vision hard | Choice | 27.6 | 84.1 | 48.5 | 来源 ↗ | |
| mintaka ja boolean | Noul | 27.3 | 68.0 | 37.5 | 来源 ↗ | |
| jsick sts | Score | 25.7 | 61.5 | 40.1 | 来源 ↗ | |
| visa | Noul | 24.9 | 73.4 | 29.3 | 来源 ↗ | |
| generalization vision hard | Noul | 22.7 | 84.9 | 47.9 | 来源 ↗ | |
| generalization japanese knowledge hard | Noul | 22.7 | 87.3 | 50.6 | 来源 ↗ | |
| janli | Choice | 21.5 | 88.9 | 41.7 | 来源 ↗ | |
| generalization japanese knowledge hard | Score | 20.9 | 84.6 | 45.3 | 来源 ↗ | |
| sobaco culture | Choice | 17.0 | 80.5 | 30.6 | 来源 ↗ | |
| generalization japanese math formal hard | Choice | 13.3 | 48.4 | 21.0 | 来源 ↗ | |
| gpqa ja main | Choice | 12.0 | 54.7 | 20.9 | 来源 ↗ | |
| jamc qa | Choice | 7.1 | 65.3 | 23.0 | 来源 ↗ | |
| jcola | Noul | 4.0 | 57.2 | 21.6 | 来源 ↗ | |
| generalization japanese math formal hard | Noul | 3.3 | 34.7 | 10.6 | 来源 ↗ | |
| jculture mcq | Noul | 0.4 | 44.3 | 12.8 | 来源 ↗ | |
| generalization japanese math formal hard | Score | 0.0 | 6.9 | 0.9 | 来源 ↗ | |
| generalization vision hard | Score | 0.0 | 49.2 | 19.9 | 来源 ↗ | |
| koniq | Score | 0.0 | 51.8 | 8.2 | 来源 ↗ |