zero-shot-ie-bench
38 个零样本信息抽取与分类系统的横向对比,含本地模型、cross-encoder、以及通过 OpenRouter 调用的类型化决策引擎,覆盖 9 种语言。
38 个零样本信息抽取与分类系统的横向对比,含本地模型、cross-encoder、以及通过 OpenRouter 调用的类型化决策引擎,覆盖 9 种语言。
评估集信息
- 所属套件
- Agent 决策
- 分组
- C Agent 与工具调用
- 决策类型
- 抽取 / 分类
- 主指标
- accuracy + 延迟 + 成本
- 优化方向
- 越高越好
- 参评模型
- 0 个
- 数据许可证
- 见官方页面
这个评估集测什么
38 个零样本信息抽取与分类系统的横向对比,含本地模型、cross-encoder、以及通过 OpenRouter 调用的类型化决策引擎,覆盖 9 种语言。
在该评估集上的模型成绩(0 个)
暂无模型在该评估集上的公开成绩。